İçerik geçerliliği, bir testin ölçmeyi amaçladığı davranış veya bilgi yelpazesinin tamamını ne ölçüde örneklediğini ifade eder. Yüksek içerik geçerliliğine sahip bir test, kapsamayı iddia ettiği alanı kapsar ve alakasız materyallere madde harcamaz.

Tarih dersinde yapılan final sınavı için içerik geçerliliği, soruların derste öğretilen konuları ve becerileri temsil etmesini, belirsiz yan konuları veya hiç işlenmemiş materyalleri içermemesini gerektirir. Sürücü belgesi sınavı için ise maddeler ve görevler, güvenli sürüş için gereken gerçek yetkinlikleri yansıtmalıdır. İçerik geçerliliğinin sağlanması genellikle uzman görüşü gerektirir: uzmanlar, yeterli kapsamı ve uygun vurguyu doğrulamak için sınav taslağını ve maddeleri inceler.

İçerik geçerliliği, diğer geçerlilik biçimlerinden farklıdır. Bir test, alanını iyi örnekleyebilir ancak yine de gelecekteki performansı tahmin edemeyebilir (düşük ölçüt geçerliliği) veya ölçmeyi amaçladığı teorik yapıyı ölçemeyebilir (düşük yapı geçerliliği). Yine de, içerik geçerliliği olmadan, puanların yorumlanması baştan itibaren sorgulanabilir hale gelir.

Doğru materyal hakkında doğru soruları soran bir test, içerik geçerliliğine sahiptir. Bu, diğer geçerlilik biçimlerinin üzerine inşa edildiği temeldir.