Содержательная валидность — это степень, в которой тест охватывает весь спектр поведения или знаний, которые он призван измерять. Тест с высокой содержательной валидностью охватывает заявленную область и не содержит лишних заданий, содержащих нерелевантный материал.

Для итогового экзамена по истории содержательная валидность требует, чтобы вопросы отражали темы и навыки, преподаваемые в курсе, а не малоизвестные второстепенные вопросы или материал, никогда не рассматривавшийся. Для экзамена по вождению задания и вопросы должны отражать реальные компетенции, необходимые для безопасного вождения. Установление содержательной валидности обычно включает в себя экспертную оценку: специалисты изучают план экзамена и задания, чтобы подтвердить адекватное охват и соответствующее акцентирование внимания.

Содержательная валидность отличается от других форм валидности. Тест может хорошо охватывать свою предметную область, но при этом не предсказывать будущие результаты (низкая критериальная валидность) или не измерять теоретический конструкт, который он должен был измерять (низкая конструктивная валидность). Тем не менее, без содержательной валидности интерпретация результатов с самого начала становится сомнительной.

Тест, задающий правильные вопросы по правильному материалу, обладает содержательной валидностью. Это основа, на которой строятся другие формы валидности.