내용 타당도는 시험이 측정하고자 하는 행동이나 지식의 전체 범위를 얼마나 잘 반영하는지를 나타내는 정도입니다. 내용 타당도가 높은 시험은 측정하고자 하는 영역을 정확하게 포괄하며, 관련성이 떨어지는 내용에 문항을 낭비하지 않습니다.

역사 과목 기말고사의 경우, 내용 타당성을 확보하려면 문제가 수업에서 다룬 주제와 기술을 반영해야 하며, 모호한 부차적인 문제나 전혀 다루어지지 않은 내용을 포함해서는 안 됩니다. 운전면허 시험의 경우에도 문항과 과제는 안전 운전에 필요한 실제 역량을 반영해야 합니다. 내용 타당성을 확립하는 과정에는 일반적으로 전문가의 판단이 필요합니다. 전문가들은 시험 설계도와 문항을 검토하여 적절한 범위와 강조점을 확인하는 역할을 합니다.

내용 타당도는 다른 형태의 타당도와는 구별됩니다. 검사가 해당 영역을 잘 표본 추출하더라도 미래의 수행 능력을 예측하지 못하거나(낮은 준거 타당도) 측정하고자 했던 이론적 구성 개념을 제대로 측정하지 못할 수 있습니다(낮은 구성 타당도). 하지만 내용 타당도가 확보되지 않으면 점수 해석 자체가 처음부터 의심스러워집니다.

올바른 내용에 대해 올바른 질문을 하는 시험은 내용 타당성을 갖습니다. 이는 다른 형태의 타당성이 구축되는 토대입니다.