contentvalidity (3) 썸네일형 리스트형 내용 타당도를 훼손하는 가장 흔한 오류들 — 영어능력평가론 시리즈 ⑫이 글은 영어능력평가론 시리즈의 열두 번째 글이다. 앞선 글 「내용 타당도는 어떻게 검토하고 판단해야 하는가」에서는 내용 타당도를 실제 평가 과정에서 어떻게 검토하고 판단해야 하는지를 살펴보았다. 이 글에서는 실제 평가 현장에서 내용 타당도를 훼손하는 대표적인 오류들이 무엇인지, 그리고 왜 이러한 오류가 반복되는지를 중심으로 설명한다. 다음 글에서는 내용 타당도를 넘어 구인 타당도(construct validity) 로 논의를 확장한다.많은 시험은 형식적으로는 잘 만들어진 것처럼 보인다. 문항 수는 충분하고, 난이도도 적절해 보이며, 외형적으로는 완성도가 높다. 그러나 이러한 시험이 항상 타당한 것은 아니다. 특히 내용 타당도는 시험의 외형만으로 판단하기 어렵기 때문에, 설계 .. 내용 타당도는 어떻게 검토하고 판단해야 하는가 — 영어능력평가론 시리즈 ⑪내용 타당도의 중요성을 이해했다고 해서 자동으로 타당한 시험이 만들어지는 것은 아니다. 내용 타당도는 선언이 아니라 검토 과정에서 확보되는 특성이다. 시험 설계자는 시험이 측정하려는 능력을 정의하는 것에서 멈추지 않고, 그 정의가 시험 내용에 어떻게 구현되었는지를 체계적으로 점검해야 한다.앞선 글 「내용 타당도는 무엇이며 왜 시험 설계의 출발점이 되는가」에서는 내용 타당도의 기본 개념과 시험 설계에서의 역할을 살펴보았다. 이번 글에서는 내용 타당도를 실제 평가 현장에서 어떻게 검토하고 판단해야 하는지를 단계별로 설명한다. 이 과정은 시험 설계의 직관을 검증하는 절차이자 평가의 책임성을 확보하는 핵심 과정이다.측정 대상의 명확한 정의내용 타당도 검토는 시험 문항을 보기 전에 시작.. 내용 타당도는 무엇이며 왜 시험 설계의 출발점이 되는가 — 영어능력평가론 시리즈 ⑩타당도에 대한 논의가 추상적으로 느껴지는 이유는 많은 경우 그 개념이 실제 시험 설계 과정과 분리되어 설명되기 때문이다. 그러나 평가 실무에서 타당도는 매우 구체적인 질문에서 출발한다.시험은 무엇을 묻고 있는가, 그리고 그 질문은 측정하려는 능력을 제대로 대표하고 있는가라는 질문이 바로 그것이다. 이 질문에 답하는 과정이 내용 타당도(content validity) 논의의 핵심이다.앞선 글 「타당도 관점의 변화는 시험 설계를 어떻게 바꾸었는가」에서는 현대적 타당도 관점이 시험 설계 전반에 어떤 영향을 미쳤는지를 살펴보았다. 이번 글에서는 타당도를 구성하는 첫 번째 핵심 근거인 내용 타당도가 무엇이며 왜 시험 설계의 출발점으로 여겨지는지를 중심으로 설명한다.내용 타당도의 기본 개.. 이전 1 다음