언어평가 (89) 썸네일형 리스트형 해석 중심 타당도와 평가 책임의 문제 — 영어능력평가론 시리즈 ⑮이 글은 영어능력평가론 시리즈의 열다섯 번째 글이다. 앞선 글에서는 구인 타당도는 왜 해석 중심 타당도로 이어질 수밖에 없는가라는 문제를 중심으로 타당도 논의의 흐름을 살펴보았다. 이 글에서는 해석 중심 타당도와 평가 책임의 문제가 어떻게 연결되는지를 설명한다. 다음 글에서는 이러한 책임 논의가 공정성과 형평성 문제로 어떻게 이어지는지를 다룬다.시험 결과가 사회적 의사결정에 사용되는 순간 평가는 단순한 기술적 행위가 아니라 책임을 수반하는 판단 행위가 된다. 해석 중심 타당도 관점은 바로 이 지점을 분명히 드러낸다. 시험 점수는 중립적인 숫자처럼 보이지만, 그 점수를 근거로 한 해석과 결정은 개인의 삶과 사회 구조에 직접적인 영향을 미친다. 이 글에서는 해석 중심 타당도 관점이.. 구인 타당도는 왜 해석 중심 타당도로 이어질 수밖에 없는가 — 영어능력평가론 시리즈 ⑭이 글은 영어능력평가론 시리즈의 열네 번째 글이다. 앞선 글 「구인 타당도란 무엇이며 왜 가장 이해하기 어려운 개념인가」에서는 구인 타당도의 기본 개념과 그 이해의 어려움을 살펴보았다. 이번 글에서는 구인 타당도가 왜 필연적으로 시험 결과 해석의 문제로 확장되는지, 그리고 이 흐름이 현대 타당도 논의의 핵심이 된 이유를 설명한다.다음 글에서는 해석 중심 타당도 관점이 평가의 책임 개념을 어떻게 변화시켰는지를 살펴볼 것이다.구인 타당도를 이해하려다 보면 많은 학습자가 비슷한 질문에 도달한다. 시험이 실제로 측정하는 능력을 완벽하게 규명할 수 없다면, 타당도는 어디에서 확보되는가라는 질문이다. 이 질문은 구인 타당도의 한계를 드러내는 동시에 현대 타당도 논의의 출발점이 된다.이 글.. 구인 타당도란 무엇이며 왜 가장 이해하기 어려운 개념인가 — 영어능력평가론 시리즈 ⑬이 글은 영어능력평가론 시리즈의 열세 번째 글이다. 앞선 글 「내용 타당도를 훼손하는 가장 흔한 오류들」에서는 실제 평가 현장에서 내용 타당도가 어떻게 훼손되는지를 살펴보았다. 이번 글에서는 내용 타당도만으로 설명하기 어려운 평가의 문제를 다루기 위해 구인 타당도(construct validity) 가 무엇인지, 그리고 왜 이 개념이 가장 이해하기 어려운 타당도 유형으로 여겨지는지를 설명한다.다음 글에서는 구인 타당도가 왜 필연적으로 시험 결과 해석과 연결되는지를 살펴볼 것이다.영어능력평가를 공부하는 많은 학습자는 내용 타당도까지는 비교적 쉽게 이해한다. 시험 내용이 측정 대상과 잘 맞는지를 판단하는 개념은 직관적으로 받아들이기 어렵지 않기 때문이다. 그러나 구인 타당도에 이르.. 내용 타당도를 훼손하는 가장 흔한 오류들 — 영어능력평가론 시리즈 ⑫이 글은 영어능력평가론 시리즈의 열두 번째 글이다. 앞선 글 「내용 타당도는 어떻게 검토하고 판단해야 하는가」에서는 내용 타당도를 실제 평가 과정에서 어떻게 검토하고 판단해야 하는지를 살펴보았다. 이 글에서는 실제 평가 현장에서 내용 타당도를 훼손하는 대표적인 오류들이 무엇인지, 그리고 왜 이러한 오류가 반복되는지를 중심으로 설명한다. 다음 글에서는 내용 타당도를 넘어 구인 타당도(construct validity) 로 논의를 확장한다.많은 시험은 형식적으로는 잘 만들어진 것처럼 보인다. 문항 수는 충분하고, 난이도도 적절해 보이며, 외형적으로는 완성도가 높다. 그러나 이러한 시험이 항상 타당한 것은 아니다. 특히 내용 타당도는 시험의 외형만으로 판단하기 어렵기 때문에, 설계 .. 내용 타당도는 어떻게 검토하고 판단해야 하는가 — 영어능력평가론 시리즈 ⑪내용 타당도의 중요성을 이해했다고 해서 자동으로 타당한 시험이 만들어지는 것은 아니다. 내용 타당도는 선언이 아니라 검토 과정에서 확보되는 특성이다. 시험 설계자는 시험이 측정하려는 능력을 정의하는 것에서 멈추지 않고, 그 정의가 시험 내용에 어떻게 구현되었는지를 체계적으로 점검해야 한다.앞선 글 「내용 타당도는 무엇이며 왜 시험 설계의 출발점이 되는가」에서는 내용 타당도의 기본 개념과 시험 설계에서의 역할을 살펴보았다. 이번 글에서는 내용 타당도를 실제 평가 현장에서 어떻게 검토하고 판단해야 하는지를 단계별로 설명한다. 이 과정은 시험 설계의 직관을 검증하는 절차이자 평가의 책임성을 확보하는 핵심 과정이다.측정 대상의 명확한 정의내용 타당도 검토는 시험 문항을 보기 전에 시작.. 내용 타당도는 무엇이며 왜 시험 설계의 출발점이 되는가 — 영어능력평가론 시리즈 ⑩타당도에 대한 논의가 추상적으로 느껴지는 이유는 많은 경우 그 개념이 실제 시험 설계 과정과 분리되어 설명되기 때문이다. 그러나 평가 실무에서 타당도는 매우 구체적인 질문에서 출발한다.시험은 무엇을 묻고 있는가, 그리고 그 질문은 측정하려는 능력을 제대로 대표하고 있는가라는 질문이 바로 그것이다. 이 질문에 답하는 과정이 내용 타당도(content validity) 논의의 핵심이다.앞선 글 「타당도 관점의 변화는 시험 설계를 어떻게 바꾸었는가」에서는 현대적 타당도 관점이 시험 설계 전반에 어떤 영향을 미쳤는지를 살펴보았다. 이번 글에서는 타당도를 구성하는 첫 번째 핵심 근거인 내용 타당도가 무엇이며 왜 시험 설계의 출발점으로 여겨지는지를 중심으로 설명한다.내용 타당도의 기본 개.. 타당도 관점의 변화는 시험 설계를 어떻게 바꾸었는가 — 영어능력평가론 시리즈 ⑨타당도 개념의 변화는 단순한 이론적 논쟁에 그치지 않았다. 타당도를 시험 도구의 속성으로 보던 관점에서 시험 결과 해석과 사용을 중심으로 이해하는 관점으로 이동하면서 평가 실무 전반이 달라지기 시작했다.앞선 글 「타당도 개념의 변화: 전통적 타당도에서 해석 중심 타당도로」에서는 타당도를 바라보는 관점이 어떻게 변화해 왔는지를 살펴보았다. 이번 글에서는 이러한 변화가 실제 영어시험 설계와 평가 운영에 어떤 구체적인 변화를 가져왔는지를 중심으로 설명한다.현대적 타당도 관점에서 시험 설계자는 더 이상 문제를 만드는 기술자에 머물 수 없다. 시험 결과가 어떻게 해석되고 어떤 영향을 미치는지까지 고려해야 하는 책임이 강조되기 때문이다.시험 설계의 출발점이 달라졌다전통적인 시험 설계는 측.. 타당도 개념의 변화: 전통적 타당도에서 해석 중심 타당도로 — 영어능력평가론 시리즈 ⑧타당도라는 개념은 오랜 기간 영어능력평가의 핵심 기준으로 논의되어 왔다. 그러나 타당도를 이해하는 방식은 시대에 따라 크게 변화해 왔다. 초기 평가 이론에서는 시험이 측정하려는 능력을 얼마나 정확하게 측정하는지가 타당도의 중심 기준이었다. 하지만 평가 연구가 발전하면서 시험 자체보다 시험 결과가 어떻게 해석되고 사용되는지가 더 중요한 문제로 인식되기 시작했다.앞선 글 「왜 타당도는 영어능력평가에서 가장 중요한 기준인가」에서는 타당도가 시험 품질의 핵심 기준으로 여겨지는 이유를 살펴보았다. 이 글에서는 타당도 개념이 어떤 배경 속에서 변화해 왔는지, 그리고 이러한 변화가 영어능력평가를 이해하는 방식에 어떤 의미를 가지는지를 단계적으로 살펴본다.전통적 타당도 관점의 출발초기 평가 .. 영어능력평가란 무엇인가: 왜 ‘측정’이 아니라 ‘판단’의 문제인가 — 영어능력평가론 시리즈 ①영어능력평가는 흔히 점수를 매기는 시험으로 이해된다. 시험을 보고 채점을 하면 점수가 나오고, 그 점수에 따라 서열이 결정된다고 생각하기 쉽다. 그러나 실제 언어평가 연구에서 시험은 단순한 측정 도구로 이해되지 않는다. 언어평가는 어떤 능력을 중요하게 볼 것인지, 어떤 기준으로 사람을 구분할 것인지, 그리고 그 결과를 어떤 결정에 사용할 것인지에 대한 판단 구조 위에서 작동하는 제도적 행위로 이해된다.이 글은 영어능력평가론 시리즈의 첫 번째 글로, 영어능력평가를 단순한 점수 산출의 기술이 아니라 판단의 문제로 바라보는 관점을 제시한다. 이후 글에서는 이러한 판단이 어떤 기준과 철학을 통해 형성되고 관리되는지를 단계적으로 살펴볼 것이다.1. 영어능력평가는 단순한 점수 산출 과정이.. 이전 1 ··· 6 7 8 9 다음