영어평가이론 (12) 썸네일형 리스트형 영어능력평가론 시리즈 안내: 영어시험을 이해하기 위한 100개의 질문 — 영어능력평가론 아카이브영어시험은 현대 사회에서 매우 강력한 영향력을 가진 제도다. 학교 교육, 대학 입학, 취업, 자격 인증 등 다양한 영역에서 영어시험의 결과는 중요한 판단 기준으로 사용된다. 그러나 많은 사람들은 영어시험을 단순한 점수 산출 도구로 이해한다. 시험을 보고 채점을 하면 점수가 나오고, 그 점수가 개인의 영어 능력을 설명한다고 생각하기 때문이다.이 블로그의 영어능력평가론 시리즈는 이러한 단순한 이해에서 벗어나, 영어시험이 어떤 구조와 판단 체계 위에서 작동하는지를 분석하기 위해 시작되었다. 이 시리즈는 영어시험을 하나의 기술적 도구가 아니라 사회적 판단을 수행하는 제도적 장치로 바라본다.이 글은 시리즈 전체의 흐름을 안내하는 아카이브 글로, 앞으로 다루게 될 주요 주제와 질문을 정리한.. 왜 시험의 공정성은 구조적으로 흔들릴 수밖에 없는가 — 영어능력평가론 시리즈 ⑱이 글은 영어능력평가론 시리즈의 열여덟 번째 글이다. 앞선 글에서는 시험 공정성이 실제 설계와 운영 단계에서 어떻게 확보되는지를 살펴보았다. 이 글에서는 많은 시험이 공정성을 의도함에도 불구하고, 왜 구조적으로 불공정해질 수밖에 없는지를 제도적·환경적 관점에서 분석한다. 다음 글에서는 이러한 구조적 한계를 완화하기 위한 평가 설계의 방향을 다룬다.대부분의 시험은 공정성을 목표로 설계된다. 시험 안내문과 운영 지침에는 공정성과 형평성이 반복적으로 강조된다. 그러나 현실에서는 공정성에 대한 문제 제기가 끊이지 않는다. 이 모순은 개별 시험 관계자의 태도만으로 설명하기 어렵다. 많은 경우 공정성은 개인의 의지와 무관하게 구조적으로 흔들린다. 이 글에서 필자는 시험 공정성이 왜 반복적.. 구인 타당도는 왜 해석 중심 타당도로 이어질 수밖에 없는가 — 영어능력평가론 시리즈 ⑭이 글은 영어능력평가론 시리즈의 열네 번째 글이다. 앞선 글 「구인 타당도란 무엇이며 왜 가장 이해하기 어려운 개념인가」에서는 구인 타당도의 기본 개념과 그 이해의 어려움을 살펴보았다. 이번 글에서는 구인 타당도가 왜 필연적으로 시험 결과 해석의 문제로 확장되는지, 그리고 이 흐름이 현대 타당도 논의의 핵심이 된 이유를 설명한다.다음 글에서는 해석 중심 타당도 관점이 평가의 책임 개념을 어떻게 변화시켰는지를 살펴볼 것이다.구인 타당도를 이해하려다 보면 많은 학습자가 비슷한 질문에 도달한다. 시험이 실제로 측정하는 능력을 완벽하게 규명할 수 없다면, 타당도는 어디에서 확보되는가라는 질문이다. 이 질문은 구인 타당도의 한계를 드러내는 동시에 현대 타당도 논의의 출발점이 된다.이 글.. 구인 타당도란 무엇이며 왜 가장 이해하기 어려운 개념인가 — 영어능력평가론 시리즈 ⑬이 글은 영어능력평가론 시리즈의 열세 번째 글이다. 앞선 글 「내용 타당도를 훼손하는 가장 흔한 오류들」에서는 실제 평가 현장에서 내용 타당도가 어떻게 훼손되는지를 살펴보았다. 이번 글에서는 내용 타당도만으로 설명하기 어려운 평가의 문제를 다루기 위해 구인 타당도(construct validity) 가 무엇인지, 그리고 왜 이 개념이 가장 이해하기 어려운 타당도 유형으로 여겨지는지를 설명한다.다음 글에서는 구인 타당도가 왜 필연적으로 시험 결과 해석과 연결되는지를 살펴볼 것이다.영어능력평가를 공부하는 많은 학습자는 내용 타당도까지는 비교적 쉽게 이해한다. 시험 내용이 측정 대상과 잘 맞는지를 판단하는 개념은 직관적으로 받아들이기 어렵지 않기 때문이다. 그러나 구인 타당도에 이르.. 내용 타당도를 훼손하는 가장 흔한 오류들 — 영어능력평가론 시리즈 ⑫이 글은 영어능력평가론 시리즈의 열두 번째 글이다. 앞선 글 「내용 타당도는 어떻게 검토하고 판단해야 하는가」에서는 내용 타당도를 실제 평가 과정에서 어떻게 검토하고 판단해야 하는지를 살펴보았다. 이 글에서는 실제 평가 현장에서 내용 타당도를 훼손하는 대표적인 오류들이 무엇인지, 그리고 왜 이러한 오류가 반복되는지를 중심으로 설명한다. 다음 글에서는 내용 타당도를 넘어 구인 타당도(construct validity) 로 논의를 확장한다.많은 시험은 형식적으로는 잘 만들어진 것처럼 보인다. 문항 수는 충분하고, 난이도도 적절해 보이며, 외형적으로는 완성도가 높다. 그러나 이러한 시험이 항상 타당한 것은 아니다. 특히 내용 타당도는 시험의 외형만으로 판단하기 어렵기 때문에, 설계 .. 왜 타당도는 영어능력평가에서 가장 중요한 기준인가 — 영어능력평가론 시리즈 ⑦영어능력평가를 논의할 때 가장 자주 등장하는 개념 가운데 하나가 타당도(validity)다. 많은 사람은 타당도를 시험이 얼마나 정확한지를 판단하는 기술적 기준으로 이해한다. 그러나 언어평가 연구에서 타당도는 단순한 정확성의 문제가 아니다. 타당도는 시험이 무엇을 측정하고 있는지, 그리고 그 점수 해석과 사용이 정당한지를 묻는 핵심 개념이다. 강의 자료에서도 전통적 관점은 “시험이 측정하려는 바를 정확히 측정하는 정도”로 설명하지만, 최근 관점은 시험 점수의 해석과 사용을 이론과 증거가 얼마나 지지하는가에 초점을 둔다. 앞선 글 「평가가 학습을 지원하기 위해 반드시 갖춰야 할 설계 원칙」에서 살펴보았듯이, 학습을 지원하는 평가는 학습 목표와 평가 목표가 연결될 때 가능하다. 이.. 평가가 학습을 지원하기 위해 반드시 갖춰야 할 설계 원칙 — 영어능력평가론 시리즈 ⑥이 글은 영어능력평가론 시리즈의 여섯 번째 글이다. 앞선 글 「시험 결과 해석의 혼란이 교육 현장을 왜곡하는 방식」에서는 시험 결과 해석의 혼란이 실제 교육 현장에서 어떤 문제를 만들어내는지를 살펴보았다.이번 글에서는 이러한 문제를 줄이기 위해 평가가 어떤 방향으로 설계되어야 하는지를 살펴본다. 영어능력평가는 단순히 학습 결과를 측정하는 도구가 아니라, 수업 방향과 학습자의 인식, 그리고 교육 제도의 의사결정에까지 영향을 미친다.따라서 평가는 학습을 방해하는 구조가 아니라 학습을 지원하는 구조로 설계되어야 한다. 이 글에서는 학습을 지원하는 평가가 갖추어야 할 핵심 설계 원칙을 단계적으로 설명한다.1. 평가 설계의 출발점은 학습이다학습을 지원하는 평가는 시험 자체에서 출발하지 .. 시험 결과 해석의 혼란이 교육 현장을 왜곡하는 방식 — 영어능력평가론 시리즈 ⑤이 글은 영어능력평가론 시리즈의 다섯 번째 글이다. 앞선 글 「같은 영어시험이라도 결과 해석이 달라지는 이유」에서는 동일한 시험 점수라도 사용 목적과 해석 맥락에 따라 결과 의미가 달라질 수 있다는 점을 살펴보았다.이번 글에서는 이러한 해석의 혼란이 실제 교육 현장에서 어떤 왜곡을 만들어내는지를 살펴본다. 시험 점수는 단순한 정보가 아니라 수업 방식, 학습자의 자기 인식, 학교의 의사결정에 영향을 미치는 강력한 신호로 작용한다. 이 때문에 시험 결과가 잘못 해석되거나 과도하게 확대 해석될 때 교육 현장은 점차 본래의 목적에서 벗어나게 된다.1. 시험 점수가 교육을 지배하는 구조교육 현장에서 시험 결과는 단순한 참고 자료로 사용되지 않는다. 교사는 시험 점수를 바탕으로 수업 내용.. 같은 영어시험이라도 결과 해석이 달라지는 이유 — 영어능력평가론 시리즈 ④이 글은 영어능력평가론 시리즈의 네 번째 글이다. 앞선 글 「시험 목적에 따라 영어시험 유형은 어떻게 달라지는가」에서는 시험 목적에 따라 영어시험 유형이 어떻게 구분되는지를 살펴보았다.이번 글에서는 한 단계 더 나아가 같은 영어시험이라도 결과 해석이 달라지는 이유를 설명한다. 시험 점수는 흔히 객관적인 사실처럼 받아들여지지만, 실제로는 특정한 목적과 해석 기준을 통해 의미가 만들어지는 정보에 가깝다.따라서 영어능력평가를 이해하려면 시험 점수를 단순한 숫자가 아니라 해석을 필요로 하는 평가 결과로 바라볼 필요가 있다.1. 시험 점수는 그 자체로 완성된 의미가 아니다많은 사람은 영어시험 점수가 객관적인 사실을 그대로 보여준다고 믿는다. 시험 결과는 숫자로 제시되며, 그 숫자는 비교.. 시험 목적에 따라 영어시험 유형은 어떻게 달라지는가 — 영어능력평가론 시리즈 ③이 글은 영어능력평가론 시리즈의 세 번째 글이다. 앞선 글 「영어시험은 왜 만들어지는가: 시험 목적의 분류」에서는 영어시험이 어떤 목적을 가지고 설계되는지를 살펴보았다.이번 글에서는 시험 목적이 실제 시험 유형을 어떻게 결정하는지 살펴본다. 영어시험은 단순히 이름이나 형식으로 구분되는 것이 아니라, 시험이 어떤 결정을 지원하기 위해 만들어졌는가에 따라 서로 다른 평가 논리를 가지게 된다. 시험 목적이 달라지면 측정하려는 능력의 범위, 문항 설계 방식, 그리고 결과 해석의 기준까지 모두 달라진다.1. 시험 유형은 시험 목적에서 출발한다많은 학습자는 영어시험을 이름 중심으로 이해하려는 경향이 있다. 토익, 토플, 학교 시험과 같은 시험 이름이 시험의 성격을 설명한다고 생각하기 때문.. 이전 1 2 다음
