TOEFL^® 필수™ 시험의 심리측정 기초

2021년 12월 8일

 TOEFL^® Essentials™ 시험은 응시자의 영어 능력에 대한 유효하고 신뢰할 수 있는 정보를 제공하고, 숙련도 수준에 맞춘 설계와 친근하고 흥미로운 형식, 짧은 응시 시간을 요구 하도록 개발되었습니다. 응시자의 영어 능력 수준을 측정하는 데 사용되는 심리측정학적 기초와 접근법은 응시자의 영어 능력을 정확히 측정하는 데 매우 중요합니다. TOEFL Essentials 시험의 심리측정 결과에 대한 보다 포괄적인 논의는 2021년 TOEFL^® Essentials™ 시험 디자인 프레임워크 에 제공되어 있습니다.

다단계 적응적 측정 접근법 사용

TOEFL Essentials 시험의 듣기, 읽기, 쓰기 섹션은 다양한 언어 능력 수준에서 고품질, 정밀함, 효율적인 측정을 제공하기 위해 다단계 적응 시험(MST)으로 설계되었습니다. 즉, 각 시험은 두 단계(단계)로 구성되며, 첫 번째 부분의 수행 결과가 두 번째 부분에서 수행되는 과제와 일치합니다.  MST 접근법의 주요 장점은 시험 내용을 표적화하여 조립할 수 있고, 엄격한 심리측정 및 전문가 평가 전문가가 모든 섹션을 시험 전에 검토할 수 있다는 점입니다. 또한, 이 접근법은 TOEFL^® 평가 계열 내 모든 시험 에서 볼 수 있는 과제 기반 설계를 효율적으로 통합할 수 있게 하여, 시험 과제가 학업 및 일상생활에서 영어를 사용할 때 마주할 가능성이 높은 과제들을 반영합니다.

TOEFL Essentials 시험에서 MST 응용

TOEFL Essentials 시험의 각 섹션별 MST(스피킹 섹션을 제외하고)는 두 부분으로 구성됩니다. 첫 번째 단계(단계)는 평균 난이도로 간주되는 과제들로 구성되며, 두 번째 단계는 첫 번째 섹션의 성과에 따라 난이도가 조정되는 과제들입니다. 예를 들어, 리스닝 섹션 첫 부분에서 매우 좋은 성적을 보였다면, 두 번째 부분은 더 높은 난이도가 부여됩니다.

듣기와 읽기 섹션의 두 번째 단계는 세 가지 난이도(낮음, 중간, 높음)로 분류됩니다. 글쓰기 섹션의 두 가지 난이도(낮음, 중간/높음) 단계로 분류되며, 중고난이도의 시험 과제는 다양한 숙련도와 중고급 수준의 평가 기준을 구분하는 개인이 접근할 수 있도록 설계되었습니다.

듣기, 읽기, 쓰기 섹션과 달리, 말하기 섹션은 비적응적이거나 선형적인 방식을 사용하며, 모든 응시자가 전체 시험 동안 동일한 문제를 받고, 시험 과제는 다양한 수준의 숙련도에 걸쳐 접근 가능하도록 설계되어 있으며, 응시자가 말하기 능력을 보여줄 수 있는 다양한 기회가 주어집니다. 난이도의 범위와 여러 측정 기회가 결합되어 별도의 단계 없이도 전체 언어 능력 범위를 다룰 수 있습니다.

혁신적인 심리측정 및 통계적 방법 활용

각 시험 섹션마다 확립된 및 혁신적인 심리측정 및 통계 방법론이 사용되어 난이도의 일관성과 시험 버전 간 점수 비교 가능성을 보장합니다. 네 개의 시험 섹션 각각에서 응시자는 1점에서 12점 사이의 점수를 받을 수 있습니다. 듣기, 읽기, 쓰기 영역의 점수는 두 부분 전반의 성과와 난이도 수준을 고려합니다. 말하기 영역의 점수는 모든 과제에서의 전체 성과를 기준으로 산정됩니다.

이 TOEFL Essentials 시험 설계의 모든 측면은 심리측정학 및 언어 평가 분야에서 ETS 연구개발의 풍부한 유산에 의해 안내되었으며, 대규모 평가를 위한 MST 설계 및 구현 혁신을 포함합니다. 모든 ETS 평가와 마찬가지로, ETS 품질 및 공정성 기준과 다양한 응시자를 대상으로 한 광범위한 파일럿 테스트는 시험 점수의 심리측정적 신뢰성을 유지하면서 응시자와 점수 사용자의 요구를 최적으로 충족시키기 위한 세부 사항과 실행에 영향을 미쳤습니다. 시험 점수의 지속적인 타당성과 신뢰성을 지원하기 위해 출시 후 통계 모니터링과 연구 연구가 계속될 예정입니다.

TOEFL 에센셜 시험에 대해 더 알고 싶다면 https://www.ets.org/toefl/score-users/essentials.html 를 방문 하세요

베네사 만나는 ETS의 심리측정 분석 및 연구(PAR) 전무이사입니다.