초록

본 연구에서는 원점수-세타 변환표 작성이 요청되는 다양한 현실적 필요성을 고려하여, 대안적 변환 방법들의 수행을 상호 비교 및 평가하고자 하였다. 우선 원점수-세타 변환이 요구되는 여러 구체적 상황에 대하여 소개하고, 이를 위하여 흔히 사용되는 검사특성곡선 활용 방법과 함께 사후기대추정법에 기반한 두 가지 방법을 설명하였다. 다음 이들의 수행을 체계적으로 비교하기 위하여, 실제 자료에 대한 적용 및 모의실험 연구를 실시하였다. 모의실험 연구에서 주로 고려된 요인은 검사 난이도 수준 및 문항반응모형이었다. 연구 결과, 검사 총점에 기반한 사후기대추정법의 활용이 가장 정확한 원점수-세타 변환을 제공하는 것으로 나타났다. 또한 검사 난이도 수준이 응시자 능력 수준에 부합될 때 보다 정확한 변환표를 작성할 수 있었고, 모형 적합에 별다른 문제가 없다면 2모수 모형의 사용이 가장 나은 원점수-세타 변환 결과를 산출하였다.

키워드

문항반응이론, 원점수-쎄타 변환, 검사특성곡선, 사후기대추정법

참고문헌(23)open

  1. [학술지] 강태훈 / 2014 / IRT 능력모수 추정에 있어서 검사총점에 근거한 사후기대추정법의 정확성에 관한 연구 / 교육방법연구 26 (1) : 1 ~ 19

  2. [보고서] 강태훈 / 2017 / 시험자료에서 결측치 존재 시 능력추정 방법 비교: 5회 변호사시험 민사법 선택형 시험 자료 활용

  3. [학술지] 강태훈 / 2015 / 다분문항반응이론에서 두 가지 사후기대추정법을 통한 IRT 능력모수 추정의 정확성 비교 연구 / 교육방법연구 27 (1) : 89 ~ 108

  4. [보고서] 남궁지영 / 2018 / 한국교육종단연구(KELS)2013(VI): 조사개요보고서

  5. [보고서] 송미영 / 2011 / 개별 학생의 학업성장과 학교교육 성과 분석 방안 [제13회 KICE 교육과정․평가 정책 포럼]

  6. [인터넷자료] 안혜성 / 6회 변호사시험 한양대 시험장서 ‘잃어버린 1분’ / 법률저널

  7. [인터넷자료] 와이오밍 주 교육부 / 2014 Wyoming ACT Performance

  8. [보고서] 임미경 / 2014 / 컴퓨터 기반 보건의료인 국가시험 개발 연구

  9. [인터넷자료] ACT / Prairie state achievement examination: Technical Manual

  10. [단행본] Hambleton, R. K. / 1991 / Fundamentals of item response theory, Vol. 2 / Sage

  11. [학술지] Kim, J. K. / 1993 / Ability estimation for conventional tests / Psychometrika 58 : 587 ~ 599

  12. [학술지] Kolen, M. J. / 1981 / Comparison of traditional and item response theory methods forequating tests / Journal of Educational Measurement 22 : 197 ~ 206

  13. [단행본] Kolen, M. J. / 2004 / Test equating methods and practice / Springer-Verlag

  14. [학술지] Lee, W. -C. / 2010 / A comparison of IRT linking procedures / Applied Measurement in Education 23 : 23 ~ 48

  15. [단행본] Lord, F. M. / 1980 / Applications of item response theory to practical testing problems / Erlbaum

  16. [학술지] Lord, F. M. / 1984 / Comparison of IRT true-score and equipercentile observed-score equatings / Applied Psychological Measurement 8 : 453 ~ 461

  17. [학술지] Orlando, M. / 2000 / New item fit indices for dichotomous item response theory models / Applied Psychological Measurement 24 : 50 ~ 64

  18. [단행본] Sireci, S. G. / 2001 / Setting performance standards: Concepts, methods, and perspectives / Lawrence Erlbaum : 355 ~ 370

  19. [인터넷자료] Templin, J. / Standard setting and score reporting with IRT

  20. [학술지] Thissen, D. / 1995 / Item response thoery for scores on tests including polytomous items with ordered responses / Applied Psychological Measurement 19 : 39 ~ 49

  21. [학술대회] Tong, Y. / 2010 / IRT proficiency estimators and their impact / Paper presented at the annual conference at the National Council on Measurement in Education

  22. [학술지] van der Linden, W. J. / 1982 / A latent trait method for determining intrajudge inconsistency in the Angoff and Nedelsky techniques of standard-setting / Journal of Educational Measurement 19 : 295 ~ 308

  23. [학술대회] Zaman, A. / 2008 / Students ranking, based on their abilities on objective type test: comparison of CTT and IRT / Paper presented at the EDU-COM 2008 International Conference. Sustainability in Higher Education: Directions for Change