본 연구의 목적은 ‘국어과 평가 문항의 양호도 분석틀’을 개발하고 이를 바탕으로 좋은 국어과 평가 문항 개발의 기준점을 제공하는 데에 있다. 이를 위해 국어과 평가론 분야의 국내외 선행 연구와 CRESST의 문항 특성 분석(FA) 방법을 검토한 뒤 국가 수준의 국어과 평가 경험이 많은 전문가 6인의 패널 토의를 거쳐 최종적으로 국어과 평가 문항 양호도 분석틀을 4범주 13개 하위 요소로 도출하였다.
4범주는 ‘교육과정과의 부합도’, ‘문제 풀이 과정에서의 학습 효과’, ‘지문 구성의 적절성’, ‘문항 구조 및 형식의 적절성’으로 구성되며, 다시 각 범주별로 ‘성취기준 수준 및 범위의 적정성/역량 측정 가능성/과목별 특성 반영’, ‘교과 핵심 개념 이해/문제 해결 과정 관련 사고력/배경 지식 활성화’, ‘적정 길이와 어휘 수준/소재의 참신성 및 적절성/정보 구조 및 제시 방식의 명료성/표현 및 어법의 적절성’, ‘문항 구조의 완성도/문항 구조의 참신성/매체 활용의 적절성’의 하위 요소를 설정하였다.
국어과 평가 문항의 양호도 분석틀은 국어과 평가 전문성을 갖추어야 할 현장 교사들에게 ‘좋은 국어과 평가 문항’에 대한 일종의 기준점을 제공한다는 데 의미가 있으며, 추후 현장 전문가 검증 및 실제 문항 분석을 통한 타당화 연구를 후속적으로 개진할 필요가 있다.
The purpose of this study is to develop the analytical frameworks for item quality especially based of Feature Analysis(FA) approach, and to suppose how to design assessment items in Korean Education. For this purpose, we reviewed various literatures and FA approach, developed by CRESST, and then through several times of discussion with six specialties, we developed the framework with 4 categories and 13 factors.
Mainly, the 4 categories are as follows. ‘Relevance to national curriculum’, ‘Learning effects in problem solving process’, ‘Relevance of passage construction’, ‘Relevance of item structure and its form’. Then, these categories are sub-categorized into 13 factors in details. For example, ‘Relevance to national curriculum’ is divided into ‘levels and scope of standards’, ‘competency assessment’, ‘content area’s features’.
This Framework for item quality can provide teachers the criterion and essential factors of ‘good item’ in Korean language assessment. Extended follow-up researches should be proceeded for its validation such as content validity and items analysis.