The scope of this study was limited to the first spelling question out of 30 Vietnamese questions of each SAT from 2014 to 2023. To analyze the difficulty of the spelling questions, we analyzed the format of the questions focusing on the questions sentence and examined how many times the vocabulary in the questions was exposed, starting from which page of the EBS CSAT Special Lecture, which is the main exam book in reality. In addition, as another criterion for measuring difficulty, we used the Vietnamese vocabulary classification presented in the standard curriculum developed as part of the Critical foreign Languages Education Promotion to see what level the vocabulary on the question corresponds to. To summarize the characteristics of the four periods divided based on the questions sentence, the difficulty level of the spelling questions was inconsistent over the past 10 years and became difficult in the second period, but through the third and fourth periods, the level of completion increased and the difficulty level found its appropriate level.

본고는 2015 개정 교육과정이 개발되고 있는 현 시점에서 한문과 교육과정 ‘어휘’ 관련 내용과 적용의 실제 사이에서 발생할 수 있는 간극을 최소화하기 위해, 2010학년도 본수능부터 2016학년도 6월 모의평가까지의 평가 문항을 중심으로 그간 한문과에서 실시된 ‘어휘’ 관련 평가 문항의 내용 요소와 내용 요소별 평가 유형 등을 분석하였다. 그 결과 그간 대학수학능력시험에서 출제된 어휘 관련 평가 문항들은 한자 어휘와 관련된 다양한 평가 요소를 고루 반영하고 있으며, 그 유형도 변화를 거듭하여 다양한 유형으로 안착된 상태였다. 하지만 급변하는 교육 환경 속에서 한문과가 위상을 공고히 하면서 발전해 나가기 위해서는 현재 상태에 안주할 것이 아니라 끝임 없이 새로운 평가 요소를 개발하고 해당 요소에 적합한 유형의 문항을 출제할 필요가 있다.

The purpose of this study is to present underlying principles and criteria for designing and developing National English Ability Test (NEAT). To this end, this study presents 5 principles (i.e., Connection, Authenticity, Interactiveness, IBT Compatibility, Washback Effectiveness) which play guiding and controlling roles in developing and selecting item types appropriate for the listening and the reading test of NEAT derived from test usefulness (Bachman & Palmer, 1996). Also, it proposes 4 criteria (i.e., Complementarity, Integration, Pivotality, and Hierarchicality) which function levering roles in designing and developing the two tests of NEAT on the basis of the empirical data of the item analyses of Foreign (English) domain of College Scholastic Ability Tests (2005~2010 school year). Finally, it discusses some implications and applications of the principles and the criteria to a theoretical blueprint for establishing an item developing system and a test implementation system, setting up the criteria of validating item types, designing a modular type of test specifications, and specifying a complementary type of test specifications for the two ability-level listening and reading tests (the 2nd and the 3rd rank) of NEAT.

본 연구는 앞서 수행하였던 “대학수학능력시험 한문 과목 ‘한자 영역’의 출제 경향 및 문항 유형 분석”의 후속 작업이다. 따라서 본 연구에서의 ‘한자어 영역’에 대한 분석의 방향 역시 ‘출제 경향’과 ‘문항 유형’의 차원으로 그 범주를 설정하였 다. 본 연구에서는 2005학년도 6월 모의평가부터 2010학년도 9월 모의평가까지 총 17회의 문항을 검토 대상으로 하여 분석을 진행하였다. 먼저 출제 경향의 차원에서 살펴본 결과, 한자어 영역의 문항 수는 전체 문항 수의 30%인 9문항이 출제되어 출제 매뉴얼에서 제시한 시행 지침과 일치하고 있다. 그러나 배점으로 보면 ‘12점(24%)～15점(30%)’로 구성되어 ‘한자어’의 비 중이 최고 6% 정도 낮게 나타나고 있다. 문항의 평가 요소를 살펴보면 한자어 영역의 학습 요소를 고르게 반영하고 있으며, 문항의 유형 역시 다양하게 변화를 거 듭하고 있다. 이러한 유형의 변화는 내용상 타당성을 높이거나 변별도를 제고하거 나 정답률을 조정하기 위한 노력의 일환인 동시에 기출 문항에 저촉되지 않기 위 한 것이기도 하다. 또한 삽화를 적극 활용하고 있는 것도 특징 중의 하나라 할 수 있다. 본 연구에서는 대학수학능력시험 한문 과목 ‘한자어 영역’에 대한 분석을 ‘출제 경향’과 ‘문항 유형’의 차원에 국한하여 수행하였다. 차후로 ‘한문 영역’에 대해서 도 이와 같은 분석 작업이 계속되어야 할 것이다. 이를 통해 대학수학능력시험 한 문 과목의 전체적인 출제 경향 및 문항 유형 분석 작업이 마무리되면 한 단계 더 나아가 ‘문항의 양호도’에 관한 연구를 수행할 필요가 있다. 이러한 일련의 작업은 앞으로의 과제로 남긴다.

본 연구에서는 대학수학능력시험[College Scholastic Ability Test] 한문 과목 [Chinese Characters] ‘한자 영역’에 대한 분석의 방향을 크게 ‘출제 경향’과 ‘문 항 유형’의 차원으로 그 범주를 설정하였다. 이 연구는, 한문 과목이 대학수학능력 시험 제2외국어/한문 영역에 포함되어 시행되기 시작한 2005학년도 6월 모의평가 부터 2009학년도 9월 모의평가까지 총 14회에 걸친 모의평가 및 대학수학능력시 험 문항을 검토 대상으로 하여 분석을 진행하였다. 먼저 출제 경향의 차원에서 살펴본 결과, 한자 영역의 문항 수는 전체 문항 수 의 20%인 6문항이 출제되어 출제 매뉴얼에서 제시한 시행 지침과 일치하고 있 다. 그러나 배점으로 보면 ‘6점(12%)～10점(20%)’로 구성되어 ‘한자’의 비중이 상대적으로 낮게 나타났다. 문항의 평가 요소를 살펴보면 한자 영역의 학습 요소 를 고르게 반영하여 내용상 타당성이 높은 문항을 출제하기 위해 노력하고 있었 다. 다음으로 문항의 유형을 살펴본 결과 다양한 유형의 문항을 출제하고 있다. 변별도를 제고하고 정답률을 조정하기 위해 문항의 유형에 계속 변화를 주고 있 으며, 또한 기출 문항에 저촉되지 않기 위하여 새로운 문항 형식을 도입하였고 삽 화를 적극 활용하고 있었다. 본 연구에서는 대학수학능력시험 한문 과목 ‘한자 영역’에 대한 분석을 ‘출제 경 향’과 ‘문항 유형’의 차원에서 수행하였다. 차후로 측정․평가의 통계적 원리와 기 법을 활용하여 ‘문항의 양호도’에 관한 연구를 수행할 필요가 있다.