본 연구는 간호대학생의 아동간호학 성취도 평가 문항의 분석을 위하 여 고전검사이론(CTT)과 문항반응이론(IRT)을 적용하였다. 연구대상은 경 북 소재 4년제 A대학에서 아동간호학을 수강하고 있는 간호대학생 총 88 명이었다. 자료는 2024년 3월 12일부터 27일까지 2시간씩 총 6회의 수 업 내용 기반의 40문항에 대한 평가 결과가 수집되었다. 이는 CTT와 IRT의 2-모수 로지스틱 모델(2PL)을 사용하여 jMetrik 4.1.1 프로그램을 활용하여 분석하였다. 연구 결과, 첫째, CTT에 따른 분석에서 19개의 쉬 운 문항, 20개의 중간 난이도 문항, 1개의 어려운 문항으로 분류되었고, IRT에 따른 분석에서는 6개의 쉬운 문항, 34개의 중간 난이도 문항으로 나타났다. 둘째, 변별도 기준으로 CTT에서는 3개의 낮은 변별도 문항, 24개의 중간 변별도 문항, 13개의 높은 변별도 문항이 있었고, IRT에서 는 5개의 낮은 변별도 문항, 20개의 중간 변별도 문항, 15개의 높은 변 별도 문항으로 구분되었다. 셋째, CTT와 IRT를 비교한 결과, CTT에서는 쉬운 문항이 많아 전체 평가의 변별력이 낮아질 가능성이 있었으나, IRT 에서는 중간 난이도 문항이 많아 평가의 신뢰성과 타당성이 높아질 가능 성이 있었다. 본 연구는 CTT와 IRT를 활용하여 아동간호학 성취도 평가 문항의 분석결과를 제시함으로써 간호대학생의 아동간호 역량의 효과적인 평가 문항 개발을 위해 CTT와 IRT의 적용 가능성을 제안하였다.

2015 개정 교육과정 중학교 한문 교과서 17종에 실린 소단원 평가 문항을 대상으로 문항 유형별, 성취기준별 분석을 시도하였다. 대단원 평가는 소단원 평가와 평가 대상 및 내용이 중복되기 때문에 제외하였으며, 한 문항에 여러 하위 문항이 있는 경우 하위 문항도 각각 하나의 문항으로 구분하였 다. 이에 전체 대상 평가 문항은 1737문항이었으며, 각 평가 문항은 출판사, 단원 번호, 문항 번호에 따라 코드를 부여하였다. 문항 유형은 ‘선택형-진위형, 배합형, 선다형’, ‘서답형-단답형, 완성형, 서술형’으로 분류하여 분석하였다. 선택형 문항보다는 서답형 문항의 비율이 높았다. 선택형 문항은 대부분이 선다형 문항이었고 서답형 문항은 단답형, 서술형, 완성형의 순서로 비율이 높았다. 성취 기준별로는 ‘한자의 모양·음·뜻’, ‘내용과 주제’, ‘한시의 이해와 감상’, ‘일상용어’, ‘성어’, ‘전통 문화 의 계승과 발전’의 성취기준에 해당하는 문항이 전체의 70%를 차지하였다. 이는 현행 한문 교과서 에서 어떠한 부분을 중요하게 여기는지 알 수 있는 부분이다. 그리고 교과서 평가 문항의 실제 예시를 제시하며 분석을 시도하였다. 다만, 평가 문항에 대한 지식의 부족으로 평가 문항에 대한 입체적 분석과 대안 제시가 부족하였다. 평가 문항에 대한 보다 세밀한 분석과 특정 영역별 평가 문항 분석에 대한 후속 연구를 기대한다.

The International Olympiad on Astronomy and Astrophysics (IOAA) initiated by the Thailand Astronomical Society in 2007 is an annual competition for high school students. One of its aim is to enhance the development of international exchange in the field of school education in astronomy and astrophysics. This paper first provides the overview of the IOAA in terms of key regulations based on its statutes, history and current status. Secondly, the published syllabus of the IOAA is used for content analysis according to subject areas regarding the exam questions of the IOAA in theoretical, observational and data analysis parts from 2007 to 2010. Also, a scientific inquiry framework is applied to the same questions for assessment based on scientific inquiry in the cognitive aspect with two sub-classes of scientific knowledge and scientific reasoning. Among a dozen astronomy subject areas listed on the syllabus, the theoretical part of the IOAA makes more frequent use of the Sun, the solar system, properties of stars, and concept of time. In content knowledge, a factor of scientific knowledge, the IOAA questions, especially in the theoretical part have a lesser degree in difficulty than the IAO (International Astronomy Olympiad) exam questions for the same period whose degree in difficulty is comparable to college level. With regard to scientific reasoning, the IOAA questions tend to involve convergent rather than divergent thinking. Lastly, in light of these findings, discussions are given on the outcome of Korean participation in the previous IOAAs and ways to help better in preparing Korean students for future astronomy Olympiads.

본 연구는 앞서 수행하였던 “대학수학능력시험 한문 과목 ‘한자 영역’의 출제 경향 및 문항 유형 분석”의 후속 작업이다. 따라서 본 연구에서의 ‘한자어 영역’에 대한 분석의 방향 역시 ‘출제 경향’과 ‘문항 유형’의 차원으로 그 범주를 설정하였 다. 본 연구에서는 2005학년도 6월 모의평가부터 2010학년도 9월 모의평가까지 총 17회의 문항을 검토 대상으로 하여 분석을 진행하였다. 먼저 출제 경향의 차원에서 살펴본 결과, 한자어 영역의 문항 수는 전체 문항 수의 30%인 9문항이 출제되어 출제 매뉴얼에서 제시한 시행 지침과 일치하고 있다. 그러나 배점으로 보면 ‘12점(24%)～15점(30%)’로 구성되어 ‘한자어’의 비 중이 최고 6% 정도 낮게 나타나고 있다. 문항의 평가 요소를 살펴보면 한자어 영역의 학습 요소를 고르게 반영하고 있으며, 문항의 유형 역시 다양하게 변화를 거 듭하고 있다. 이러한 유형의 변화는 내용상 타당성을 높이거나 변별도를 제고하거 나 정답률을 조정하기 위한 노력의 일환인 동시에 기출 문항에 저촉되지 않기 위 한 것이기도 하다. 또한 삽화를 적극 활용하고 있는 것도 특징 중의 하나라 할 수 있다. 본 연구에서는 대학수학능력시험 한문 과목 ‘한자어 영역’에 대한 분석을 ‘출제 경향’과 ‘문항 유형’의 차원에 국한하여 수행하였다. 차후로 ‘한문 영역’에 대해서 도 이와 같은 분석 작업이 계속되어야 할 것이다. 이를 통해 대학수학능력시험 한 문 과목의 전체적인 출제 경향 및 문항 유형 분석 작업이 마무리되면 한 단계 더 나아가 ‘문항의 양호도’에 관한 연구를 수행할 필요가 있다. 이러한 일련의 작업은 앞으로의 과제로 남긴다.

The International Astronomy Olympiad (IAO) was established by the Euro-Asian Astronomical Society in order to disseminate astronomical knowledge, promote international cooperation in astronomical education area and recognize the importance of astronomy in far-reaching field of science and human culture. The first IAO competition was held at the Special Astrophysical Observatory of the Russian Academy of Sciences located in the north Caucasus of Russia in 1996. Since then, it has been held every year. This paper describes the present status of the IAO main regulations regarding its operation and major results by year, related institutions, and organizations. We created a scientific inquiry framework to analyze past IAO problems in the recognitive aspect in order to measure levels of the scientific knowledges and the scientific thinking abilities. Through this analysis, we can understand the current status of the IAO, and examine the future direction of Korea Astronomy Olympiad. Also, we can make preparation for the IAO competition and the education of delegates.

본 연구에서는 대학수학능력시험[College Scholastic Ability Test] 한문 과목 [Chinese Characters] ‘한자 영역’에 대한 분석의 방향을 크게 ‘출제 경향’과 ‘문 항 유형’의 차원으로 그 범주를 설정하였다. 이 연구는, 한문 과목이 대학수학능력 시험 제2외국어/한문 영역에 포함되어 시행되기 시작한 2005학년도 6월 모의평가 부터 2009학년도 9월 모의평가까지 총 14회에 걸친 모의평가 및 대학수학능력시 험 문항을 검토 대상으로 하여 분석을 진행하였다. 먼저 출제 경향의 차원에서 살펴본 결과, 한자 영역의 문항 수는 전체 문항 수 의 20%인 6문항이 출제되어 출제 매뉴얼에서 제시한 시행 지침과 일치하고 있 다. 그러나 배점으로 보면 ‘6점(12%)～10점(20%)’로 구성되어 ‘한자’의 비중이 상대적으로 낮게 나타났다. 문항의 평가 요소를 살펴보면 한자 영역의 학습 요소 를 고르게 반영하여 내용상 타당성이 높은 문항을 출제하기 위해 노력하고 있었 다. 다음으로 문항의 유형을 살펴본 결과 다양한 유형의 문항을 출제하고 있다. 변별도를 제고하고 정답률을 조정하기 위해 문항의 유형에 계속 변화를 주고 있 으며, 또한 기출 문항에 저촉되지 않기 위하여 새로운 문항 형식을 도입하였고 삽 화를 적극 활용하고 있었다. 본 연구에서는 대학수학능력시험 한문 과목 ‘한자 영역’에 대한 분석을 ‘출제 경 향’과 ‘문항 유형’의 차원에서 수행하였다. 차후로 측정․평가의 통계적 원리와 기 법을 활용하여 ‘문항의 양호도’에 관한 연구를 수행할 필요가 있다.

본 연구에서는 2003년도에 46개국에 참여한 TIMSS 2003 연구에서 지구과학 영역의 성취도를 주제별, 문항 유형별, 인지영역별로 분석하였다. 또한 문항 수준에서 국제평균과의 정답률 차이가 큰 문항과 남녀 정답률 차이가 큰 문항을 분석하였다. 우리나라 학생들은 모든 유형별로 국제평균보다 유의하게 높은 정답률을 나타내었고, 인지 영역별로는 우리나라 중학생들은 지구과학 영역에서 천문학 관련 주제 및 추론과 분석 영역에서 강세를 나타내었다. 우리나라의 정답률이 국제평균 정답률보다 낮게 나타난 5개 문항을 분석한 결과, 우리나라 중학생은 이해하고 있는 내용을 그림이나 도식으로 표현하는 데 미숙함을 알 수 있었다. 우리나라 여학생들은 사실적 지식을 묻는 선택형 문항에서 남학생들 보다 정확한 정보를 회상해 내는 데 어려움을 겪고 있으며, 학습하지 않은 내용에 대하여 어려워하는 경향이 남학생보다 크다는 것을 추정할 수 있다 연구 결과를 토대로 우리나라 교육과정의 지구과학 내용 구성과 교수학습 방법 개선에 대한 제언을 제시하였다.

The national curriculum for English in Korea emphasizes the development of communicative competence through the use of task-based learning and communicative activities that suit the student’s needs and levels, as well as the integration of the four skills. This not only requires sophisticated teaching skills, but also a high degree of proficiency in English. The English Teacher Selection Test, which is meant to select quality English teachers, has never been free from being criticized for its lack of validity, consistency, and proper feedback. This study thus analyzes the English Teacher Selection Test items from 2004 to 2006 in terms of percentages of different fields of major and suggests some ideas to make the Test more efficient in serving its purpose, which is selecting quality English teachers.

본 연구에서는 한국 지구과학 올림피아드 문항의 질 향상 방안을 모색하고자 1회와 2회 예선 및 본선 문항을 다양한 측면에서 분석하였다. 문항 분석을 위해 내적 및 외적 문항 분류틀을 구안하여 적용하였다. 고전 검사이론을 적용하여 문항의 난이도와 변별도, 상관계수, 그리고 신뢰도를, 일반화가능도 이론을 적용하여 일반화가능 도를 각각 추정하였다. 문항 분류틀 적용 결과는 다음과 같다: (1) 내용 차원에서는 지질 영역과 천문 영역에, 지식 및 탐구과정 차원에서는 자료 분석 및 해석에 집중되는 경향을 보였다. 또한 맥락 차원에서는 거의 대부분의 문항이 교과서적인 상황을 토대로 한 것이었다. (2) 요구 사고 수준에서 예선과 본선간의 차이를 발견할 수 없었다. (3) 문항 표현 범주에서는 그림의 사용 비율이 가장 높았고, 문항 유형 범주에서는 예선은 선다형과 단답형의 비율이, 본선은 서술형의 비율이 높았다. 또한 문항 형식 범주에서는 중학부와 예선은 단독형의 비율이 높고, 고교부와 본선은 복합형의 비율이 높았다. 문항을 분석한 결과는 다음과 같다: (1) 중학부는 대체로 난이도가 낮고, 변별도는 적절하였다. 그러나 고교부는 일반고와 과학고간에 상당한 차이가 있었다. (2) 중학부는 대기 영역과 총점과의 상관이, 고교부는 천문 영역과 총점과의 상관이 가장 높았다. (3) 양호한 문항이 가장 많은 일반고부의 문항 내적 일관성신뢰도와 일반화가능도가 가장 높았다. (4) 일반 고는 출제된 문항 수로 적정 수준의 일반화가능 도에 도달되나, 중학부나 과학고는 출제된 문항보다 2배 이상 많은 문항수가 필요한 것으로 나타났다.

본 연구는 1999 ∼ 2001학년도의 대학수학능력시험에서 지구과학 II 선택 경향 및 선택과목간의 점수를 비교하고, 지구과학 관련 문항의 탐구과정 및 내용 요소별 분포와 각 문항에 대한 학생의 반응을 분석하여 정답률이 낮은 문항에 대한 오답 유형을 추출하였다. 대학수학능력시험의 자연계 응시자는 1995학년도에 43.14%이었으나 최근 2년 동안에 급격히 줄어들어, 2001학년도에는 29.51%이었고, 2002학년도에는 26.92%로 감소하고 있다. 자연계 응시자의 지구과학 II 선택 비율은 약 22%로 생물 II(약 38%), 화학 II(약 28%)에 이어 3번째이다. 탐구과정별로는 공통과학 및 지구과학 II 모두 자료 해석에 대해서 가장 많이 출제되고 다음으로 결론 도출 및 평가에 대해서 많이 출제되었다. 내용별로는 공통과학에서는 ‘지각의 물질과 지각변동’(20.83%)에서 가장 많이 출제되었고, ‘온실효과’와 ‘우주과학’에 대해서는 출제되지 않았으며, 다른 영역에서는 대체로 고루 출제되었다. 지구과학 II에서는 ‘지각의 물질과 변화’ (22.92%)영역에서 가장 많이 출제되었고, 전반적으로 고르게 출제되었으나 ‘환경과 자원’에서 출제되지 않았고, ‘태양계’에 대해서는 비교적 적게 출제되었다. 문항 난이도 분포를 보면 1999학년도는 예상정답률 40 ∼ 59%와 60 ∼ 79%의 문제를 각각 6, 10개 출제하였고, 2000학년도에는 40 ∼ 59% 1문항, 60 ∼ 79% 14문항, 80% 이상 1문항 출제하였으나 2001학년도는 16문항 모두를 60 ∼ 79%에 해당하는 것을 출제하였다. 정답률이 높은 문항은 문제 해결에 지구과학 개념이 요구되지 않고 탐구 과정만 요구되는 문항, 매년 출제되어 학생에게 익숙한 분야, 탐구 능력 없이도 특정 지식만 있으면 해결되는 문항이다. 반면에 정답률이 낮은 문항은 지구와 행성의 운동, 해파에 관한 문항이며, 특히 복합개념이 요구되는 문항의 정답률이 낮다. 학생의 오답 반응 분석 결과 기본 개념에 대한 이해가 미흡한 주요 내용은 공통과학에서는 변환단층 및 부정합에서 지질학적 현상, 혼합층과 수온 약층의 의미, 온대저기압 통과 전후의 날씨 변화이며, 지구과학 II 에서는 달의 위상과 위치변화, 화성암의 구성광물 · 화학조성 · 조직 변화와 마그마 분화 및 풍화와의 관계, 지진파 주시곡선, 대기순환의 종류와 규모, 해파, 혼합층과 수온 약층, 서안강화 현상, 행성의 위치와 운동, H-R도상에서의 별의 특성과 진화 등이다. 탐구 과정에 대한 학생의 성취도는 비교적 높으므로 이해도가 상대적으로 낮은 영역에 대해 학생의 오답 유형을 참고하여 기본 개념 지도에 보다 관심을 기울일 필요가 있다.