본 연구는 간호대학생의 아동간호학 성취도 평가 문항의 분석을 위하 여 고전검사이론(CTT)과 문항반응이론(IRT)을 적용하였다. 연구대상은 경 북 소재 4년제 A대학에서 아동간호학을 수강하고 있는 간호대학생 총 88 명이었다. 자료는 2024년 3월 12일부터 27일까지 2시간씩 총 6회의 수 업 내용 기반의 40문항에 대한 평가 결과가 수집되었다. 이는 CTT와 IRT의 2-모수 로지스틱 모델(2PL)을 사용하여 jMetrik 4.1.1 프로그램을 활용하여 분석하였다. 연구 결과, 첫째, CTT에 따른 분석에서 19개의 쉬 운 문항, 20개의 중간 난이도 문항, 1개의 어려운 문항으로 분류되었고, IRT에 따른 분석에서는 6개의 쉬운 문항, 34개의 중간 난이도 문항으로 나타났다. 둘째, 변별도 기준으로 CTT에서는 3개의 낮은 변별도 문항, 24개의 중간 변별도 문항, 13개의 높은 변별도 문항이 있었고, IRT에서 는 5개의 낮은 변별도 문항, 20개의 중간 변별도 문항, 15개의 높은 변 별도 문항으로 구분되었다. 셋째, CTT와 IRT를 비교한 결과, CTT에서는 쉬운 문항이 많아 전체 평가의 변별력이 낮아질 가능성이 있었으나, IRT 에서는 중간 난이도 문항이 많아 평가의 신뢰성과 타당성이 높아질 가능 성이 있었다. 본 연구는 CTT와 IRT를 활용하여 아동간호학 성취도 평가 문항의 분석결과를 제시함으로써 간호대학생의 아동간호 역량의 효과적인 평가 문항 개발을 위해 CTT와 IRT의 적용 가능성을 제안하였다.

2015 개정 교육과정 중학교 한문 교과서 17종에 실린 소단원 평가 문항을 대상으로 문항 유형별, 성취기준별 분석을 시도하였다. 대단원 평가는 소단원 평가와 평가 대상 및 내용이 중복되기 때문에 제외하였으며, 한 문항에 여러 하위 문항이 있는 경우 하위 문항도 각각 하나의 문항으로 구분하였 다. 이에 전체 대상 평가 문항은 1737문항이었으며, 각 평가 문항은 출판사, 단원 번호, 문항 번호에 따라 코드를 부여하였다. 문항 유형은 ‘선택형-진위형, 배합형, 선다형’, ‘서답형-단답형, 완성형, 서술형’으로 분류하여 분석하였다. 선택형 문항보다는 서답형 문항의 비율이 높았다. 선택형 문항은 대부분이 선다형 문항이었고 서답형 문항은 단답형, 서술형, 완성형의 순서로 비율이 높았다. 성취 기준별로는 ‘한자의 모양·음·뜻’, ‘내용과 주제’, ‘한시의 이해와 감상’, ‘일상용어’, ‘성어’, ‘전통 문화 의 계승과 발전’의 성취기준에 해당하는 문항이 전체의 70%를 차지하였다. 이는 현행 한문 교과서 에서 어떠한 부분을 중요하게 여기는지 알 수 있는 부분이다. 그리고 교과서 평가 문항의 실제 예시를 제시하며 분석을 시도하였다. 다만, 평가 문항에 대한 지식의 부족으로 평가 문항에 대한 입체적 분석과 대안 제시가 부족하였다. 평가 문항에 대한 보다 세밀한 분석과 특정 영역별 평가 문항 분석에 대한 후속 연구를 기대한다.

The introduction of a speaking and writing test is of greater importance because it is becoming more central to language assessment, especially with reference to communicative language instruction. In order for a writing test to be reliable and valid, the item difficulty should be the same across different test forms. In line with this test equivalence, this study examined the factors that affect writing item difficulty in Level 2 of the NEAT using two qualitative data collection methods, a) focus-group meetings with researchers, professors and teachers who specialized in English education, and b) in-depth interviews with students who took Level 2 of the NEAT. The results indicated that the following factors affected writing item difficulty: a) topic familiarity, b) topic concreteness, c) the extent to which a topic elicits negative feelings from test-takers, d) concreteness of a given writing prompt, e) the extent to which a given writing prompt elicits diverse words, and f) the vocabulary and grammar knowledge required to complete a given writing task. Based upon the study’s results, further research about teaching and testing writing skills is discussed.

본 연구의 목적은 최근 5년간 중학교 3학년을 대상으로 실시된 국가수준 학업성취도 평가 문항을 지구과학 영역을 중심으로 3차원 과학 평가틀을 활용하여 분석해 보았으며, 그 분석 결과는 다음과 같다. 첫째, 과학 내용 영역의 분석 결과는 ‘에너지’, ‘물질’, ‘생명’, ‘지구’의 문항수가 고르게 출제 되었다. 지구(지구과학)영역을 단원별로 분석한 결과는 ‘지구와 별’이 가장 출제가 많이 되었으며, ‘태양계의 운동’이 가장 출제 빈도가 낮았고, 내용에 따라서 출제 빈도의 차이를 보이고 있었다. 둘째, 행동 영역의 분석 결과, 지식 범주가 탐구의 범주보다 높게 나타났으며, 지구과학 영역의 분석 결과도 과학 영역과 큰 차이가 없었다. 셋째, 상황 영역의 분석 결과, 탐구 상황 4개 범주 중 순수 과학적 상황이 가장 높았다. 본 연구는 이들 분석 결과를 토대로 2007 개정 교육과정 지구과학 목표의 도달정도를 확인하는 2012학년도 국가수준 학업성취도 평가의 개선 방향을 제시하고자 한다.