본 연구는 간호대학생의 아동간호학 성취도 평가 문항의 분석을 위하 여 고전검사이론(CTT)과 문항반응이론(IRT)을 적용하였다. 연구대상은 경 북 소재 4년제 A대학에서 아동간호학을 수강하고 있는 간호대학생 총 88 명이었다. 자료는 2024년 3월 12일부터 27일까지 2시간씩 총 6회의 수 업 내용 기반의 40문항에 대한 평가 결과가 수집되었다. 이는 CTT와 IRT의 2-모수 로지스틱 모델(2PL)을 사용하여 jMetrik 4.1.1 프로그램을 활용하여 분석하였다. 연구 결과, 첫째, CTT에 따른 분석에서 19개의 쉬 운 문항, 20개의 중간 난이도 문항, 1개의 어려운 문항으로 분류되었고, IRT에 따른 분석에서는 6개의 쉬운 문항, 34개의 중간 난이도 문항으로 나타났다. 둘째, 변별도 기준으로 CTT에서는 3개의 낮은 변별도 문항, 24개의 중간 변별도 문항, 13개의 높은 변별도 문항이 있었고, IRT에서 는 5개의 낮은 변별도 문항, 20개의 중간 변별도 문항, 15개의 높은 변 별도 문항으로 구분되었다. 셋째, CTT와 IRT를 비교한 결과, CTT에서는 쉬운 문항이 많아 전체 평가의 변별력이 낮아질 가능성이 있었으나, IRT 에서는 중간 난이도 문항이 많아 평가의 신뢰성과 타당성이 높아질 가능 성이 있었다. 본 연구는 CTT와 IRT를 활용하여 아동간호학 성취도 평가 문항의 분석결과를 제시함으로써 간호대학생의 아동간호 역량의 효과적인 평가 문항 개발을 위해 CTT와 IRT의 적용 가능성을 제안하였다.

This study aimed to develop a questionnaire that is suitable for the resident-participatory ODA evaluation to minimize the bias and insufficient scientific rigor in the self-made questionnaire developed by evaluators. A modified Delphi survey was conducted twice with 16 ODA experts who had experience in international cooperative development in the fields of rural development, education, health, and poverty. Sixty-two questions were finally selected for resident-participatory ODA evaluation: 7 questions on relevance, 8 questions on efficiency, 9 questions on effectiveness, 11 questions on impact, questions on for sustainability, 4 questions on gender mainstreaming and environmental impact, and 17 questions on spillover effect on the community. A resident survey with the newly developed questionnaire will generate high-quality data that can empirically analyze the causal-effect relationship between ODA activities and performance, and community changes, and it can also contribute to the development of a quantitative ODA evaluation tool at a local level of recipient countries.

The purpose of this study is to develop guidelines for a Hindi A0 level evaluation test with its standardized Hindi curriculum. The development of a Hindi A0 level evaluation test is a basic requirement for ensuring internal stability of school education, because languages that uses special or unique characters that are not based on Roman alphabets, such as Hindi, Thai, and Persian, require a separate learning process or curriculum as well as their evaluation tests. This is not only in line with the purpose of the ‘Act on the Promotion of Education of Critical Foreign Languages’ enacted on August 2, 2016, but also because it can promote the substantiality of education in other critical foreign languages including Hindi, which had been conducted without a standardized curriculum. In other words, this study explores the concept of the A0 level that is not included in the CEFR, as a first step toward the realization of the ‘Common Asian Framework of Reference for languages’, the letters and pronunciations of which require a lot of time to learn. To this end, a guideline of an evaluation test for Asian languages is also proposed.

목적 : 본 연구는 학령기 아동을 대상으로 학교에서의 활동에 기초한 감각처리능력을 알아보기 위한 평가 도구의 문항을 개발하는 예비연구로 진행되었다. 연구방법 : 연구 과정은 예비 문항 구성과 본 문항 구성을 통해 이루어졌다. 예비 문항 구성은 문헌고찰을 통한 문항 수집 후 감각통합 교육 경험이 있는 초등교사 3명과 학교 작업치료 경험이 있는 작업치료사 4명에게 문항 적절성 조사 및 신규 문항 수집을 하였다. 본 문항 구성은 초등교사 24명에게 내용 타당 도 지수(Content Validity Index; CVI)를 이용한 문항 적절성 조사, 작업치료사 19명에게 내용 타당도 지수(CVI)를 이용한 문항 적절성 조사 및 감각의 종류, 감각처리장애의 분류에 대한 조사를 하였다. 결과 : 문헌고찰을 통해 179문항이 수집되었고, 이후 예비 문항 구성 단계에서 93개 문항 삭제, 23개 문 항 추가되어 105개 문항이 구성되었다. 본 문항 구성 단계에서는 내용타당도 지수 값이 단계에 따라 70-80%가 만족될 때 선정하여 19개 문항 삭제, 1개 문항 추가되어 87개 문항이 구성되었다. 최종적으 로 학교에서의 활동에 기초한 감각처리 문항으로 분류하면, 일반적 학습 활동은 45개 문항, 예체능 활동 은 17개 문항, 식사 시간 및 쉬는 시간 활동은 25개 문항으로 총 87개 문항이 개발되었다. 결론 : 본 연구는 국내 학교의 활동 영역을 바탕으로 감각처리능력을 평가 할 수 있는 평가도구의 문항을 개발하였다는 데 의의가 있다. 본 평가도구의 임상적, 연구적 사용을 위해서는 추후 본 평가도구의 다양 한 타당도를 검증하기 위한 연구가 진행되어야 할 것이다.

2015 개정 교육과정 중학교 한문 교과서 17종에 실린 소단원 평가 문항을 대상으로 문항 유형별, 성취기준별 분석을 시도하였다. 대단원 평가는 소단원 평가와 평가 대상 및 내용이 중복되기 때문에 제외하였으며, 한 문항에 여러 하위 문항이 있는 경우 하위 문항도 각각 하나의 문항으로 구분하였 다. 이에 전체 대상 평가 문항은 1737문항이었으며, 각 평가 문항은 출판사, 단원 번호, 문항 번호에 따라 코드를 부여하였다. 문항 유형은 ‘선택형-진위형, 배합형, 선다형’, ‘서답형-단답형, 완성형, 서술형’으로 분류하여 분석하였다. 선택형 문항보다는 서답형 문항의 비율이 높았다. 선택형 문항은 대부분이 선다형 문항이었고 서답형 문항은 단답형, 서술형, 완성형의 순서로 비율이 높았다. 성취 기준별로는 ‘한자의 모양·음·뜻’, ‘내용과 주제’, ‘한시의 이해와 감상’, ‘일상용어’, ‘성어’, ‘전통 문화 의 계승과 발전’의 성취기준에 해당하는 문항이 전체의 70%를 차지하였다. 이는 현행 한문 교과서 에서 어떠한 부분을 중요하게 여기는지 알 수 있는 부분이다. 그리고 교과서 평가 문항의 실제 예시를 제시하며 분석을 시도하였다. 다만, 평가 문항에 대한 지식의 부족으로 평가 문항에 대한 입체적 분석과 대안 제시가 부족하였다. 평가 문항에 대한 보다 세밀한 분석과 특정 영역별 평가 문항 분석에 대한 후속 연구를 기대한다.

한문과와 같이 학습자에 따라 또는 한문 교과 이수 정도에 따라 학업 성취 수준이 크게 차이가 나는 특수한 경우에는 학생 개개인의 특성 및 차이, 숙달 및 미숙 등에 따라 개별적으로 평가 결과 를 분석하거나 보고(reporting)한다면, 이러한 자료들을 통해서 학생들은 더 나은 학습을 수행 (performance)할 수 있고 교사들은 더욱 효율적인 교수 ‒ 학습을 진행할 수 있다. 이러한 관점 하에 서 최근 교육 평가 분야에서 새롭게 주목하고 있는 인지진단모형(cognitive diagnostic model)을 소 개하고 한문과 평가에 적용해 볼 필요가 있을 것으로 판단하였다. 따라서 이번 연구에서는 최근에 새롭게 주목받고 있는 인지진단모형을 한문과 평가 연구자들에게 간단히 소개하고, 한문과 수능 문 항과 문항의 특정 속성과의 관계를 규명하여 Q행렬을 구성해봄으로써 인지진단모형의 한문과 적용 에 대한 적절성과 적용 가능성을 탐색해보고자 한다.

Since Japanese was taught in secondary schools as a second language, the Korean educational system has faced the decrease in the number of students who take Japanese classes. In such a situation, we need to break out of traditional teaching methods and seek new directions. This research focuses particularly on the assessment and analyzes the items of the regular tests in Korean secondary schools, checking out whether those items are in accordance with the national curriculum and learning objectives. In addition, it is examined whether the intention of evaluators is appropriately tested and whether those items follow the evaluation guides. The results showed that regular assessments were far from enhancing communication proficiency when they were compared with the proportion of language contents for communication proficiency in the Korean SAT. Furthermore, as regards to validity, it was found that many items did not observe the evaluation guidelines of national curriculum and did not fulfill evaluators’ intention. Pedagogical implications will be discussed.

교육과정이 개정되면서 내용체계 상의 ‘문화’ 영역의 위상이 변화함에 따라, ‘문화’와 관련한 평가의 다양한 연구를 진행할 필요가 있다. 본고에서는 2009개정 교육과정의 ‘문화’ 영역에 대한 평가 방법에 따른 문항의 유형과, ‘문화’ 영역의 내용요소와 관련한 문항 사례를 소개하였다. 첫째, 문화 영역에 대한 다양한 지필평가 및 수행평가 문항의 유형을 제시하였다. 지필평가는 크게 선택형과 서답형으로 분류하고, 세부적으로 진위형, 선다형, 결합형, 단답형, 완성형, 논술형 문항 사례를, 수행평가는 서술/논술형, 토론법, 연구보고서법, 포트폴리오법 문항 사례를 제시하였다. 둘째, 문화 영역의 내용요소에 맞추어 학교 현장에서 실제 교사가 제작한 문항의 사례를 제시하였다. 문화 영역의 경우 교육과정에서 내용이 개념적으로 기술되어 있어 이를 구체화하여 평가 문항을 개발하는 데는 한계가 있다. 또한 지속적인 평가 문항의 개발 연구가 필요한 실정이다. 문화 영역 학습의 중요성을 고려해볼 때 이와 관련한 후속 문항 개발 연구를 기대해본다.

본고는 교육과정에 제시된 ‘독해’영역의 내용을 토대로 평가요소를 추출하고 평가요소에 따른 평가 문항을 검토하여 새로운 ‘독해’영역의 평가문항의 개발 방향을 모색하는데 목적이 있다. 새로운 평가문항 개발 방향의 모색을 위해 2007 개정교육과정, 2009 개정교육과정에 제시된 내용체계에 제시된 내용을 바탕으로 평가요소를 추출하고, 추출된 평가요소에 따라 국가수준의 대학수학능력시험 평가 문항과 학교수준의 평가문항을 검토하였다. 문항의 검토를 통해 장단점을 확인하고 새로운 평가유형 개발에 반영하기 위해서였다. 하지만 평가의 유형이 지필평가 문항에 제한되어 교육과정상에 제시된 다양한 평가요소들이 문항으로 실현되지 못하는 한계를 확인할 수 있었다. 아울러 평가문항의 유형과 평가의 내용이 다양하지 못했으며, 다양한 글감을 통해 ‘독해’영역을 평가하지 못하는 문제 또한 확인할 수 있었다. 이와 같은 내외적인 문제의 해결점은 교육과정 내용 및 평가 요소에 대한 정치한 분석을 통한 이론의 정립과 다양한 한문교육 주체의 적극적인 참여를 통한 평가문항의 개발과 같은 실천적인 접근에서 찾아야 할 것이다.

본고는 2015 개정 교육과정이 개발되고 있는 현 시점에서 한문과 교육과정 ‘어휘’ 관련 내용과 적용의 실제 사이에서 발생할 수 있는 간극을 최소화하기 위해, 2010학년도 본수능부터 2016학년도 6월 모의평가까지의 평가 문항을 중심으로 그간 한문과에서 실시된 ‘어휘’ 관련 평가 문항의 내용 요소와 내용 요소별 평가 유형 등을 분석하였다. 그 결과 그간 대학수학능력시험에서 출제된 어휘 관련 평가 문항들은 한자 어휘와 관련된 다양한 평가 요소를 고루 반영하고 있으며, 그 유형도 변화를 거듭하여 다양한 유형으로 안착된 상태였다. 하지만 급변하는 교육 환경 속에서 한문과가 위상을 공고히 하면서 발전해 나가기 위해서는 현재 상태에 안주할 것이 아니라 끝임 없이 새로운 평가 요소를 개발하고 해당 요소에 적합한 유형의 문항을 출제할 필요가 있다.

본 연구는 전문대학의 수업특성을 반영한 강의평가 문항개발을 목적으로 한다. 문항개발은 일련의 사전작업을 거쳐 전문가집단 의견조사를 기반으로 하는 델파이조사를 주요 방법으로 이루어졌다. 본 연구에서 제안된 강의평가 문항은 이론․강의식 수업용 문항과 실습․실기식 수업용 문항으로 자기평가 항목(3문항), 수업만족도 평가항목(8문항), 수업특성별 항목(3문항) 자유기술 항목(2문항)으로 구성되었다. 본 연구의 과정이 가지는 의의는 대학 수업의 주체인 교원들의 의견을 반영할 기회를 마련하고자 전문가 집단을 구성하고, 연구결과발표를 통한 의견 수렴 등의 과정을 통해 도출된 안이라는 점을 들 수 있다. 아울러 대학 수업의 특성을 반영하여 수업방법에 따른 강의평가 문항개발을 시도하였다는 점도 의미를 가진다고 할 수 있다. 향후, 학생들의 응답특성 및 유형에 따른 강의평가 결과 활용에 대한 연구가 추가적으로 요구되며, 그보다 앞서 운영적 측면에서 볼 때 신뢰로운 제도가 될 수 있도록 운영방안에 대한 연구가 필요하다.

본 연구의 목적은 각 대학의 특성과 수업의 특성에 적합한 강의평가 문항을 개발하는데 기초가 되는 자료를 제시하는 것을 목적으로 하였다. 이를 위하여 선행연구 및 여러 대학에서 현재 실시되고 있는 강의평가문항을 분석하여 강의평가문항 풀을 구성하였고, 이를 기초로 서울과 수도권에 위치한 4개 대학 600여명 학생들을 대상으로 설문조사를 실시하였다. 본 연구에 사용된 설문지는 공통형 문항과 수업특성별 선택형 문항으로 구성되며, 전체적 만족도, 학생에 대한 태도, 수업내용 및 진행, 시험․과제․평가, 수업성과 및 적절성, 이론중심 교수법, 실험․실습․실기중심 교수법 영역에서 총 109개 문항이 선정되었다. 설문조사의 분석방법은 내용 분석 및 빈도 분석이었다. 분석 결과, ‘성실’, ‘존중’, ‘열의’, ‘분명한 수업 목적’, ‘주의 깊은 답변’이 강의평가문항으로 구성되어야 하는 가장 기초적인 요소로 분석되었다. 이는 대학의 특성과 관계없이 연구에 참여한 모든 학생들의 공통적인 의견으로 강의평가 문항을 개발할 때, 가장 크게 고려해야 할 요소라고 할 수 있다. 이런 점을 고려하여, 각 대학에서는 본 연구에서 제안한 강의평가 문항의 풀을 활용하되 각 대학의 특성과 규모를 고려한 평가 문항이 개발되어야 할 것이다.

This study aims to compare the effects of different types of test-items using the same text and test-takers' text familiarity on the scores of English reading comprehension. A total of 312 third-grade Korean high school students took three different English tests, adapting types of test-items from the Korean College Scholastic Ability Test (CSAT). Each test included items using the same texts, presented in exam preparation books published by EBS in Korea, but different question types. To estimate levels of their topic familiarity, two surveys were carried out. Repeated measures ANOVAs reveal that there were significant differences in scores among the items using the same text with different types of test-items. However, there was no statistically significant effect of topic familiarity. The results indicate a greater effect of different types of test-items than topic familiarity on the scores of a reading comprehension test using the same text. Based on the findings, it is suggested that English teachers in Korea need to manage their reading classes by using various types of questions in order to develop students' reading ability and to prepare their students for the CSAT.