This study investigated the effects of self and peer evaluations and learners’ involvement on the development of assessment criteria in higher education English literature classes. A total of 40 college students participated in the study, extracting five main criteria with 10 sub-standards to assess their group assignments and conduct self- and peer evaluation on their presentations. The results of the learners’ selfand peer assessments were compared with instructor’s assessments and their final grades using one-way ANOVA and correlation analysis. The study also examined the correlation among the assessment criteria to find which factors affected learning outcomes. The study concluded that their participation in the development of assessment criteria positively, affected their critical thinking ability and the selection of subjects for the group presentations. Logicality of writing also affected the outcomes of final assessments. The study concluded that self- and peer assessments can be highly effective in learning processes when learners actively participate in setting the assessment criteria.
이 연구의 목적은 예비 국어 교사의 수업지도안을 평가할 수 있는 평가 준거를 개발하고, 다국면 Rasch 모형을 활용하여 개발된 평가 준거의 타당성과 신뢰성을 검증하는 것이다. 이를 위해 11명의 예비 국어 교사가 작성한 수업지도안에 대하여 개발된 수업지도안 평가 준거를 적용하여 4명의 현직 국어교사가 평가를 실시하였고, 그 결과를 토대로 평가 준거에 대한 타당도를 분석하 였다. 이에 대한 연구 결과를 정리하면 다음과 같다.
첫째, 평가자 간 신뢰도와 평가자 내 신뢰도가 높게 나타났다. 이는 평가자가 수업지도안 설계 과정이나 수업시연을 함께 공유하며, 수업지도안 평가가 이루어졌기 때문으로 해석된다. 둘째, 평가 준거 적합도의 경우 평가 준거 1(국어 학습목표의 명료한 설정)만 1.58 logit으로 부적합한 (misfitting) 평가 준거로 판정되었다. 이에 평가 준거 1은 학습목표의 개수, 학습목표의 설정 및 진술 방식, 교수학습 내용과의 유관함 등을 타당하고 평가할 수 있는 준거 설정이 필요함을 보여준다. 셋째, 평가 준거의 5점 척도 적합도를 분석한 결과, 1점과 2점의 척도 사용이 많지 않았고 4점 척도의 경우 척도의 대표성을 갖추지 못하였다. 수업지도안 평가 준거의 척도 수준을 여기서 제시 한 5점보다 낮춰 상, 중, 하 등의 3점 척도 수준으로 조정할 필요가 있다.
종래의 음악교과의 실기 평가는 평가에 대한 형평성과 공정성에 있어서 많은 문제점들을 드러냈다. 이러한 문제점들에 대해서 평가 준거는 평가의 공정성을 확보하게 함으로써 음악교과의 평가 목적과 장점을 발휘하도록 한다. 따라서 본 연구는 타당한 음악과 평가을 위하여 음악 교과의 수행평가 준거를 개발하였다. 개발된 음악 수행평가 준거는 Rief의 분류에 따라 내적 준거와 외적 준거로 나누었다(Rief L, 1990: 24). 내적 준거는 음악교과 내용의 요소와 특성, 외적준거는 음악 수행과제의 활용도 및 유용성을 중심으로 분류하였다. 음악 수행평가 준거는 내적, 외적 준거의 특성에 따라 영역을 나누고 하위 요소로서 19개의 세부 영역을 개발하였다.
본 연구는 HCI 이론을 적용하여 게임형 학습 프로그램을 평가하기 위한 준거를 개발한다. 사람들이 편리하고 즐겁게 사용하도록 하는 시스템을 개발하는 원리나 방법을 연구하는 학문인 HCI 이론은 다양한 영역의 프로그램 개발에 광범위하게 적용되어 왔다. 그리고 학습 프로그램을 평가하는 데도 널리 활용되어 왔다. 그러나 HCI 이론을 적용한 게임형 코스웨어 평가에 대한 연구는 거의 없다. 따라서, 게임형 코스웨어 평가 연구에서도 HCI 이론 적용이 필요하다. 본 연구는 HCI의 구성요소인 유용성(Usefulness), 사용성(Usability), 감성(Affect)의 관점에서 평가 준거를 개발한다. 본 연구에서 개발한 평가 준거는 게임형 학습 프로그램을 평가하는 기준으로 활용될 수 있을 것이다.