평가의 비교

상호평가에서는 대체로 하나의 과제에 대하여 교사와 학생 모두에게 평가가 된다. 만일 예제가 쓰여진다면, 학생들이 선택하여 그것들을 평가하기 전에 교사가 먼저 이를 평가해야 한다. 학생들의 작업은 부분적이 될지언정 교사에 의해 잘 평가될 것이고 또 다수의 학생들에 의해서 평가될 것이다. 상호평가는 교사로 하여금 일정부분 학생 자신의 작업에 대한 평가에 대해 보상적 성격의 점수를 주고, 나머지는 제출된 연습과제를 평가하여 점수를 주게 되어있다. (이 점수들에 대한 비율은 상호평가 설정 마지막 부분에서 결정할 수 있다.) 학생들의 평가는 교사가 동일한 과제를 평가한 내용과 얼마나 일치하느냐를 기반으로 하여 점수가 주어진다.(만일 교사의 평가가 누락된 경우에는 동료평가의 평균치가 대신 사용된다.)

학생과 교사 사이의 평가에 대한 합치 정도는 개개 요소들에 대한 점수의 편차를 근간으로 한다.(실제로는 편차의 제곱을 이용한다) 이러한 편차의 평균은 의미있는 점수로 변환되어야만 한다. The "평가의 비교" 옵션은 교사가 이러한 비교내용을 점수로 환산할 수 있는 방법을 제공한다.

이 옵션이 어떤 효과를 알기 위해, (아주 간단한) 10개의 예/아니오로 된 평가의 예를 살펴보기로 하자. 예를들어 평가가 "표가 제대로 구성되었는가?", "계산된 이익이 $100.66인가?" 등의 질문을 사용했다고 치자. 대충 이런 문항으로 10개가 있다고 가정하자. 만약 "Very Lax" 설정이 채택되었다고 할 때, 학생 및 교사의 평가사이에 완전한 합치를 보일 때 100%의 점수를 주는데, 만일 일치하지 않는 문항이 하나 있다면 90%, 둘이라면 80%, 셋이라면 70%...등으로 될 것이다. 언뜻보면 매우 합리적인 것처럼 보여서 왜 이 옵션을 "Very Lax" 비교라고 부르는지 의아해 할 수 있다. 자 그럼 한 학생이 간단히 추측할 수 있는 10개의 질문에 답을 한 무작위한 평가를 했다고 쳐보자. 이 때 평균적으로 10개중 5개와 일치할 것이다. 따라서 "흉내내기" 평가는 대략 50%를 얻게된다. 이를 좀 미감한 방법인 "느슨하게" 옵션을 선택하면 무작위로 한 평가는 대략 20%를 얻게 된다. 또 "공평하게" 옵션을 선택하게 되면 무작위 평가는 대개의 경우 0점을 맞게 된다. 이 수준에서 50%의 점수는 두 평가에 대해서 10개중 8개가 일치해야만 한다. 만일 세 문항만 불일치해도 점수는 25%밖에 되지 않는다. 이 옵션을 "엄격하게" 로 설정하게 되면 두 문항이 일치하지 않으면 40% 가 된다. 이를 "매우 엄격하게"로 놓게되면 단 두문항만 일치하지 않아도 점수는 35% 로 떨어지게 되고 한 문항만 일치하지 않는다고 해도 점수는 65%밖에 얻지 못한다.

이 예시는 대부분의 평가 요소가 예/아니오의 범주보다는 일련의 값의 범위를 가지고 있다는 점에서 다소 인위적인 측면이 있다. 그러한 경우 비교는 위에 지적한 예보다는 다소 점수가 높게 나올 것이다. 그래서 다양한 수준들(매우 느슨, 느슨하게, 공평하게 등)을 제공함으로써 교사들이 비교의 미세한 조정을 할 수 있게 하는 것이다. 만일 평가에 주어진 점수들이 너무 낮은 듯 싶으면 이 옵션들을 "느슨하게" 혹은 "매우 느슨하게" 로 선택하여 본다. 반면에 만일 학생들의 평가 점수가 너무 높다 싶으면 옵션을 "엄격하게" 혹은 "매우 엄격하게" 쪽으로 선택해 놓는다. 최선의 값으로 설정해 놓은 "공평하게" 옵션도 실제로는 시행착오적인 것이다.

상호평가 수행 중에 교사는 학생 평가에 준 점수들이 너무 높거나 낮다고 생각이 들 때도 있을 것이다. 이러한 점수들은 연습과제의 관리 화면에서 볼 수 있다. 이런 경우 교사는 이 옵션을 변경하고 학생들의 평가 점수("평가에 대한 점수")를 재계산 할 수 있다. 재계산은 연습과제 관리화면의 하단에 있는 "학생 평가 재채점" 링크를 클릭하면 된다. 이 것은 언제든 안전하게 수행될 수 있다.

도움말 파일 색인