评价量规设计对慕课同伴互评有效性的影响研究

被引：27

作者：

范逸洲 ^{[1
]}

冯菲 ^{[2
]}

刘玉 ^{[3
]}

汪琼 ^{[1
]}

机构：

[1] 北京大学教育学院

[2] 北京大学教师教学发展中心

[3] 北京中医药大学人文学院

来源：

电化教育研究 | 2018年 / 39卷 / 11期

关键词：

同伴互评; 评价量规; 设计研究; 评分者间信度; 评分效度; 量规设计原则;

D O I：

10.13811/j.cnki.eer.2018.11.006

中图分类号：

G434 [计算机化教学];

学科分类号：

040110 ;

摘要：

同伴互评是MOOC常采用的学员作业评价方法,但是MOOC同伴互评的准确性和可靠性因学员知识水平程度差异过大而被质疑。为了研究如何通过改进评价量规来提高同伴互评的可靠性和准确性,在教师培训类MOOC"翻转课堂教学法"的两期教学中,我们进行了若干设计研究。研究发现,在教学培训类MOOC的同伴互评活动中,学生评分和教师评分高度相关。细化评分量规的等级描述,以及采用是非选择型的评价量规都能显著提高评分者间信度和评分效度,且评分者间信度与评分效度的差异度与学生所提交作业文档本身的质量也有关系。在研究发现的基础上,文章提出了MOOC同伴互评评价量规的设计原则和使用建议。

引用

页码：45 / 51

页数：7

共 5 条

[1] MOOC中同伴互评的功能与策略探究——以edX、Coursera平台及北京大学的MOOC课程为例 [J].

刘玲 .

工业和信息化教育, 2014, (11) :11-16

[2] 量规:一种有效的评价工具 [J].

唐玉霞 .

中小学电教, 2010, (12) :3-6

[3] Reliability of peer and self-assessment scores compared with trainers' scores following third molar surgery [J].

Evans, Ann W. ;

Leeson, Rachel M. A. ;

Petrie, Aviva .

MEDICAL EDUCATION, 2007, 41 (09) :866-872

[4]

The use of scoring rubrics: Reliability, validity and educational consequences[J] . Anders Jonsson,Gunilla Svingby.Educational Research Review . 2007 (2)

[5]

Scoring rubrics: what, when, and how?. Moskal, B. M. Practical Assessment, Research, ＆ Evaluation . 2000

← 1 →