首页政策法规考试技术考务管理科学研究考试服务培训园地专家简介医师园地《中国医师能力评价》医学教育评价学组
首页 > 科学研究
网上阅卷的应用与思考
张 颖
(卫生部国家医学考试中心,北京 100044)

[摘要]  网上阅卷是一种以计算机网络技术和电子扫描技术为依托,以控制主观题评分误差、实现考试公平性原则为最终目的新的阅卷方式,国家医学考试中心2002年在全国卫生系统外语水平考试中试用,并于2003年在全国医学博士外语统一考试中应用。网上阅卷提高了工作效率、减小了评分误差,更好地维护了考试的公平、公正性和广大考生的权益。

[关键词]  网上阅卷;评分误差

 

网上阅卷是一种新的阅卷方式,它以计算机网络技术和电子扫描技术为依托,以控制主观题评分误差、实现考试公平性原则为最终目的,把多年来人工评卷积累起来的丰富经验和现代高新技术相结合,评卷专家不是通过领取应试者原始答卷进行阅读的方式进行评分,而是通过计算机网络,在计算机屏幕上浏览应试者答题信息的电子图像进行评分。全国卫生系统外语水平考试从2002年开始采用网上阅卷,全国医学博士外语统一考试从2003年开始采用网上阅卷。本文以全国医学博士外语统一考试为例介绍网上阅卷的实施过程及相关问题。

一、上阅卷的基本流程

网上阅卷的流程示意图如图1所示。

1

具体实施步骤为:

1.答题卡设计

印制试卷时必须将试卷和答卷分离,制作专门的答题卡供考生作答。主观题答题区域应适应计算机屏幕的显示特点,尽量避免同一题目纵向幅面过长或跨越多个页面,方便教师评卷。客观性试题最好与主观题分不同区域设计在答题卡上,在方便考生答题的同时,也方便教师评阅,同时节约答题卡空间。全国医学博士外语统一考试的答题卡为16开幅面,使用100克的纸张印制。客观题与主观题(书面表达)分别设计在答题卡的不同区域。

2.答题卡扫描

答题卡回收后进行扫描、图像校验,采集考生答题信息,与报名信息核对。扫描过程中,每位考生的每份试卷生成唯一的批号和流水号并与考生的准考证信息对应;在高速打印头的支持下,每张扫描的答题卡都打印有批号和流水号,为答题卡后期保存和查询提供了方便。扫描时客观题信息与主观题信息一次完成,阅卷系统自动对客观题部分评分,主观题的电子图像文件可通过网络或硬盘传输到阅卷服务器。

3.阅卷前准备

根据考生人数和题目数量组织阅卷教师,确定教师数量,安排机房和阅卷服务器。对阅卷教师分组,每个阅卷组设置一名可以控制评卷质量的组长。全国医学博士外语统一考试一般组织10-16位老师阅卷,分为英语组和日语组,各组设组长1名。

同阅卷专家一起确定主观题的评分标准和误差控制分数。全国医学博士外语统一考试只有一题主观题,即书面表达,满分20分,误差控制分数为4分。

在阅卷开始前,对所有阅卷教师集中培训,一方面进行阅卷系统使用的操作培训,一方面进行评分标准和评分细则培训,使所有评卷教师能够最大限度地理解和掌握评分标准。

4.正式阅卷

试评阶段:系统随机抽出一部分试卷,分发给所有的阅卷专家评分,根据个人的评分结果,经过集体讨论给出这些试卷的最终分数,并且将这些试卷作为标准试卷来指导阅卷专家在以后的评卷工作。

正试评分阶段:正式评分时,系统将每位考生的书面表达答卷图像随机发送给2位阅卷专家,如果2位阅卷专家的评分之差小于4分,则取二者的平均值作为该答卷的得分,如果2位老师的评分之差大于4分,则系统会将该答卷发送给阅卷组长,请阅卷组长为该答卷评分。对于零分试卷,系统也会发送给组长进行再次确认。

答卷复评:为了考察阅卷专家评分的稳定性,对于各位阅卷专家已评分的答卷按一定比例发送给他们重新评分,如果某位阅卷专家对同一份答卷的两次评分超过误差控制分数,系统就会发出警告。

分数合成:对主观题和客观题分数进行合成。

二、网上阅卷的优势

1.提高工作效率

通过阅卷系统调度、查阅答卷,减少了工作环节,提高了工作效率。传统纸笔阅卷需要经过试卷装订、阅卷专家领卷、评分、签名、退卷、工作人员将分数录入计算机并进行核对等环节。网上阅卷将主观题的答题图像直接呈现在计算机屏幕上,阅卷专家通过键盘或鼠标进行评分,方便快捷。

2.减小评分误差

网上阅卷最主要的优势在于有效控制了主观题的评分误差,提高了评分信度。通过设置误差控制分数,使系统及时发现两位老师评分差距超过误差控制分数的答卷,并请组长根据各方面情况给出最终分数,从而使评分标准和评分细则得以相对准确地贯彻实施,将阅卷专家个人主观感受导致的评分误差尽可能减小,保证了考生所得分数尽可能客观、公正、合理。同时,所有零分试卷均需组长进行再确认,避免了由于阅卷专家疏忽造成的漏阅等差错。

3.方便信息查询

采用传统阅卷方式时,如果需要查找某份试卷,需要手工翻卷,费时费力。网上阅卷将考生答卷扫描为图像,存储于计算机中,只需要输入考生的准考证号就可以迅速得到该考生答卷相关信息,如答题情况、阅卷专家评分情况等。网上阅卷系统还可以随时查询阅卷总体进度、每位阅卷专家的阅卷情况等。

4.利于答卷保密

由于阅卷专家评阅的仅仅是随机分发的考生答题图像,根本看不到考生的纸质答卷和考生信息,评阅后又立即提交,使保密工作得到保证,避免了违规作弊的可能,有效维护了考试的公平、公正的原则和广大考生的权益。

5.便于数据分析

网上阅卷系统详实记录了考生答题信息和阅卷专家评分信息,可以对考生答题情况、评分误差、评分离差与评分效度、评分理查与评分进度的关系等进行统计分析。

三、需要注意的问题

1.阅卷专家的培训

阅卷专家的培训重点应包括3个方面:(1)树立良好的职业道德、工作责任心和保密意识,能够遵守有关规定,认真履行职责,保证阅卷有序进行。(2)认真学习并掌握评分标准和评分细则,提高评分的能力和水平,尽量减小评分误差,使评分合理、准确。(3)熟练掌握阅卷操作步骤,及其他有关注意事项,提高工作效率。

2.组织协调工作

网上阅卷是一项系统工程,涉及的环节和部门较多,如考试机构、考试服务商、阅卷专家、阅卷机房等。从管理上来说既要有多单位多部门的分工负责问题,又要有相互协调、相互支持和配合的问题。任何一个单位或部门发生失误,都会导致网上阅卷工作延误或差错。因此,为了保证网上阅卷顺利进行,应建立合理的管理和协调机制,使各单位各部门密切配合、同心协力,保证网上阅卷工作有效实施。

 

[参考文献]

[1]唐佐明.从试验中走出来(副题:无纸化阅卷工作总结).考试研究与信息,2002123-25.

[2]湖北省2001年综合科目的网上阅卷. 考试研究与信息,2002123-25.

[3]网上阅卷实施方案.北京世纪互联软件开发有限公司

 

[作者简介]

    张  颖,(1973-),女,心理学硕士,研究方向为教育测量。

 

本网(国家医学考试网)所刊载的所有信息,包括文字、图片、软件、声音、相片、录相、图表,广告、商业信息及电子邮件的全部内容,除特别标明之外,版权归国家医学考试网所有。未经本网的明确书面许可,任何单位或个人不得以任何方式作全部或局部复制、转载、引用,再造或创造与该内容有关的任何派生产品,否则本网将追究其法律责任。
  本网凡特别注明稿件来源的文/图等稿件为转载稿,本网转载出于传递更多信息之目的,并不意味着赞同其观点或证实其内容的真实性。如对稿件内容有疑议,请及时与我们联系。
  如本网转载稿涉及版权问题,请作者在两周内速来电或来函与我们联系,我们将及时按作者意愿予以更正。

 
中心简介联系我们法律声明意见箱   京ICP备 07005584号
Copyright © 2006-2007 NMEC. ALL RIGHTS RESERVED. 版权所有:国家医学考试中心