网上阅卷技术方案.doc
- 文档编号:30858279
- 上传时间:2024-04-09
- 格式:DOC
- 页数:50
- 大小:6.81MB
网上阅卷技术方案.doc
《网上阅卷技术方案.doc》由会员分享,可在线阅读,更多相关《网上阅卷技术方案.doc(50页珍藏版)》请在冰豆网上搜索。
网上阅卷系统技术方案
目录
一、 网上阅卷需要解决的问题及技术要点 3
2.1 网上阅卷的现状和必要性 3
2.2 相关机构存在的问题 4
2.3 网上阅卷的新要求 4
2.4 我们的改进 6
二、 系统设计方案 7
3.1系统总体构架 7
3.2答卷设计 8
3.3 答卷扫描系统 9
3.3.1 答卷扫描设备的选择 11
3.3.2 答卷扫描系统的关键技术 12
3.4 网上阅卷系统 20
3.4.1网络模型 20
3.4.2功能特点 21
3.4.3阅卷客户端相关界面 27
3.4.4误差控制原理 30
3.5 统计分析系统 32
三、 方案特点 46
4.1高精度制卷对中低端考试的支持 46
4.2支持用Word制卷,灵活方便,适应于中小规模校际间的网上阅卷 46
4.3高效的图像识别技术及兼容性 46
4.4灵活性、广泛性,可支持大规模阅卷 47
4.5清晰简洁的用户界面 47
4.6方便快捷的评分操作,支持标记联动 47
4.7高效安全的通信传输机制 47
4.8安全有效的误差控制 47
4.9客观公正的的双评/仲裁机制 47
4.10保证质量的单评/抽查机制 48
4.11以人为本的附加功能 48
4.12全面的成绩统计分析 48
四、 主要技术指标一览 49
一、网上阅卷需要解决的问题及技术要点
2.1网上阅卷的现状和必要性
在中国的所有考试中,一般包括两部分内容:
客观题和主观题。
在过去我们已经用光标符号阅读机OMR成功的解决了客观题,将人为的阅卷误差降到为零。
但是主观题的阅卷一直应用传统手工阅卷方式,同时由于主观题的答案的“不确定性”,在阅卷中容易造成不同的评卷员对标准答案掌握的尺度也不一致。
在1998年第三次全国教育工作会上教育部相关部门提出:
全面推进素质教育。
这就要求考试的题目必须灵活,这样答案也就更加灵活。
活题、活答案带来的问题是:
l怎样保证考生得分的准确?
l怎样保证评卷员对评分标准的掌握的一致性?
l怎样保证评卷员在阅卷过程中的稳定性?
我们通过高速扫描系统使考生的试卷电子化,然后通过计算机网络阅卷,运用一卷多评、一致性检测、复评等等多种手段共同来来解决以上的问题。
网络阅卷系统目的就是解决整个阅卷系统中的所有“不一致”因素。
通过以上手段,我们可以使所有评卷员的评分标准趋于一致,以达到“公平、公正”的目的。
在国内,网上阅卷系统最早是由我公司在1996年广西省高考中投入应用的,最初是借用后来是引进美国NCS设备进行的。
该设备速度快且精度高,有效地保证了相关考试的正确性及权威性(香港、美国等均采用NCS设备),近年来,随着通用扫描仪速度的提高,出现了较多的采用通用扫描仪的网上阅卷厂商,以深圳海云天等为代表,这些厂商的解决方案覆盖了全国高考网上阅卷的90%以上。
由于上述方案是应用于高考之中,基本上均采用120克纸加双色套印试卷的形式进行的,阅卷基本上采用服务外包的形式进行,即一张试卷印刷和服务费大约2元左右,成本较高,这也就决定了他们只适用于升学考及关键考试之中,其优点如下:
l采用通用或专用扫描仪对答卷进行扫描,答卷最大为双面A3一张,且在答卷上贴上条码供扫描仪自动识别。
l结合了高速扫描、条码识别、OMR识别、多人网上阅卷及仲裁。
l每家均宣传速度快及准确率高,每家均宣传OMR识别率达100%。
l均提供扫描时核对及查错。
l阅卷时可匿名发给评卷人,且支持一评、二评、三评。
l有部分厂家提供了答卷上的标记打分机制。
l改变了传统考务管理,提高了工作效率。
l控制了阅卷速度,保证了阅卷质量。
l降低评分误差,实现了考试公平。
l便于统计分析,减少登分错误,确保了信息的及时反馈。
2.2相关机构存在的问题
当然,一个新技术的使用也会带来新的问题,由于这些方案在权威考试中应用,基本上做到评出考生成绩即可,且不允许查卷,对考试成绩的分析也就是难度、区分度等,而对考生的成绩分析等支持程度较弱。
l各省的投资太大,如江苏省高招网上阅卷达到了1600万之巨。
l对一评、二评之后的三评支持不够,无法同时对一二评之过程进行监控。
l对答卷纸张要求较高,成本较大。
l扫描人工工作量较大,不能与阅卷无缝连结。
l须全部扫描完成后再行阅卷,影响时间进度。
l对缺考等考务要求无法做到实时监控。
l无法对阅卷结果进行抽查及审核。
l常有成绩出错的报道
为此,就有必要对现有方法进行改进及提高。
2.3网上阅卷的新要求
随着网上阅卷由高考向中考的推广,各地方也迫切需要采用一种低成本的阅卷方式来进行模拟考试或小规模的正式考试,这就为网上阅卷带来了新的要求,总体要求为:
1)使用成本最低
由于模拟考试等的特殊性,在应用成本上具有较大的要求,一般要求采用60克(含)以上的普通纸进行双面单色(黑白)印刷,可以采用胶印、速印、静电复印或激光打印的方式,也可由印刷厂进行制版印刷(达到一定批量的情况),从而将每次考试答卷的制卷成本降到最低。
如果采用正式考试,也需要进行答卷的高精度印刷(黑白卷、本地印刷厂支持)。
2)答卷格式具有广谱兼容性
试卷除了识别自己的答卷格式外,还应能支持其它厂商设计的答卷,特别是正式考试的120克双色答卷,此时应能提高客观题识别的精度。
3)制卷人员技术要求低
最好是制卷人员设有专人及技术要求,那么采用MicrosoftWord进行制卷无疑是一个良好的选择,采用Word制卷可以做到基本不用培训,且支持打印输出或硫酸纸输出等,从而支持胶印、速印、复印等多种方式制卷。
当然,采用Word制卷后必须允许一定的误差,由于定位点要求较高,可减少或去除传统的定位点。
并需要在客观题识别时,支持如印刷部分倾斜、客观题格子不清,小褶皱等问题的自动处理。
4)阅卷精度要求
对正式考试,如中考、高考、国家考试等,对客观题的识别误码率要求为百万分之一,这是在试卷上加上了标识块、加上纸张、双色卷等技术进行保障,其中最主要的技术是采用了8位灰度进行客观题答案的识别。
而且由于采用黑白单色印刷,给客观题带来了困难,传统的OMR三线识别方式已没有用处(因背景较黑),同时要求对橡皮擦过以后纸薄透光等情况进行识别及分辨,这就给客观题识别带来了挑战。
5)使用的方便性
由于小型考试的要求,最好不需要厂商的现场支持,因而就要求软件对小型考试阅卷提供方便、快速的安装及运行,使用培训简单且实现,系统提供缺省模式进行阅卷,减少或没有繁复的设置,减少人工干预。
但应能支持正式考试必需的监控及调度。
6)增加成绩分析的高要求
由于针对模拟\摸底考试等,从教育主管部门至任课教师都需要增加对试卷质量、学校之间、校内班级之间、个人历次考试之间等进行多维比较及分析,增加分数线划线功能等,且由于考试的特殊性,还具有随政策而变的报表分析定制要求。
7)个人查卷要求的加强
传统的网上阅卷由于在试卷上没有阅卷标记(或可标记但影响阅卷速度),给考试主管单位带来了巨大的困惑。
对任课教师来说,仅有成绩而没有标记的试卷是一个灾难,是网上阅卷系统的主要弱项,因而对标识卷的合成及查询是十分必要的,有利于学生及教师重视试卷中的弱项,达到进一步改进及提高的目标。
2.4我们的改进
针对以上目标,我公司将应用于高考及其它关键的系统进行了进一步发展,网上阅卷V3.0主要加强了:
l支持采用word格式制卷,60克普通纸印刷,降低了制卷难度和成本。
l支持黑白图像、4位灰度图像、8位灰度图像的扫描及传输。
l区级/校级考试的分析功能。
l支持了多系列厂商的通用扫描仪。
l增强了阅卷标记功能,标记与给分联动。
l降低了阅卷服务器配置。
l自由切换一二评,在质量及效率中取得平衡。
47
二、系统设计方案
我公司网上阅卷系统采用高速扫描技术、图像处理与压缩技术、数据库及网络技术,完成答题卡信息自动采集、图像切割与分发、客观题自动判分、主观题计算机辅助评卷及误差控制、分数合成与转换、统计等一系列工作。
系统可设置合理的允许评分误差,提供了及时发现误差并自动提请纠正和防止误差超出设定值的功能,答卷通过“二评”、“三评”机制,可准确地贯彻了“评分标准”和“评分细则”,把评卷教师个人主观感受导致的评分误差降低到最小程度,以保证了考生获得的分数能最大程度地体现客观、公正、合理,有效地防范和避免违规作弊或马虎应付所造成的误差。
系统的整个工作流程如图3-1所示:
图3-1系统工作流程
3.1系统总体构架
本系统主要由以下三大子系统组成:
答卷扫描系统、网上阅卷系统(答卷调度系统、组长监控系统、阅卷客户端)、统计分析及网上查询系统。
答卷扫描系统:
将答卷按照试题的定义切割后按照答卷号进行加密、打包,同时完成客观题的自动评阅;
网上阅卷系统:
答卷调度系统主要负责调度答卷的一评、二评、三评、抽查卷的调度;阅卷监控系统主要负责对整个阅卷过程的监控;阅卷客户端主要由教师使用,主要完成对答卷的评阅、打分工作。
统计分析及网上查询系统:
在阅卷完成后,可以通过统计分析系统对本次考试的情况进行多维度的统计并且用户通过Internet根据不同的权限进行查询。
整个系统的体系结构如图3-2所示。
图3-2系统体系结构图
下面,将对各个子系统的功能逐一加以介绍。
3.2答卷设计
当前的网上阅卷系统往往对于纸张类型都有特殊的要求,而且,答卷的设计通常需要经由专门的公司来完成,这将大大增加考试的成本。
而答卷设计采用Word设计正是出于能够让教师方便、灵活、快捷地设计出符合要求的答卷,同时又能够大大地降低考试成本的目的,答题卡可以由学校及教师自行设计、自行印刷,保密性强。
在图3-3中给出了在Word中的制卷界面。
图3-3word制卷
功能特点:
l支持使用常用的文字编辑软件Word设计答卷;
l支持每次考试多达16门学科AB两种卷种总计32份答卷的统一集成设计;
l支持60克(含)以上普通纸双面单色(黑色)、彩色印刷,印刷方式可以是胶印、速印、静电复印或激光打印;
l支持设计多种来源的答题卡;
l支持答卷页边距,行高,选择项大小等多种参数,可自由定制已满足特定要求;
l客观题设计支持单项选择和多项选择2种类型,可单独显示也可合并显示;支持选择题横向纵向2种排列方式;
l支持彩色、黑白及套色输出方式,提供多种打印功能;
3.3答卷扫描系统
答卷扫描系统通过文档扫描仪或专用高速扫描仪一次将正反两面试卷图像进行读入的过程,读入过程中须完成A/B卷识别,纸张异常处理,条码或考号识别,客观题涂点判断,客观题给分(亦可在主观题阅卷时再行给分),以及缺考等异常处理。
由于扫描精度决定了答卷的存储容量,也决定了网上阅卷系统切割的模式,正常8位灰度下是需要切割的,以减少网络传输的容量。
答卷扫描系统工作流程如图3-4所示。
图3-4答卷扫描系统工作流程
根据本次招标的要求及考务安排的不同,试卷扫描我们可以提供两种方案:
扫描方案:
试卷扫描集中在教育局(满足现有的考试安排)
对于区教育局安排的统一考试,试卷可以集中在教育局统一扫描,扫描的数据及图片直接通过内网传输到数据服务器进行阅卷,体系架构如图3-5所示。
图3-5试卷集中扫描架构图
功能拓展方案:
试卷扫描分布在各个学校(即学校自行安排考试进行网上阅卷)
对于学校平时考试需要进行网上阅卷的,一种方式是拿到区教育局去扫描,扫描完成后回到学校阅卷,此种方式同方案一;另一种方式是学校自备扫描仪,通过城域网把扫描的数据及图片传到数据服务器上,考虑到扫描时数据及图片文件传输的效率,我们开发设计了一个后台分布式负载均衡平台,通过此平台把数据及时的传到服务器上,达到效率与质量的完美结合。
体系架构如图3-6所示。
图3-6试卷分布扫描架构图
3.3.1答卷扫描设备的选择
扫描设备的选择取决于需扫描试卷的纸张、扫描质量及价格,根据本次招标要求,我们推荐使用富士通fi6670教育专用版扫描仪:
扫描仪名称
富士通fi-6670教育专用版
产品类型
ADF(自动送纸器)
扫描模式
单面/双面,黑白/灰度/彩色
图像传感器
彩色CCD×2(前×1,后×1)
光源
白色冷阴极荧光灯管×4(前×2,后×2)
纸张大小
最小:
A8(52×72mm或2×3in)最大:
A3纵向(297×420mm或11.7×16.5in)/Doubleletter(279.4×431.8mm或11×17in)。
纸张厚度
纸张规格≤A4:
31-209g/㎡;纸张规格>A4:
52-209g/㎡;A8:
127-209g/㎡;卡片传送(ADF)*2
扫描速度(A4横向)
彩色*4/灰度*4/黑白:
90ppm/180ipm(200dpi);80ppm/160ipm(300dpi)
扫描速度(A3纵向)
彩色*4/灰度*4/黑白:
70ppm/140ipm(200dpi);60ppm/120ipm(300dpi)
ADF容量
200张(A4,80g/㎡)
扫描背景
黑/白(可选择)
光学分辨率
600dpi
输出分辨率
50to600dpi(以1dpi增量进行变化)
图像输出格式
黑白:
1位灰度:
8位彩色:
24位
灰度级(内部)
1024级
接口
UltraSCSI(半间距50针)/USB2.0/USB1.1(可选)USB:
B类型
SCSI终止器
内置
半色调模式
抖动处理/误差扩散
输入电源
交流电100~240V
电源功耗
操作状态:
≤216W待机状态:
≤9.1W
操作环境
温度:
5-35℃;相对湿度:
20-80%(不凝结)
体积(W×D×H)
641*432*300mm安装尺寸:
1179*686*390mm
重量
17kg
环保性兼容
EnergyStarandRoHS
支持操作系统
MicrosoftWindows2000Professional/XP(32bit/64bit)/Server™2003(32bit/64bit)/Vista™(32bit/64bit)
捆绑软件/驱动
TWAIN,ISIS™,ScandAllPRO,AdobeAcrobat,QuickScan™Pro(Trial),VisualErrorRecoveryGuide,ImageProcessingSoftwareOptionV2.5,VRS4.2_VRSProfessional
其他
加长纸最大扫描长度:
3048mm
多页进纸检测:
超声波多页进纸检测传感器
3.3.2答卷扫描系统的关键技术
1)灵活的扫描识别,可识别多种来源多种格式的答题卡
除了能识别我公司答卷设计工具设计的答题卡外还能扫描识别多种来源多种格式的答题卡。
并支持主客观题混排的试卷的扫描识别。
l在扫描前利用相应的答卷定义器对外来试卷进行定义,可识别用word格式设计印刷的试卷,包括以下多种试卷格式。
其工作步骤为扫描样张,并进行简单标记即可,其界面如图3-10所示,可识别Word格式设计印刷的试卷,或其它格式试卷,如可识别海云天答卷、五岳鑫答卷、纸笔王答卷。
图3-10答卷定义器界面
2)智能纠偏功能
由于通用扫描仪中可扫描60-200克的纸张,对纸张控制较为宽松,因为答卷扫描系统在扫描过程必须实时处理各种走纸异常情况。
在试卷扫描过程中,有两种情况会导致扫描后的图像发生偏斜:
l扫描仪走纸偏斜
所有的通用扫描设备,在图像在走纸过程中都无法保证试卷的绝对齐正。
扫描出来的某些图像会存在一定角度的偏斜。
对于这种情况,试卷扫描系统将自动校验试卷有效图像的边界并对其进行纠偏处理。
如图3-11所示:
图3-11图像的自动偏斜纠偏示例
l试卷印制过程中造成的偏斜;
对于这种偏斜,系统将通过模糊识别技术,对卷面中的可定位参照的进行识别后,计算出卷面的偏斜角度,并通过动态坐标旋转技术完成偏斜试卷的内在复位。
3)客观题标准答案的多方式录入
可以通过扫描涂有标准答卷的答案来完成标准答卷的录入,如图3-12所示:
图3-12客观题标准答案读入
亦可采用Excel读入的方式读入标准答案,如图3-13所示:
图3-13Excel给出的标准答案
同时支持同一试卷多套标准答案的定制,由于在考试中存在一题有多个给分情况,如给AB得2分,给A或B得1分的情况,我们提供了这种给分情况的评分规则定义。
如图3-14所示。
图3-14给分情况的评分规则定义
4)在答卷扫描的同时,扫描、切割、客观题识别的并行处理
支持试卷印刷中客观题涂点方框或者圆圈印刷断裂、试卷有小幅褶皱等。
系统采用智能分析技术,对卷面中的可定位参照的客观题涂点方框进行识别后,完成这些方框的内在复位。
系统通过并发控制技术,可同步以下工作:
(1)A/B卷的判定(如果设定的话)。
(2)支持识别各类条形码,不需要增加专门的图形加速卡。
条形码可任意粘贴且不受方向及位置的限制。
(3)自动识别试卷正反面及倒置情况,并进行自动纠正(如果设定的话)
(4)学生学号的实时识别和校验(不采用条形码时)。
(5)客观题的识别:
在扫描的同时,便可以完成对客观题识别和记分。
(6)主观题能够按答题区域进行切割及加密。
(7)给定学生随机编号进行标记。
5)客观题填涂分析及重计算
在实际考试中,有时会出现标准答案错误的情况,因此,我们在扫描中可随时对已扫答卷客观题选择情况进行分析,以供阅卷人员对标准答案进行检查及验证,分析界面如图3-15所示:
图3-15客观题扫描情况分析
除此之外,在扫描结束后或阅卷中会发现现有标准答案有误的情况下,系统管理员可按新的标准及给分规则进行重算,不需重新进行切割及扫描,仅几分钟就可完成。
6)实时学号识别及完善的差错控制机制
实时学号识别主要有两种方式:
l条码方式:
试卷扫描系统可以支持几乎所有主流的条码编码格式(如Code39,Code128,EAN等等),不受方向以及位置的限制,可任意粘贴;并提供了便捷的考场编排、条码打印等功能。
这种方式主要应用在大型考试阅卷中,有错误率低的优势。
l学生填涂考号方式:
在中小型考试中,主要的还是学生填涂考号的方式。
由于是学生填涂,所以会出现填涂不规范,错误率高的问题。
因此要求系统有完善的差错控制机制。
l学号涂错:
学生漏涂或涂错学号位,对于不存在于学生名单库中的学号,系统将实时报出错误,并让用户对学号进行修改;
l学号重复:
A学生涂错学号,而且涂成了B学生的学号,此时,系统会发现B学号的学生有两张试卷,便会将这两张试卷的学号区域显示出来,并让用户输入A学生的正确学号;
l缺考卷:
学生未参加考试,监考教师填涂了试卷的缺考标记的试卷,系统将实时获知,并将此学生的状态设为缺考。
图3-16缺考标记
l疑似空白卷:
在一些扫描系统中,经常会出现将空白卷扫入系统的情况:
比如监考教师填涂了缺考学生的学号,但整张试卷是一张白卷。
如果这张试卷被扫入系统,此学生的成绩将会严重影响此学生所属学校的平均分。
对此,一些系统采取了阅卷时由阅卷教师“提交空白卷”的做法。
这样的做法很难奏效,因为每个教师阅卷时,都主要负责批阅某几题,而要通过这几道空白的题就判断试卷是空白卷,无异于盲人摸象。
比如在数学题难度比较大的几题,空题的显现是屡见不鲜的。
我们的系统通过模糊识别和图像局域痕迹分析技术,可以智能的判断出试卷是否为空白卷,如果发现试卷可能为一张空白卷,那么这张试卷将不会进入到阅卷流程中。
l缺考监控
系统将实时反映出尚未扫描的学生列表。
这样在每处理完一个考点之后,可以将系统中缺考学生的列表与考点提供的缺考名单核对,做到完备的缺考控制,以防出现试卷漏扫的情况。
图3-17扫描监控界面
7)精度可调的图案格式,以扫描图像的方法进行网上阅卷,其核心点为图像的分辨率及质量。
图像的存储容量和质量是一对不可调和的矛盾。
越小的存储容量往往意味着越差的图片质量,而越高的质量往往又要求越大的存储容量。
对客观题阅卷来说,人们以人眼判别填涂正确以机器阅卷识别的差异来决定阅卷的识别率。
当前扫描技术中,以8位灰度为最高,1位灰度为最低。
对于灰度图像而言,如果图像内容主要以黑白颜色为主,很少有过渡色(在目前的各类考试当中,笔答题图像几乎都属于这一类),那么存储空间最小的图像存储格式应该是黑白图像(BITONE),特点是图像存储量非常小,有助于提高网络传输速度。
但要产生效果非常好、笔迹清晰而又没有任何失真的BITONE图像,却不容易。
这是因为,BITONG是通过扫描仪扫描的灰度图像实时转换来完成的,而对于任何一次考试来讲,考生书写笔迹有深有浅、有粗有细、有疏有密,差别极大,目前一般都通过固定的BITONG算法,颜色浅的造成最终图像笔画、线条缺失,笔画粗的、写的密的造成图像无法区别笔画,成为一个个黑疙瘩。
扫描仪则是采用实时动态算法,增加或减少边缘黑色像素,最大程度的减少失真,再现书写细节。
该方法一般用于打印内容或手写文字性内容,相对于16/256级灰度图像,BITONE图像会有一些失真,只在特殊情况下采用BITONE。
由于阅卷教师阅卷时将长时间注视屏幕,因此,更好的画面质量也有利于教师消除视觉疲劳。
三种灰度的图像存储容量对比,如下表所示。
灰度
学生/学科
6000学生/学科
6000学生/9学科
图像
8位
600K
3.6G
32.4G
A3双面
4位
300K
1.8G
16.2G
A3双面
1位
200K
1.2G
10.8G
A3双面
图3-18图像质量、容量对比关系(200DPI)
一般来说,三种灰度图像的客观题识别率如图3-27所示:
质量
自动识别误码率
8位灰度(带控制位)
百万分之一
8位灰度(不带控制位)
十万至百万分之一之间
4位灰度
十万分之一
1位灰度
万分之一
图3-19图像质量与识别精度对照
为了支持正式考试(如高中考)以及模拟考试(降低识别率、以规范答卷书写)的两种方式,我们提供了图像质量选择模式,图3-20给出了三种模式。
方式
客观题(灰度)
主观题(灰度)
A3双面存储
1.强制模拟方式
2.低存储、高质量方式
3.高质量方式
1
8
8
1
1
8
200k
250k
600k
图3-20我公司提供的三种精度模式
★针对本次招标,可选用模式3。
3.4网上阅卷系统
3.4.1网络模型
本系统可以在城域网上阅卷,协议采用TCP/IP协议,阅卷内容采用FTP的方式进行传输,因而本系统可适用于城域网或广域网上。
全部试卷扫描结束后,评分教师可以通过学校的局域网连接城域网,从而访问数据服务器进行阅卷,组长教师也可以在局域网内管理阅卷,进行阅卷监控,控制阅卷进度及质量。
图3-21阅卷系统网络模型
3.4.2功能特点
网上阅卷系统主要由答卷调度系统、阅卷监控系统和阅卷客户端组成。
1)答卷调度系统
答卷调度系统将自动对教师的评卷任务进行调度。
这些任务包括:
正常评卷、抽查卷等。
另外,当答卷的一评、二评分差过大时,服务端将自动将其列为等待仲裁答卷,等大组长分派仲裁人。
答卷调度系统功能特
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 网上 阅卷 技术 方案