XX市XX区教育局
教学质量监测平台项目
技
术
方
案
2015年12月
目 录
一、概述
教育教学评价是贯穿课程改革、素质教育全过程的重要内容,通过对教师教学质量和学生学习质量的精确评价,利用先进的评价分析方法从不同的角度分析和反馈教育教学质量情况,是引导教师改进教学方法、提高学生学习成效的重要手段,也是教育行政部门、教育科研单位、中小学校着力研究的重要课题。
采用教育测量学、教育统计学及教育评价学理论知识实现对基础数据的深度挖掘,横向比较、纵向跟踪教学质量,实现对教学质量及时有效的监测、诊断和反馈。通过对学生的学业成绩和教师教学质量进行科学的量化分析,精确反馈学生学业质量进步状况,分析学生过去和现在的学习质量状况,可进行知识点分析和学生认知水平分析。
XX区作为广东省的“教育强区”,在推行素质教育的过程中,如何更好的监测和评价下属学校的教学质量,科学的指导教学改革,从而整体提高教学水平将是我区教研工作的重要内容。通过以往工作经验的积累,抽测和模拟考是全面把握阶段性的教学成果、进行教学质量的评估监测行之有效的一种方式。随着信息技术的发展,我区大部分中小学校园网的建设已基本完成,教师的计算机操作及管理水平也日趋提高,高中学段的学校先后购买并使用了基于普通纸做答卷的计算机网上阅卷与分析评价系统,从学校及全区层面实现了考试管理的全程信息化,其硬件条件具备和高中学段的成熟应用为我区初中及小学学段组织大规模的调研抽测,并应用网上阅卷系统和教学质量监测平台实现全程的考试信息化、进行科学化管理奠定了基础并创造了条件。
二、现状、必要性和需求分析
2.1现状以及存在的问题
2.1.1 设备现状
XX区共有公办中小学119所,其中小学85所、初中23所、九年一贯制学校2所、高(完)中9所,在校学生106298人,教职工7422人;
现有教师办公、教学用机(PC)7981台,师机比1:1。
全区9所公办高中各配置了1套网上阅卷系统和配套使用的高速扫描仪。
2.1.2 主要成效
XX区的教育信息化硬件水平得到了全面发展,实现了全区公办学校“网络全覆盖,装备全到位”。在软件建设与应用推广方面积极开展了全区教育资源共建共享和全员参与信息化教研等工作,取得了良好的效果。一是解放思想、转变观念,创新教育信息化的工作思路,积极探索信息技术与学科整合的新方法、好方法,充分发挥实验学校的示范辐射作用。二是要突出重点、形成亮点,构建信息化应用的特色学校。三是要以应用为本,加强交流,将教育信息化作为促进教育均衡发展的抓手。
近几年来,XX区高中学段9所学校先后购买并使用了基于普通纸做答卷的计算机网上阅卷与分析评价系统,先在学校内部的考试阅卷中得到成熟的应用。2007年开始成功实现全区高中的统一网上评卷和数据分析工作,计算机网上阅卷与分析评价系统对提升我区高中阶段的教学水平与教学质量提供了积极的帮助,并在提高阅卷质量、减轻教师负担、降低考试成本、接轨高考模式以及实现成绩数据共享等方面发挥了积极作用。 2.1.3 存在的问题
2.1.3.1 高中学校系统独立,缺乏统一的大数据管理平台
当前高中学校的网上阅卷和统计分析系统,是分散独立采购的,各个学校独立运作和管理。在区教育局组织高中全区性的综合测试时,只能调用学校的扫描设备和阅卷点,数据统计要先几个学校阅卷服务器的数据整合,然后再一起做合并分析。
2.1.3.2 舟车劳累,运营时间和人力成本高昂
现有系统布局下,各个镇的高中都需要把学生答题卡送到区教育局指定的城区三个学校扫描点进行统一扫描,评卷老师从各地汇聚在此统一阅卷,途中耽误很多的时间,影响工作效率。
2.1.3.3 设备数量缺乏,无法满足全区的教育信息化测评需求
XX区初中学校还没有配置网上阅卷软件和高速扫描仪等设备,而现有高中学校的设备又完全无法再承载初中范围内的扫描和阅卷工作,所以初中学段每学年的教学质量检测(或抽测)仍是采用传统的手工阅卷和人工统计分析。这样在阅卷过程的客观公正性、阅卷和管理工作的效率性和分析评价结果的准确科学性等方面无法达到通过网上阅卷和分析评卷系统设备操作的效果。
前端数据采集的局限性势必影响后续全区教学质量监测与评价的有效性。
2.2项目建设必要性
该项目以教育测量、教育统计与教育评价等科学理论为指导,采用以计算机为核心的现代信息技术,面向我区教育局及学校的教育测量、教育诊断与教育评价的信息化平台。该项目的成功建设和应用将解决我区教育评价中的关键的问题——数据统计和分析的客观、准确与标准化,可以说是将教育精确评价的理想变为现实。
该项目虽然也是教育信息化的项目之一,但因为其关注和解决的是教育中最核心的教育质量问题,因此其带来的促进与示范意义也是一般的教育信息化工具难以比拟的:
1、确保教学诊断与评价数据采集的客观公正
考试是教育测量的重要手段,为使测量结果真实反映教学情况,客观公正的测量手段是重要的先决条件;在考试仍然是选拔人才重要手段的今天,对考试结果的评判是否客观、公正将影响到人才选拔的质量,甚至关系到每一位参与选拔人员的前途与命运。因此,评卷的公正性不但重要,而且还事关考试的有效性,甚至成败的问题。因此,解决教学诊断与评价数据采集客观公正的问题,对教学诊断与分析评价的有效性具有重要作用。
2、确保教学诊断与评价数据采集的科学准确
考试既然是教育测量的重要手段,其结果又对教学质量评估和人才选拔具有决定性的作用,因而确保评卷结果的准确性就具有非常重要的意义。影响评卷结果的准确性有诸多方面的因素,其中评卷教师个人水平、状态、情绪及评卷数据处理手段等都与评卷结果的准确性密切相关。要解决教学诊断与评价数据采集准确性的问题,重要的是要有避免影响评卷质量因素产生的机制,以确保其结果的科学准确。
3、为教学诊断与评价数据采集提供科学手段
在社会快速发展、科技日新月异的信息化时代,教学内容的丰富一方面使得学生的学习任务不断加重,另一方面是教师的工作负担随之增加。尤其是在应试教育状况尚未完全改变的今天,“学生减负”,“教师减压”已成为社会各界的共同呼声。减轻教师的负担虽然涉及教育体制及教学内容改革等方面的因素,是一个系统工程。但是把教师从繁重的考试评卷与统计分析工作中解脱出来,不失为现有条件下减轻教师负担、提高教学诊断与评价数据采集效率的有效手段。
4、满足基础教育教学诊断与针对性教学要求
众所周知,要实现教学质量全面、准确的诊断,并据此行进针对性教学,仅凭一般的经验显然难以满足要求,需要依靠大量和科学的教学数据才能真正实现。其中,精确到知识点的成绩数据是教学质量诊断和针对性教学的重要依据。要实现对精确到知识点的成绩数据分析,由于涉及的数据量巨大,处理复杂,单纯依靠人工方式难以完成(特别是对教育局或规模较大的学校),需要借助现代信息技术手段才能有效实现。
5、满足教学质量动态监测与教学评估的需要
在推行新课程改革的今天,教学质量监测与评估不但是教育主管部的要求,而且也各级教育机构全面、及时、准确地把握教学质量的需要。由于实现教学质量监测需要涉及到大量当前的和历史的数据,且其精确程度与教学质量诊断和针对性教学的要求相当,但涉及范围甚至更广。由此可见,要实现教学质量动态监测和教学评估,其所需的数据采集与分析处理必须依靠现代信息技术与先进的教育理念才能完成,依靠传统的人工方式显然难以凑效。
6、接轨高考阅卷模式,提高学生应考能力
随着计算机网络技术及电子扫描识别技术的发展与成熟,网上阅卷模式越来越为各省市的招生考试部门所接受。截至至2011年,全国90%以上的省市高考和相当部分的地市中考采用了网上阅卷模式,并取得了准确、高效的显著效果。
为让学生更好地适应高考、中考等升学考试模式,为他们提供接轨训练,对提高学生的应考能力、发挥应有水平具有重要的作用。因为经常进行网上阅卷考试模式的训练,对学生而言,可有效避免高考或中考时因不适应或怯场导致的非知识性失分;对教师而言,可及时发现学生在网上阅卷模式下考试存在的问题,并及时给予指正。
归结起来,该项目通过建立科学的教育测量、教育诊断与教育评价体系,可为各级教育部门的教学诊断提供科学手段,并为其有针对性地的教学研究与教学活动提供科学依据,对促进我区素质教育的健康发展,提升我区基础教育的教学质量与教学水平具有积极的意义。
三、可行性分析
我单位与相关部门(区教学研究室,教育局办公室、和区教育信息装备中心等)作了充分的业务调研和分析,在基于我区教育教学评价的现状和存在问题,结合前期网上阅卷与分析评价系统项目建设工程实践经验,提出了本项目的各项建设任务,是符合国家、省、市、区等文件要求,满足新课程改革和教育测量信息化需求,综上所述,我单位认为本项目在业务上是可行的。
本项目采用的网上阅卷系统发展已有十几年的历史,是市场上应用程度非常高的成品软件,特别是在我区高中学段的已有成功应用的经验,同时,我们经过多年建设和实施教育信息化工程,已积累了如何进行教育业务需求分析与管理、过程管理和验收评估的整套方法与机制。
本项目的应用推广是涉及到教育局教学管理部门和信息网络管理部门,以及全区中小学校。
近几年,区委、区政府把信息化摆在教育现代化建设的突出位置,确立“以教育信息化推动教育现代化”的策略,2010年至2014年,我区深入推进教育信息化的创新应用、优质教育资源的高度共享的阶段,全面实现优质资源“班班通平台”。在2011至2013年,区财政投入5887.10万元、市财政下拨1212.40万元用于教育信息化设施建设,实现了全区公办学校“网络全覆盖,装备全到位”。目前,全区有校园网102个,学生电脑12230台,教师电脑7981台,多媒体电教平台3117台,全区生机比9:1、师机比1:1,实现了“班班通平台”。2014年,区政府又投入专项资金3361.88万元,用于区教育信息化云应用平台系统、区教育局“云计算中心”设备、学校“教育云”及“智慧云课堂”、学校网络改造项目、区教育远程视频互动会议及录播培训系统五个项目的建设工作。良好的硬件设施为推广提供了基本条件。
我区在现有高中学校系统的基础上,需要建立一个统一的阅卷和数据分析评价平台,一方面使用目前相对独立的系统得到有效的利用,另一方面补充没有或配置不足的镇街软硬件设备,使各系统实现无缝兼容,并实现在应用层面上的整合,实现在平台数据中心的统一管理,使得教师、学生、教育管理人员、教育决策人员和家长能够在一个完整的教育测量信息化的应用服务平台中获得个性化的应用与服务。
综上所述,本项目在是应用推广上是可行的。
四、项目建设目标与任务
4.1服务规模
面向XX区17万中小学生(含民办学校),1.2万教职工(含民办学校), 160余所中小学(含民办学校)。
4.2系统设计原则
教学活动是一个教与学的复杂过程,影响教学质量的因素很多,有些是定性指标,有些是定量指标,为了能比较真实地反映教学质量及水平,要在充分调查研究的基础上,采取定性评估与定量评估相结合的方法,以提高评估结果的可信度。
教学质量评估是一项科学性很强的工作,在评估过程中一定要遵循教育教学规律,科学地制定符合各学校教学工作实际的,体现各学校特色的评估指标体系,实事求是地评估教师的教学质量,客观公正地反映教师的教学现状。
不同的评估指标所处的角度不通,对问题分析和判断的方法也不相同,因此,在评估中必须对不同的评估对象从不同层次、不同角度进行综合评估。
五、项目的建设原则和技术路线
5.1项目建设原则
本项目建设的指导思想是使传统纸笔考试管理纳入信息化管理的轨道,并实现考试规划、答卷设计、答卷扫描、客观题自动阅卷、主观题网上评卷、成绩统计分析及教学质量的动态监测的全程信息化。我们通过采用先进的扫描识别技术,使得本系统成为教育局及学校 “买得起、用得起,且能实现高质量人才选拔目标”的考试管理、教学质量监测信息化平台。
项目建设的原则如下:
1、方案的可行性
本平台系统作为服务于考试阅卷与评价的综合性系统,方案必须首先考虑阅卷的计算机化管理、最大程度的体现公平、公正、公开的原则,最大程度的保证阅卷质量。
2、系统的实用性
为保证系统的稳定安全运行,系统的功能设计完全体现用户的实际需求,设计规范严格遵循国际标准,符合国家教育部考试中心有关考试信息标准,选择已经形成标准的,得到广泛应用,并被证明是可靠的技术和产品。
3、系统的先进性
建立这样的综合性系统,须充分研究当今教学质量评价的理论发展趋势和网上阅卷误差控制理论,利用先进的、成型的、有生命力的成果,保证建立一个高起点并有良好伸缩性的系统,以适应中考的需求及应用范围的不断扩大。
4、系统的安全性
评卷数据安全的重要性不言而喻,系统设计必须充分体现安全性,软件的设计要充分考虑数据的安全保护机制。
5、系统的升级能力
考虑到该系统从规模和实现功能上都将会有扩展,在方案设计中需要注意伸缩性能,并特别强调整个系统升级的平缓性,以适应硬、软件的更新变化,保护硬件、软件与应用系统的投资.。
6、可管理与维护性
系统必须建立在具有强大管理功能和易于操作的平台上,辅以完善的人员培训与系统维护制度,使该系统具有优秀的可管理与可维护性能。
5.2项目设计规划及技术路线
5.2.1概述
系统采用.NET技术进行研发,数据库采用SQL Server,负载均匀使用Nginx,数据缓存使用Memcached,服务端程序采用SOA与分层架构,针对不同的应用定义不同的接口,采用.ashx、TCP/IP、WCF、WebService等技术实现服务端程序,供终端或其他客户调用。
5.2.2分层结构
负责进行界面UI的数据的展现和采集,数据采集的结果通常以提交给业务逻辑层。
主要包括各类封装了业务实现逻辑的业务服务组件,调用数据访问层的数据服务,本身不直接访问数据库。
公共服务层为整个应用的公共需求提供统一的、重用的服务。包括:日志、异常、事务、认证、校验。
负责进行数据访问及系统间交互操作,数据的缓存,关注数据的存取操作,不关心业务服务如何调用数据,屏蔽对数据库表的直接SQL操作。
5.2.3系统构架
主要是用来判断用户权限与登录统一管理,方便以后学生在不同的校区登录时只需要输同样的密码或只需要登录其中一个系统。学校用户授权与激活方便管理与以后维护。
将回收的答题卡进行批量扫描,扫描过程中同时完成客观题识别及答题卡电子图像的保存。
进行主观题的批阅,其评卷的模式与现行高考、中考计算机网上阅卷系统相同,并增加了与人工阅卷相类似的辅助功能。给学校用户答题卡制作, 在线阅卷,数据交互等等权限的开通。
在当地教育局没有上系统时或学校需要使用增强版本时的系统,可与当区教育局做数据交互等等。
采用教育测量、教育统计、教育评价相关理论自创的评估模型对教学上的各种对象(学生、教师、班级、学校、学科、整体)进行定量与定性相结合的评价。
5.2.4设计策略
1、框架设计策略
(1)、开源框架
l Spring.NET框架(用来低程序的耦合度从而可实现,如报表的个性化,不同的 定制可让不同的用户使用),
l MyBatis.NET框架 是支持普通 SQL查询,存储过程和高级映射的优秀持久层框架。
l jquery框架, jquery ui框架
(2)、控件使用
常用控件开发,或寻找其他控件等等
(3)、方法公用
把常用的方法集中起来从而提高开发效率与代码的重复利用
(4)、用户交换
使用CSS显示页面效果 ,JS现实用户良好的交互模式(傻瓜式操作,页面缓存,数据缓存,AJAX等等)
2、用户登录设计策略
用户先通过本地数据库中判断是否有该用户,如果有的话就直接登录系统,如果没有则调用WebService,到登录用户服务器判断是否有用户有的话就返回用户信息并且在本地数据库中添加该用户,如没有则提示没有该用户。该方式主要是为了以后用户名方便统一管理与维护用户。
3、数据高并发读取设计策略
在多教师评改试卷时需要获取考生的答题信息时,先把部分数据先查询出来保存到内存中,再由内存中查询一条指定的详细信息,从而减少数据库查询操作的次数提高系统性能。.NET缓存会占用IIS进程内存容易导致IIS进程内存过大导致IIS崩溃,扩展性不是很强所以系统采用Memcached缓存服务。学生查询成绩使用从静态文件中查询如记事本,页面静态化。
4、数据高并发写入设计策略
在多教师评改试卷时提交评分时,先把数据保存到"临时文件中"(如记事本)。再用个定时器去定时把"临时文件"导入到数据库中,减少数库写入次数,提高系统效率。
5、图片服务器设计测略
由于图片文件相对来说比较耗费带宽,如果有条件的情况下可搭建图片服务器,分担Web服务器的I/O负载-将耗费资源的图片服务分离出来,提高服务器的性能和稳定性。
5.2.5核心技术及先进性
1、核心技术
1)数字OMR模糊识别技术
数字OMR模糊识别技术是基于OMR(光学标记识别技术)和IMR(图像识别技术)基础上开发的一种全新的识别技术。它采用全新定位、矫正和匹配算法使识别精度达到了传统光标阅读机的水平。在具体实现上,它采用整体匹配与局部矢量特征匹配有机结合,快速筛选出多组可还原扭曲图像的系列特征组,通过给定曲线特征计算出唯一精确的匹配组,同时又不受图像印刷质量和局部污损的影响,达到“模糊匹配、精确定位”的识别效果。
OMR通过判断信息卡上固定的标志位置是否经过了人工涂写为依据进行涂点识别,其特点是快速、准确,且非常适合于标准化考试自动判卷的应用,因而已被光标阅读机广泛采用。但是,由于OMR识别技术对答题卡的设计与制作要求太高,且不能形成扫描图像,因而无法满足必须借助于图像进行判断的主观题网上阅卷的应用需要,因此,基于通用扫描仪扫描图像识别的IMR技术就成为实现网上阅卷的先决条件,它与OMR技术的有机结合构成了数字OMR模糊识别技术。
由以上可见,数字OMR模糊识别技术是IMR识别技术的一大亮点,其高精度实时灰度识别不仅可以采集图像,而且还彻底解决了光标阅读机对答题卡设计与印刷要求过高的问题。它不但可以扫描识别传统的双色套印答题卡,而且在单色黑白答题卡的扫描识别上更具有显著的优势。此外,纸张和印刷质量对其识别精度的影响微乎其微,从而使得考试组织者可以自主设计和印制题卡,解决了以往无法克服的答题卡内容保密难题和题卡高成本等问题。
2)教学质量分析与评价模型
人工神经网络就是模拟人思维的方式,构建的信息分布式存储和并行协同处理的系统,本系统利用神经网络的原理,结合教育测量与评价相关理论,创建一个面向对象(如:学生、教师、班级、学校、学科、整体)的教学质量分析与评价模型,如下图为学生个体的评价模型。
现有的一些教育测量与评价模型(如:马尔科夫链、方差分析、回归分析)也可以作为某一方面的评价方法融入本系统的大评价模型中。
马尔可夫链
马尔可夫(Markov)链是一个建立在随机过程的数学模型。由于在教学评价领域中,诸多评价对象的形成过程可以看成或近似看成随机过程,加之评价者对了解评价对象将来价值状况的需要,使得马尔可夫链在教学评价中得到广泛的应用。
马尔可夫链方法在教学评价中应用的优点在于考虑了评价要消除基础差异。如在评价不同教师的教学效果时,往往总是以教师所教学生的最后成绩为依据给出评价。事实上,不同的教师所带班级学生在原始水平上的差异,影响着学生的最后考试成绩。若单纯地根据学生最后成绩对教师的教学效果做出评价,而不考虑学生的基础差异的影响,得出的结论不一定反映实际情况,其结论难以让人信服。对此马尔可夫链分析法考虑了学生的原始状态,在同一标准下把学生的原始成绩分成相同的等级,即确定出状态空间,然后求出一步转移矩阵,最后根据马尔可夫链的平稳性及遍历性求出极限向量,并根据极限向量进行比较判断。
方差分析
利用多因素方差分析原理,将影响学生学习水平的诸多因素进行分类,检验各个因素对学习水平作用的显著性,也可以检验因素与因素间不同组合对学习水平交互作用的显著性。
回归分析
通过回归分析,我们可以计算出每一位同学、每一间学校从必修课水平测试到高考这段时间内的进步情况,建立起高考与水平测试之间的关系模型,进而粗略地预计新参加水平测试的学生将来参加高考可能达到的成绩区间。
2、技术的先进性
①具有先进的基于普通纸的数字OMR模糊识别技术,实现支持使用60克以上普通纸以黑白模式的打印、速印、复印、胶印等方式进行信息卡制作,并能够对其进行高效准确的信息识别与采集,克服了传统基于光机电反射原理的OMR信息采集技术必须使用100克以上纸张且经过专业印刷厂进行彩色套印制作信息卡而导致的使用成本高居不下的弊端;并且由于无需专业印刷厂设备的条件就能灵活根据需求自行制作信息卡,从而避免了传统OMR信息采集技术因为无法随意改变信息卡样式而导致的使用范围和频率受到限制的问题,同时支持以打勾、画圈等符合人们习惯的信息点填涂方式,极大的促进了信息卡这种高效的数据采集手段在考试阅卷、教学测评、干部评议、会议选举等多个领域的推广应用。
②具有领先的OMR信息卡电子图像扫描技术,利用通用高速文档扫描仪对OMR信息卡进行图像扫描和保存,能够对扫描后的电子图像进行实时的准确识别,并支持对异常情况的智能提示和批量纠错功能,克服了传统基于光机电反射原理的OMR信息识别技术由于无法保存信息卡图像所带来的易错难纠、无据可查、对异常情况需立即停机人工干预而影响总体效率等弊端,极大的提高了信息采集的工作效率。
③具有领先的应用于图像信息采集的基于“Harris角点检测特征及匹配”改良算法,支持无需任何固定定位点的信息卡电子图像的高效准确识别,既克服了传统基于光机电反射原理的OMR信息采集技术因为依赖严格的同步头、定位点而导致对于印刷精度要求高、纸张成本高的缺点;又避免了基于常规电子图像识别原理的OMR信息采集技术因为过于依赖表单定位线而存在容易受印刷质量影响且识别结果不准确、信息采集效率不高等问题。
④具有领先的应用于图像信息采集的基于“傅立叶变换”及“图像梯度锐化”改良算法,大幅度增强对电子图像噪声的过滤功能以及图像模式识别的效率与准确性。既支持对灰度信息卡的电子图像的准确识别,信息采集效率高,而不以降低整体工作效率和系统性能为代价;也支持黑白模式的信息卡电子图像的准确识别,可以大幅度降低电子图像的存储空间,充分节省系统资源;同时还支持对信息点与文字内容混排的“题卡合一”模式信息卡的准确识别,避免传统“题卡分离”模式信息卡由于不符合手工习惯而在调查与测评等领域中推广应用受限的问题;而且还支持七段码信息点的准确识别,丰富了OMR信息卡的表现形式,更符合人们习惯,也克服传统OCR字体识别准确性不足的缺点。
⑤把改良的神经网络算法结合教育测量与评价理论,应用于教育领域的教学诊断和评价中:目前神经网络算法在实际中的应用多为金融领域,应用在教育领域还属于国内首创。历来对教育的评价就是教育管理中的难点,尤其是对教学质量的评价,它不但涉及《教育测量学》、《教育统计学》、《教育评价学》等专业的学科,还要求评价者能综合各种因素,全面、客观、科学地进行评价,目前很多在一线的教育工作者并不具备这样的专业知识和评价技能。而本系统则是希望能模拟一个专业的、经验丰富的教研人员,对考试后的数据进行分析及评价,形成科学的统计报表及分析报告,以便教师科学的、有针对性的开展后续的教学活动。
除了面向教育管理者及教育工作者的分析评价,本项目更为特色的应用即是面向学生个体的评价。且不说很多一线的教育工作者不具备科学评价的技能,即使是有经验的教师,由于时间、精力等因素也难以对每个学生个体进行科学的、个性化的评价,而利用本项目自行建立的评价模型则可以轻松做到。基于大量的原始数据及科学的评价模型,系统自动生成的评价内容及格式可以是丰富多彩的,内容可以有明细的、简明的、汇总的、对比的等等,反馈给学生及家长也有多种渠道,可以以网页格式、邮件格式、彩信格式、短信格式等等。评价内容通俗易懂,即使不具备教育测评相关知识的学生和家长也能够轻松阅读。这不但是家长了解小孩学习情况一种有效途径,更是帮助学生正确对待考试成绩,查漏补缺,有效进行学习的科学手段。
六、建设方案
6.1概述
XX区作为广东省的“教育强区”,在推行素质教育的过程中,如何更好的监测和评价下属学校的教学质量,科学的指导教学改革,从而整体提高教学水平将是我区教研工作的重要内容。通过以往工作经验的积累,抽测和模拟考是全面把握阶段性的教学成果、进行教学质量的评估监测行之有效的一种方式。随着信息技术的发展,我区大部分中小学校园网的建设已基本完成,教师的计算机操作及管理水平也日趋提高,高中学段的学校先后购买并使用了基于普通纸做答卷的计算机网上阅卷与分析评价系统,从学校及全区层面实现了考试管理的全程信息化,其硬件条件具备和高中学段的成熟应用为我区初中及小学学段组织大规模的考试,并应用网上阅卷系统和教学质量监测平台实现全程的考试信息化、进行科学化管理奠定了基础并创造了条件。
本方案正是借鉴了高中学段的成功经验,并结合初中、小学学段的现状及实际情况,利用计算机网上阅卷等手段,以实现和规范全区17万多中小学生的抽测和模拟考试,达到科学地评估和监测教学质量之目的。
本项目建成后:
1、通过对特定考试成绩数据科学、完整的统计分析,达到全面把握教育局各年级、学校、班级、学生和教师阶段性教学成果的目的;
2、通过对历次考试成绩数据的纵横向分析及跟踪管理,实现对教育局各年级、学校、班级、学生和教师的教学质量情况的动态监测;
3、通过对年级、学校、班级、学生和教师的日常评估、综合评估及学生素质评估等方式,实现对学生学业及教师教学的科学评估。
4、通过对质量监测的经验性数据的积累和挖掘,为教学活动提供指导和决策支持。
6.2建设思路
为适应全区性统考及各学校平时考试阅卷的需要,XX区教育局拟定的项目建设思路为:以区教育局为中心,下属镇街(或学校)为阅卷服务站,利用服务站完成数据采集及网上阅卷的工作,利用区教育信息中心服务器进行成绩数据统计分析及教学质量动态监测,并通过教育网或互联网实现数据的发布,服务站与区教育信息中心共同构成一个有机的网上阅卷和分析评价平台。
XX区目前已有9套完整的学校版网上阅卷系统,即区里的9所公办高中已全部配置系统,完全满足了全区高中学段网上阅卷的需求。根据目前全区初中学段和小学学段的规模,计划在区教育局信息中心部署一套覆盖全区的网上阅卷和分析评价平台,与此同时,在下属的七个镇街分别布置1个或多个阅卷扫描点(其中包括XX城区、XX镇、XX镇、XX镇、XX镇、XX镇、XX镇)。
XX区目前有初中在校人数约4万人,小学在校人数约13万,综合考虑各镇街的实际情况,以及在实际统一评卷中对扫描和阅卷时间的安排,在实际部署时,对于学校较多即学生规模较大的镇街,如XX城区计划设4个扫描点;XX镇设2个扫描点;而XX镇、XX镇、XX镇、XX镇、XX镇各设1个扫描点,这样共计11个扫描点。这11个扫描点来完成全区所有小学和初中答卷的扫描工作,然后各个扫描点把数据通过网络上传到区教育局信息中心的阅卷服务器中。
另外,在区教育信息中心部署1套大并发用户数的教育局版的网上阅卷与分析评价系统,用于对全区阅卷和评价数据的统一管理和发布。
本项目建成后,可以满足全区各学段的统测、抽测网上阅卷与成绩数据统计分析的要求。同时,部署了扫描识别系统及高速扫描仪的学校,可借助区教育局统一部署的网上阅卷与分析评价系统完成学校自主考试的网上阅卷与成绩数据统计工作。
具体布局如下:
1、网上阅卷系统部署在区教育局数据中心。网上阅卷时通过教育城域网或互联网集中向全区各相关学校提供阅卷服务。阅卷结束后,即可进行全区成绩数据的统计分析与报表生成工作。
2、数据中心可根据实际需要部署阅卷服务器、数据库服务器、数据发布与查询服务器等不同用途服务器,
3、全区统测或抽测时,配置有高速扫描仪和扫描识别系统的教育指导中心或学校作为考试答卷的扫描点,负责本校及周边学校的答卷扫描工作。扫描完成后,由系统自动将答卷扫描图像上传到教育局数据中心的相关服务器,并由阅卷服务器集中对各阅卷点发布。各学校的老师可以“足不出校”或在教育城域网及互联网通达的任意地方实现远程网上阅卷。
附:系统部署结构示意图:
系统配置:
1、软件系统配置
(1)根据XX区教育现状,本期项目建议在区教育局数据中心部署一套支持1300并发用户的教育局版网上阅卷系统;
(2)在区教育局下属的镇教育指导中心或学校部署一套或多套扫描识别子系统一台及配套使用的高速文档扫描仪,以实现答卷扫描与数据采集之用。
2、硬件设备配置
(1)在区教育局数据中心部署三台性能中等的应用服务器、数据库服务器和图片服务器,实现网上阅卷数据的集中存储与发布;负责响应扫描、阅卷终端的远程网络请求;负责答卷图像的存储及管理。
(2)各个扫描点也需要配置一台普通的PC机用作扫描电脑(可用旧电脑来做扫描电脑无需新购)
6.3网络及硬件要求
6.3.1网络及安全要求
良好的网络环境和稳定的网络终端是保证系统正常运行的基础,该系统平台要求具备一个良好、通畅的教育网络环境,并能保证教育网内各终端的网络安全,特别是阅卷服务器,教学质量监测服务器应该加强安全防护措施,使软件系统安全高效的运行。
6.3.2软件配置要求
序号 | 项目 | 配置 | 数量 | 说明 |
1 | 网上阅卷与分析评价平台 | 教育局版 | 1 | 下属镇街部署11个扫描点 |
6.3.3硬件配置要求
序号 | 项目 | 配置 | 环境 | 数量 | 备注 |
1 | 数据发布与查询服务器 | CPU:32核 内存:32G 硬盘:1TB | 1)Windows 2003 / 2008 2)SQL Server 2005 / 2008 3)IIS 9以上 4).Net 4.0 | 1 | 负责全区数据的集中发布与查询 |
2 | 阅卷系统服务器 | CPU:32核 内存:32G 硬盘:1TB | 1 | 负责网上阅卷数据的集中存储 | |
3 | 数据库服务器 | CPU:32核 内存:32G 硬盘:1TB | 1 | 负责数据库的运行和管理 | |
4 | 阅卷终端电脑 | 无特别要求,普通PC机即可(教师办公电脑或学校现有的机房) | 1) WindowsXP/Vista/7/8 2) IE9以上浏览器 | 网上阅卷使用 | |
5 | 扫描终端电脑 | 无特别要求,普通PC机即可 | 1) Windows XP/Vista/7/8 | 答卷扫描使用 | |
6 | A3高速文档扫描仪 | (A4纵向速度70页/分钟) (A4横向速度90页/分钟) | 11 | 答卷扫描使用 |
七、系统平台技术方案
7.1概述
网上阅卷与分析评价平台主要面向区县教育局设计,是满足区教育局及辖区内学校进行网络评卷及其成绩的分析评价,进而实现教学质量动态监测需求的业务系统,它还是一个面向教育管理者及广大师生(包括学生、家长)开放的学业诊断、分析应用平台。
平台包含教学质量监测信息化过程中的“数据采集”、“统计分析”、“跟踪监测”、“素质评估”等环节。
【题库】:根据教学大纲,按学段、学科、知识点、能力专项、题型、难度等等分类管理的题库,根据权限可划分为:总题库、学校专有题库、教师专有题库等;
根据命题教师制定的组卷策略,可以从题库中快速地抽出符合教育测量要求的优质试题集合。
通过对使用过的试题的参数不断更新实现对题库的优化和管理。
【设计题卡】:将某学科考试试题的答题区域统一编制在一份专门的答题纸上,包括考生信息填写区域、客观题填涂区域、主观题答题区域等。
从平台题库抽取出来的试卷可以自动排版生成题卡。
【考务管理】:包括考试管理、试卷管理、报名、考场安排、监考安排等等。
【扫描识别】:将回收的答题卡进行批量扫描,扫描过程中同时完成客观题识别及答题卡电子图像的保存,扫描结果一键上传至服务器。
【网上阅卷】:进行主观题的批阅,其评卷的模式与现行高考、中考计算机网上阅卷系统相同,并增加了与人工阅卷相类似的辅助功能。
【统计分析】:根据教育测量学、教育统计学,对学生的原始成绩数据进行多种维度的统计分析,形成各种当次考试的统计报表和分析报告。
【错题集】:个性化的收集学生考试错题,以便学生考后总结,指导复习;
【在线考试】:网络考试平台,学生在线作答,客观题由系统自动阅卷,主观题由教师在后台评阅。可以根据学生考试分析结果,针对薄弱的环节智能地提供自我复习训练功能。
【素质评估】:可自定义的开放式功能,可以由用户自行定义评估的内容、评估的方法、评估结果的处理等,其中评估手段有:传统纸质投票式、网络评议式等等。
【归因分析】:将影响学生学习的各种因素编写成调查问卷,向学生开展问卷调查,再将问卷调查数据与学生学习成绩进行归因分析,从而寻找影响学生学习的关键因素所在。
【跟踪监测】:动态跟踪教学管理中的个体、群体的成绩变化情况,能观察和诊断变化过程中的教学问题,提供科学的改进策略。
【信息平台(包括信息发布、资源共享、家校互通)】:提供开放的互动交流平台,信息的交互的手段有:公告信息、平台消息、报表在线查询、报表打包下载、云端服务、微信、移动终端APP消息推送等。
7.2功能特点
1、平台式的应用(多单位一站式应用)
教育局只需集中建设一套系统,即可满足辖区内多个单位的使用需求,根据区县教育局的规模及设计冗余,系统平台可以支撑教育局及下属学校不少于200个独立应用单位的使用,每个单位的功能应用及数据存储应该可以相对独立。
2、超强的数据处理能力
系统平台的数据结构以及数据分发和存储机制具有超强的并发能力,单台服务器(约5万元左右配置的服务器)能支持3000以上评卷教师同时阅卷的应用需求,并且同一时间段内参加考试学生数不少于30万。
3、高效的报表查询
统计报表和分析报告的生成及查询采用缓存机制,大大提升用户查询报表的效率,真正实现无延迟的数据查询。
4、个性化的分析
为每一种角色(系统默认的角色包括:教研主任、教研员、校长、年级组长、备课组长、班主任、任课教师、家长、学生)都设定了一系列有针对性的分析报告。诊断、分析的目的性强;
角色 | 分析报告 |
学生、家长 | 学生分析报告、学生复习建议、学生素质评估、 学生错题集、学生答卷图像、学生历次成绩跟踪 |
任课教师、班主任 | 班级分析报告、班级成绩对比、学生进退布预警、 学科异常情况分析、标记试卷讲评、教师素质评估、 班级历次成绩跟踪、班级分数段分析、班级临界生分析、 学科成绩分析、知识点分析、题型分析、试题分析 |
校长、教务主任 | 学校分析报告、学校成绩对比、各班成绩对比、 学校历次成绩跟踪、学校分数段分析、学校名次段分析、 学生进退步预警、教师进退步预警、学校临界生分析、 尖子生和学困生分析、考试作答情况分析、学校档案统计 |
局长、教研主任 | 考试分析报告、各校成绩对比、高考成绩分析、中考成绩分析、 考试质量分析、尖子生和学困生分析、评价学校加工能力、 评价教师加工能力、归因分析、档案统计 |
5、精美的分析报告
每一份分析报告内容丰富、针对性强,并配有大量美观、生动的图形、图表,为了便于用户的理解还附有详细的注释说明文字,充分满足用户分析评价的需求。
6、充分激活数据的相关性
分析报告之间的数据可以互相关联链接,便于从多种维度、由简至繁、层层深入地查找和发现问题;分析报告可以与题库、微课资源关联,便于考后复习训练;分析报告可以直接针对报告内容与教师互动交流;
7、操作更简单
系统平台通过优化操作模式、精简操作模块、简化操作流程等一系列改进,结合更人性化的界面设计与智能辅助功能,使得平台的使用更为便捷。
8、扩展互联网+的应用
系统平台可以借助云服务器提供:安装、升级、初始化数据、云备份、自定义统计指标、自定义统计报表等云服务;
系统平台支持与微信公众号绑定,家长可以通过微信查询成绩,或由系统自动向家长推送成绩信息;
系统平台支持安卓手机客户端的安装,学生、家长可以通过手机APP查询成绩;教师可以通过手机APP查询成绩、网上阅卷;
9、业内领先的扫描识别技术
系统平台的扫描客户端系统,是一款网上阅卷行业中技术领先、用户群体最广的扫描识别软件系统。它以XAML为实现代码呈现出华丽的用户交互界面,大量后台线程的应用使其具备完美的用户体验。它拥有一套完备的识别核心组件,以特殊优化的角点特征识别为基础,通过特征向量的匹配,实现准确的定位与识别,并可量化匹配程度。它采用多线程并行处理模式,满足同时完成图像扫描、数据识别、试题切割、数据上传的实时性要求。
7.3技术特性
1、先进的系统架构
采用三层B/S体系结构设计,可以实现各种网络环境下的应用,具有较好的容错与扩展能力。支持多服务器协同工作,一套系统可以分为应用服务器、数据库服务器、图像服务器,并可以根据需要增加不同类型的服务器协同工作。
2、完备的安全机制
系统平台尤其注重:数据的正确性、数据的完整性、数据的保密性。
系统平台软件中采用了业界标准的安全加密算法RSA和AES,所有数据在任何边界交换过程中,依据安全和效率出发,分别使用数字签名、整体加密的方式来保证足够的数据安全性。另外平台还采用智能云备份等技术,确保数据存储的安全。
3、良好的适应能力
系统平台的安装、升级与维护均可连接云端服务完成,无需安装任何客户端、插件,通过Web浏览器即可使用系统。
系统平台对答题卡的超低要求、对应用方式的高灵活性,体现了系统强大的容错能力。
4、科学的权限控制
采用功能模块化设计,引入角色定义、功能权限、数据权限模型,既可以自动分配和管理权限,无须人工干预,又能实现灵活的自定义控制,可以满足不同层面的教学管理需要。
5、高效的运行机制
系统平台除了在客户端采用了多种有效的校验机制外,还采用大量的中间层技术、缓存技术,实现了运行负载的合理分配,从而避免客户端、应用服务器及数据库之间的频繁交互,提高运行效率。另外系统采用多线程+多进程的并行处理方式,充分利用CPU的多核心,在无须人工干预的前最大限度提高系统平台的高效性。
6、强大的处理能力
采用SQL大型关系型数据库作为后台数据存储仓库,结合分库、分表、读写分离、批处理等技术手段,使系统具备强大的海量数据处理能力。
7.4技术模型
考试 测评与分析模型
学生自测模型
教学管理模型
教学评估模型
7.5扫描识别
7.5.1概述
扫描识别是整个项目的数据采集入口,教育局统考由于考生数多,试卷扫描量大,且阅卷时间紧迫,因此,要求扫描识别子系统必须高效、准确。所以,扫描子系统是整个项目的技术核心部分。
扫描识别子系统是集OMR、条形码、八字吗(七段码)和图像识别功能于一体的专业系统。系统支持60克以上普通纸制作答卷,且以“无需定位、模糊识别”的技术完成答卷的扫描识别工作。这对教育局和学校而言,比使用严格定位技术进行识别设计的产品具有无法比拟的优势。因为它有效地避免了因使用普通纸和以复印、速印、胶印等简单方式制作答卷容易出现偏移而可能导致的识别错误的现象发生,大大提高系统的容错能力。
扫描识别系统
的应用将大幅降考试成本,提高阅卷的效率。系统灵活的答卷及模板设计功能,不但接轨了高考、中考计算机网上阅卷模式,而且增加了阅卷的灵活性,并将对提高考试的阅卷效率与质量产生积极的作用。
7.5.2功能描述
扫描识别功能示意图:
扫描识别的功能流程:
n 使用MS Word或其它的字处理软件制作答题卡;
n 使用扫描识别系统的模版编辑器制作答题卡的扫描识别模版:扫描一份空白的答题卡,在扫描的图像中定义OMR、条码以及图像字段,并根据实际情况创建多页模板,添加模板标识(ID);
n 使用扫描识别系统对回收的试卷进行扫描识别。首先根据自身需求进行系统设置,然后打开对应的题卡模板文件,开始扫描;
n 记录每份答题卡的扫描顺序、多页题卡的顺序、识别并判别考号的正确性、识别客观题并记录每个涂点的状态;
全部题卡扫描完毕,对数据进行数据校验(或与扫描同时进行),将扫描数据导入到阅卷系统中。
7.5.3扫描仪控制
图像扫描仪通过电缆连接到计算机,典型的连接接口包括:
n 并行口
n SCSI卡
n USB 口
从接口数据传输速度考虑,建议使用SCSI 或 USB 口(多数扫描仪要求USB2.0标准)。
软件系统与扫描仪之间有多种数据传输协议可用,涂点特征视图系统采用的数据传输协议包括:
驱动类型 | 定义 |
TWAIN | 标准的扫描设备控制协议,所有的扫描仪制造商都提供TWAIN兼容的驱动程序。 |
ISIS | ISIS是Pixel Translations公司开发的一种协议,通常用于中、高档扫描仪。并不是所有的扫描仪都提供ISIS驱动程序。 当采用TWAIN扫描速度较慢时,可以考虑采用ISIS |
扫描仪驱动程序安装完成后,就可以在涂点特征视图系统中设置扫描仪。扫描仪参数可以事先设定,也可以在扫描时设定,一旦设定并开始扫描,所设参数将被自动保存。
TWAIN扫描仪控制参数
序号 | 选项 | 功能 |
1 | 使用扫描仪设置当 前设置参数 | 全部使用当前扫描仪的设置参数,可以通过设置按钮来调出扫描仪驱动设置界面来改变参数。 当需要使用本系统提供的参数之外的额外扫描参数时要使用本功能。 |
2 | 显示扫描仪用户界面 | 扫描时显示扫描仪参数设置界面,可以在每次扫描前修改扫描参数,与上一项功能类似。 |
3 | 自动背景色阶 | 当选择这项时,扫描的图像将被自动滤除背景色,当时使用这个功能时,如果发现扫描速度受到影响,建议扫描前调整为合适的亮度对比度,而不使用这个选项。 |
4 | 自动校正上下颠倒图像 | 对于含有页码特征点的图像,可以自动校正其方向,无需人工干预。 |
5 | 分辨率 | 设置扫描分辨率(DPI),如果选择了1或2,这一参数无效。 |
6 | 图像模式 | 选择黑白或灰度图像,目前系统仅支持黑白和256色灰度模式。 |
7 | 亮度 | 设置图像亮度,建议选择默认值,除非遇到问题。如果选择了1或2,这一参数无效。 |
8 | 对比度 | 设置图像对比度,建议选择默认值,除非遇到问题。如果选择了1或2,这一参数无效。某些扫描仪不支持这项。 |
9 | 双面扫描 | 如果扫描仪具备双面扫描功能,可以选择这一项,如果选择了1或2,这一参数无效。 |
10 | 自动纠偏 | 一般不建议使用这一项,可能会造成图像变形。如果选择了1或2,这一参数无效。 |
11 | 自动去噪 | 去除图像中细小的黑点。如果选择了1或2,这一参数无效。 |
12 | 检测重张 | 重张进纸检测。如果选择了1或2,这一参数无效。 |
13 | 快速送纸模式 | 如果选择快速进纸,可以提高扫描速度,但实时程度稍有降低。如果选择了1或2,这一参数无效。 |
14 | 滤色 | 当采用双色印刷,且需要过滤底色时使用,如果选择了1或2,这一参数无效。 |
ISIS扫描仪控制参数
序号 | 选项 | 功能 |
1 | 使用扫描仪设置当 前设置参数 | 见上表。 |
2 | 显示扫描仪用户界面 | 见上表。 |
3 | 自动背景色阶 | 见上表。 |
4 | 自动校正上下颠倒图像 | 见上表。 |
5 | 分辨率 | 见上表。 |
6 | 图像模式 颜色模式 | 通过这两项的组合来选择黑白或灰度图像,目前系统仅支持黑白和256色灰度模式。 图像模式 颜色模式 结果 1 1 黑白图像 1 4 16色灰度图象 1 8 256色灰度图象 3 8 24位彩色图像 如果选择了1或2,这一参数无效。 |
7 | 亮度 | 见上表。 |
8 | 对比度 | 见上表。 |
9 | 扫描模式 | 自动模式:自动检测并进纸扫描。 ADF单面扫描:使用ADF仅扫描正面图像。 ADF双面扫描:使用ADF扫描正反两面图像。 如果选择了1或2,这一参数无效。 |
10 | 自动纠偏 | 一般不建议使用这一项,可能会造成图像变形。如果选择了1或2,这一参数无效。 |
11 | 自动去噪 | 去除图像中细小的黑点。如果选择了1或2,这一参数无效。 |
12 | 检测重张 | 重张进纸检测。如果选择了1或2,这一参数无效。 |
13 | 送纸模式 | 标准扫描:完全实时扫描处理,但扫描速度略有降低。 快速扫描,预进纸,可以提高扫描速度,但实时程度稍有降低。 如果选择了1或2,这一参数无效。 |
14 | 过滤颜色 | 当采用双色印刷,且需要过滤底色时使用,如果选择了1或2,这一参数无效。 |
15 | 硬件压缩 | 当前版本暂不支持使用硬件压缩。 |
16 | 选择纸张 | 选择不小于且最接近的模版定义的纸张尺寸。如果选择了1或2,这一参数无效。 |
17 | 旋转角度 | 图像旋转角度。选择旋转一定角度将会影响扫描速度。如果选择了1或2,这一参数无效。 |
7.5.4图像识别技术
1、条形码识别(BCR)
BCR(Barcode Recognition,条形码识别),此为识别事先打印(或印刷)生成的规范标准的条形码信息。目前通用流行的为128、39等几种码制,特点为快速、准确,现在以不干胶条的形式大量用于考生的ID号码如报名号、准考证号的识别应用上,对于提升自动处理的效率有着特殊的关键作用。
在大规模关键性考试中,答题卡的准考证往往采用条形码,而不采用OMR,不仅大大提高考号的识别率,而且基本消除了考号交叉错误的情况。
扫描识别系统支持大多数流行的条形码制的识别,并且具有识别率高、对破损和倾斜条码的容错能力强,扫描识别系统同样采用实时识别。
(1)、条码设计规范
条形码(Barcode)常用来作为考生号的字段类别,可以保证最高的识别精准度。为了保证条形码的正确识别,必须按照以下规范设计:
条形码类型:支持128码、39码等多种常用条形码类型。
39码设计:39码是在字处理软件中选择39码字体而生成的,在条形码内容的开头和结尾必须是星号(*),其中空格必须用感叹号(!)表示,如*01290!389*;
条形码方向:可以采用水平或垂直方向,但水平方向将更易于识别,设计时不可歪斜;
条形码尺寸:通常不低于26磅,原则是扫描的条形码图像中条空不能有缺失。如果是置入的条形码图像,不要改变条形码尺寸;
间距:条形码上下可以出现文字、线条的其它内容,但不要重叠;在条形码两侧与其它文本或线条等内容至少保持1.5mm以上。
2、OMR识别技术
此项技术在客观题的机器评卷中已大量采用,采用信息卡上固定的标志位置是否经过人工涂写作为识别的依据。特点为高速、准确可靠,是十分适合考试信息处理尤其是选择性的客观题阅卷的技术手段。
OMR识别技术过去主要运用在光标阅读机上,尽管具有速度快、识别准确的优点,但对答题卡的制作、印刷要求太高,并且不能扫描图像,无法运用在网上阅卷中,所以逐步出现了IMR技术,扫描设备采用专用扫描仪和通用扫描仪,解决了光标阅读机无法采集图像的问题,但专用扫描仪同样对答题卡的要求太高,且设备价格高,操作难度大的缺点,而通用扫描仪由于价格低、易使用、成像质量高等优点,成为实现OMR识别的理想设备。
基于通用扫描仪的OMR识别技术是该项目的一大亮点,采用“无需定位、模糊识别”的技术实现了和传统光标阅读机同样的识别精度,并且完全避免了光标阅读机的缺陷:同样的高精度实时识别不仅可以采集图像,而且消除了对答题卡的制作、印刷精度和质量要求,不仅可以扫描识别传统的双色答题卡,更设计为对单色黑白答题卡,而且纸张和印刷质量对识别精度的影响微乎其微,这意味着考试组织者可以自主设计印刷题卡、解决保密和题卡高成本的问题。
扫描识别子系统的OMR识别技术可以概括为:
n 对单选题和多选题的准确识别
n 题卡可自主设计印刷,对题卡的容错性和适应性强,支持黑白和彩色题卡,无需同步头和检测线;
n 可使用普通复印纸(60克以上),可胶印、速印、复印;
n 可识别多页答题卡;
n 客观题与主观题可随意混排;
可使用不同大小不同形状的客观题填涂点。
3、字码识别技术
此项技术在目前的主观题题卡中已被部分采用,8字码是通过给定的位置,考生手涂写笔画,使得这些笔画组成阿拉伯数字,这些数字由于在给定区域,易于被软件准确识别。特点为占用答题卡面积小、信息量大,是十分适合考试信息处理尤其是考号、题号的填写识别。
l 每个字段最多支持24个数字符;
l 支持黑白带外框8字码、彩色带外框8字码、黑白或彩色不带外框8字码;
l 8字码字段数量不限,可以作为考号;
l 支持四个方向的8字码;
l 支持自定义输出格式;
l 支持不规则排版,以适应不同类型答题卡。
(2)、8字码答题卡样本
7.5.5答题卡规范
答题卡是指采用试卷与答题纸(答题卡)分离的考试形式,所有答题内容都标注或书写在答题卡上,使得数据扫描处理内容大大精减。
如果希望采用题卡合一的形式,那么试卷与答题区域的排版设计要同时进行,其中答题区域的排版设计要按照本章所描述的方法进行。
答题卡的全部设计工作在Word等字处理软件中就可以完成,采用普通激光打印机打印黑白样稿,就可以交付速印或印刷。尽管涂点特制视图系统采用了智能识别技术,设计答题卡时,无需过分强调设计精度,但仍须按照本章所描述的设计规范,以便获得最好的识别效果。
1、条码设计规范
条形码(Barcode)常用来作为考生号的字段类别,可以保证最高的识别精准度。为了保证条形码的正确识别,必须按照以下规范设计:
条形码类型:支持128码、39码等多种常用条形码类型。
39码设计:39码是在字处理软件中选择39码字体而生成的,在条形码内容的开头和结尾必须是星号(*),其中空格必须用感叹号(!)表示,如*01290!389*;
条形码方向:可以采用水平或垂直方向,但水平方向将更易于识别,设计时不可歪斜;
条形码尺寸:通常不低于26磅,原则是扫描的条形码图像中条空不能有缺失。如果是置入的条形码图像,不要改变条形码尺寸;
间距:条形码上下可以出现文字、线条的其它内容,但不要重叠;在条形码两侧与其它文本或线条等内容至少保持1.5mm以上。
2、OMR字段设计规范
涂点类型:通常选择随本系统的OMR字体,也可以选择大写的O字母、□符号等,如:
如采用大写字母O时,应该用Arial字体,而不应该用Times New Roman字体;
涂点尺寸:涂点符号是一种字体,其字号应该保持在11 – 14磅之间;
涂点间隔:各涂点之间、涂点与其它文本、图形等内容间至少应保持1.5mm以上。
3、8字码设计规范:
答题卡的数字8码采用字体输入,字体名DEPUOCR_Numeral。下图表示了字符对应关系:
其中未填涂的8字码对应的是大小写的A或B或C或D,作为示例的已填涂的、8字码分别是0到9, 为了适应其它公司的答题卡,6和9分别有两种涂法,我们建议的是最好采用6和9对应的涂法,另一种涂法分别是^和(,即shift+6和shift+9。
字体尺寸建议24 —— 28号。
一个字段内的字符最好采用相同字号,字符间没有空格分割。
对于单色黑白卡片,字符的外框是识别的一个特征,所以字符外框应该印刷清楚,少量的缺失没有关系,但不得大量印刷缺失,缺失比例不要超过20%。
数字8码的外框距其它内容(包括字、线等)应保持2mm以上。
对于含有数字8码的答题卡的那一面必须定义2个以上的精确特征点。
(1)、考号的设计
Ÿ 考号尽可能采用较少位的数字组成;
Ÿ 考号可以采用条形码、OMR涂点:
条形码:如果用户可以打印不干胶条形码标签或直接打印全部答题卡,最好采用条形码表示,以达到准确无误的识别。
示例1(不干胶标签) 示例2(直接打印)
OMR涂点:由考生在答题卡上自行填涂自己的考号,无须额外制作条码标签,缺点是由于考生涂错、漏涂涂点等原因造成数据校对困难。
(2)、在第一页加入OMR填涂示例:
为了保证考生正确填涂OMR,答题卡首页都应加入下列标示:
(3)、组合答题选项
类型相同(选项数相同、同为单选或多选)的试题选项涂点应尽可能组合在一个或多个矩形区域中,如:
注:数字OMR版本中客观题必须是A、B、C …… 类大写字母选项
(4)、防止墨迹渗透到背面
如果双面答题卡纸张较薄,必须防止在客观题背面的主观题笔迹渗透到客观题涂点上,因此在设计答题卡时,客观题答题区背面最好不要设置为答题区域。
(5)、特征点及可识别页码
在设计多页答题卡时,特别是有多页不含任何识别点而仅仅是采集图像时,为了防止在扫描时因为页码顺序错误而造成主观题答题区图像错误,需要在每张的正面设置一个可识别的页码标志,这样,就可以通过检查识别后的数据文件来检查扫描顺序是否正确。
页码标志放置在答题卡的特征点区域中。
关于特征点及页码设计参见下一节。
(6)、装订答题卡
如果有可能,将印好的每份答题卡按页码在左上角按装订线装订起来,在扫描时再沿装订线剪去装订部分,可以保证在扫描时答题卡顺序的正确性。装订线参见样卡的设计。
这一方法不是必需的。
(7)、去角处理
如果不采用上面描述的装订答题卡的方法,建议采用去角处理的办法防止在扫描时答题卡出现放反的情况。
方法是在将印好的答题卡在同样的位置上全部切掉一个小角,这样在整理回收的答题卡时,可以很容易地发现是否有放反的卡片,但不会发现页码顺序是否正确。
这一方法不是必需的。
(8)、答题卡布局
Ÿ 在答题卡版面布局上,一般遵循以下原则:
Ÿ 将OMR格式的选择题集中放置在第一页;
Ÿ 笔答题依题号顺次排列,用黑矩形实线框表示出各题的作答区域;
Ÿ 所有试题必须标好题号、小题号,不同类型试题间最好不要有重复题号;
Ÿ 主观题在题号、小题号后标注该题满分,供网上评卷使用;
Ÿ 单个主观题答题区最好在同一页面上,不要分页;确实要分页,也要尽可能少分;
Ÿ 在每一张卡片的正面上应该设计一个小的区域,要求学生填写自己的姓名和考号,以供分发和复查使用。
5、定义特征点
特征点是用来识别扫描图像的旋转、伸缩及变形的参考点,也是识别OMR的定位参考点,目前版本有一系列三角形符号组成,包含在Depu IRO OMR字体中,除本系统提供的三角形符号外,也可根据需要自行设计,只要是三角形状即可,如下:
对于特征点来说,三角形形状的区别没有意义。
特征点分为两类:
精确定位特征点:用于定位Omr涂点的理论坐标位置,由2到4个特征点组成,特征点越多识别效果越好,一般采用4个特征点作为精确定位特征点。
松散定位特征点:粗略定位,仅用于识别纸张方向以及是否折角等。没有数量限制。
特征点的设计与位置没有特别要求,但应遵循以下原则:
l 特征点的字号应在14 — 36磅之间;
l 特征点应放置在答题卡的四角为宜,但不是必须;
l 精确定位点应围绕所有OMR放置为宜,但不是必须;
l 如果答题卡需要切角,则需要考虑特征点与裁切线离开一定距离;
l 特征点与其它文字、线条等图案至少离开1.5mm以上。
特征点必须是实心的三角形。
7.5.6KFI技术
在扫描识别子系统中,数据校验的重点是考号校验和页码校验(多页答题卡的情况),扫描结果数据全部经过四个方面的正确性校验:
n 页码的正确性校验
n 考号的填涂错误或条码损坏校验
n 基于考场号的考号的一致性校验
n 客观题填涂校验
在任何考试题卡处理中,前三项必须经过校验无误的试卷才可以进行评分。
扫描识别子系统提供了实时和事后准实时处理的KFI(Key From Image)技术,即基于屏幕图象的键盘录入,可以根据图像快速修改由于填涂不当或答题卡等问题造成的错误,可以在扫描过程中、扫描后或与扫描并行,通过扫描的图像对每个状态有问题的数据采集点的识别结果进行改正。
当然并不是所有能采集图像的扫描识别系统都可以实现KFI,而该项目扫描识别正是由于其先进的识别技术使得其在扫描过程中记录了大量图像识别信息,才能提供与识别结果对应的精确的图像区域,并自动突出显示给数据校对操作者,这会大大提高校对的效率和准确性。
7.5.7大规模处理模式
在大考考试项目中,由于考生人数多,而评卷时间紧,故留给扫描的时间很短,固然可以将答题卡扫描与阅卷同时进行,但为了加强阅卷系统对试卷分发的高随机性,仍然应该在开始正式阅卷前,扫描完一半或大部分试卷并对考场考号校对完毕。因此必须采用多扫描工作站联网工作模式。
该项目扫描识别应是一个产品化的软件系统,因此具有操作简单、易于管理的系统,既可适应中学考试的独立使用也可在大考众多台工作站并行处理,网络示意图如下:
7.6网上阅卷
7.6.1概述
在中学考试中,一般包括两部分内容:客观题和主观题。在过去我们已经用OMR阅卷机成功解决了客观题,将人为的阅卷误差降到为零。但是主观题的阅卷一直应用传统手工阅卷方式,同时由于主观题的答案的“不确定性”,在阅卷中容易造成不同的评卷员对标准答案掌握的尺度也不一致。
网上阅卷系统的目的就是解决整个阅卷系统中的所有“不一致”因素,我们通过高速扫描系统使考生的试卷电子化,然后通过计算机网络阅卷,运用一卷多评、误差控制等手段,使所有评卷员的评分标准趋于一致,以达到“公平、公正”的目的。
7.6.2系统功能
考试结束并将考生答卷扫描到服务器后,评卷用户即可通过系统设置的帐号和密码登录网上评卷系统,对系统授权的合法用户,系统将按照授权列出用户可选择评阅的科目及题目,评卷用户选择完成后,系统即可通过网络自动随机分发评卷用户授权评阅的题目。此时,评卷用户即可通过电脑浏览器进行答卷的评阅和批注。当评用户评完一份答卷后,系统会自动分发下一份答卷,直至全部答卷评阅完成。
在整个评卷过程中,为确保评卷结果的客观、公正及准确,系统提供了客观公正性保证、误差控制机制、进度质量监控及丰富的辅助功能。
n 根据扫描系统所识别的答案自动计算客观题得分
n 浏览主观题答题图像,在计算机中直接评分并保存分数
n 支持整幅图像和分割图像的主观题评分
n 批注功能
n 试卷结构分为题组/试题/小题三级,以题组级别评分
n 实现试评、正评两个评卷阶段
n 多角色管理策略,分为系统管理员、科目组长、题组组长、评卷员等
n 实现双评、三评主观题评分误差控制方法
n 利用分数柯斯分布一致性校验、个人复评一致性方法以及抽查方式监控每位教师评分质量
n 参考试卷(Anchor Paper)应用
n 自定义不同类型的试卷标志及处理方法(如图像异常、优秀试卷、疑似雷同等)
n 疑似雷同侦测
n 无限数量返回重评
n 考生信息保密
n 评卷信息查询打印
n 常用统计分析指标
7.6.3体系结构
该项目系统采用B/S结构设计,并建立在Windows Server的安全体系之上。以下是其体系结构图:
7.6.4业务模型
相比传统手工阅卷,在网上阅卷模式中,客观题由扫描系统自动识别选项(如A,B,C等等),主观题则由扫描系统采集图像,由评卷员通过计算机显示的主观题图像进行评阅,并将分数直接输入系统中,从评分本身来讲,与手工评卷没有什么不同,但从整个考试管理及评测角度讲则是完全不同的,那么实现网上阅卷的目的是什么呢?具体与我们需要了解的方面有:
l 通过计算机系统后台的实时数据分析,通过给定的逻辑策略处理可能存在的人为评分误差;
l 通过合适的评分结果测定方法,可以实时监控评卷员的评分质量如何;
l 可以实现远程评卷、多单位多角色协同工作、评卷过程计算机化管理,同时不失安全性。
l 采集最小至各题给分点分值,便于做各种测量统计;
l 自动合分,快速统计分析并给出结果;
1、试卷结构
试题:试题是卷面中的每道大题;
小题:小题是每道试题中所含的具有固定分值的、并且需要统计的最小部分,如果试题中没有这样的小题,可以忽略小题的数据;
题组:为了评卷的需要,将一道或多道具有相同评分方式(即有相同的误差控制方式)试题列为一组,这是评卷任务分发的最小单位。
2、评卷人类别
根据阅卷的流程和阅卷的模式,一般将教师分为评卷员、题组长、科组长三种身份:
评卷员:整个系统中权限最小者,只能进行评卷及基本的查询工作。
题组长:也可能承担评卷任务,但主要负责处理试题的终评试卷的评判和监控试题评卷的质量,以及试题评卷进度的监控。
科组长:评卷人中权限最大,除了监控整个科目的评卷质量和评卷进度,同时还可对试评试卷、参考试卷以及评卷员分工等工作进行管理。
对于大型的考试(如:教育局统考、中考、高考),同一道试题可能还会安排多个题组长,由每个题组长管理若干个评卷员进行评卷。对于小型的考试(如:校级考试),又可能将题组长和科组长合二为一了。
3、评卷的阶段
参照过去人工评卷的方法,我们将系统按照三个阶段来评卷,并且在计算机系统的控制下,过去很多好的评卷思想由于客户条件无法实现或者不能很好的实现,现在可以得到充分利用,不仅能够提高评卷质量,更能够促进和考察评卷员的评卷质量。
试评阶段:将部分或全部试卷分发给评卷员评卷,主要是同一评卷员对评分标准的掌握尺度。试评试卷来自于考生的正常答卷,对其评卷不影响考生的最终成绩。
正评阶段:由系统将考生试卷随机地分发给评卷员,系统经过误差控制,产生考生的最终成绩。
检查阶段:由评卷组长随机对某试题或某评卷员的评分结果进行检查。考察各教师的评分稳定性。该阶段实际上是与正评阶段同时进行的。
另外还应该考虑一种训练模式的试评需求,即指定若干试卷(如:100份)作为训练试卷,“专家”(一般为学科负责人或教研员)事先对这些试卷进行评分,然后再由评卷员对这些试卷进行评分,只要评卷员评完这些试评试卷并且与“专家”的评分比较吻合(可以设定一定的比较规则),才可以进入正评阶段评卷。如果评卷过程中,监控到某评卷员的评分标准不统一,还可以让该评卷员重新经历试评训练。
评卷流程图如下:
4、评阅的试卷类型
试评试卷:试评试卷是试评阶段评阅的试卷;从考生的实际答卷中抽取;帮助评卷员理解、掌握评分标准。
标准试卷:由组长指定的比较典型的分值非常清晰的试卷;供评卷员在评卷阶段参考,也叫参考试卷;帮助评卷员再次掌握评分标准。
正评试卷:考生正常的考试试卷;在评卷员的评卷阶段使用;由系统自动随机分发。
5、参考试卷
也可称之为评分参考试卷,是指有权限指定参考试卷的评卷员或组长事先或评卷过程中挑选的一些典型的试卷试题,评阅过后供所有评卷员在评卷过程中参考、学习其评分方法,以此加强评卷员对评分尺度的把握。
参考试卷可以在评卷之前选定,也可以在评卷过程逐步添加。
6、试卷类型总结
综上所述,试卷可以分为试评试卷、参考试卷、正评试卷,这些试卷都来源于扫描的实际试卷数据,试评试卷实际上是从正评试卷中抽取出来临时用作他途,对这些试卷是不记录其得分的,参考试卷仅仅是评卷员评分的参考例子,只有作为正评试卷才记录其得分。
7、试卷标志
试卷标志是指评卷员评卷过程中,对符合标志要求的试题组做个标记,以便相关人员对这些试卷分类处理。按通常习惯称为试卷标志,实际上是对试卷中的某个题组做的标志,与其它试题无关。
注意:由于评卷是以题组为单位而不是以试卷为单位,故标记仅对试卷的某个题组有关,而与其他题组无关。
标记直接对应到题组中的具体某一个试题:
(1)题组按照整屏模式显示时,各试题分别用不同的容器竖直排列在一起显示,用不同的容器分别显示不同试题,可以确保直接对某一个试题作标记,实现标记可以细化到对应试题
(2)分屏显示时作标记就可以直接对应试题
常见的试卷标志:图象异常、答错位置、优秀试卷、空白试卷、典型试卷、难以评分、字间距小、字体太小、字迹潦草、笔迹太轻
8、重评管理
重评即为重新评阅试卷题组,在某些情况下可能需要对部分或全部题组重新评分(必须是按题组,而不是试题),要重新评分,需通过以下步骤:
l 根据特征查找所有要重评的题组;
l 清除这些题组已评分数、小题分、批注、标志等
l 重评时只清除正评的结果,不涉及试评
7.6.5误差控制
根据实际情况,在误差控制模型中,试题分为两大类:无误差控制试题和有误差控制试题。
有误差控制试题:试题的分值比较大、答案多样、评卷的人为误差比较大,例如作文题。这些试题需要经过几个评卷人(一般情况下最多有4个评卷人)的评分,系统根据误差控制理论,产生考生的最终成绩.。
无误差控制试题:试题的分值小、答案比较确定、评卷的人为误差比较小,例如填空题。这些试题系统只需要一个评卷员进行评分就给出考生的最终成绩。
上图为三评误差控制模型。其设计原理为:对设置了三评的答卷/答题,系统首先随机将答卷分发给两个评卷教师,这两个评卷教师评阅完成后得出X1,X2两个评分,此时系统将对【X1-X2】的绝对值进行比较,如其绝对值小于容许的误差值,则系统将自动取X1,X2的平均值作为该考生的得分;如超出容许的误差值,系统将把该考生的答卷自动分发给第三人评卷人。第三评卷评阅完成后,得到X3的评分,此时系统对三人评分值的两两之差进行比较,如果它们的差值在容许误差范围内,则系统将取三位评卷人员的评分中,差值最小的两个评分的平均值作为该考生的得分,否则系统将该考生的答卷转发评卷组长进行终评。
7.6.6质量控制
在评卷过程中,虽然通过误差控制可以有效地抑制了考生成绩的评判误差,但是所有评卷员在评卷中对标准掌握得是否一致,每一个评卷员在评卷过程中对标准的掌握是否一致,均影响着评卷的质量、速度和考生的成绩。系统通过以下两个控制来进一步抑制误差、提高阅卷的整体质量、效率。
1、评卷员之间一致性控制
控制每个评卷员之间的一致性。使用的数学模型为柯斯检验法。简述如下:首先计算出整体评卷的分数-人数比曲线,再计算评卷员个人的个人分数-人数比曲线;这时比较两个曲线的拟合程度,如果超过设置的允许值,则认为评卷有误差,否则就没有误差。示意图如下:
柯尔莫哥洛夫-斯米尔诺夫检验具体算法如下:
(1)设该主观题满分为S。统计数据如下:
各分数点上的人数 1 2 3 S | 合计 | |
某阅卷员 | m1 m2 m3 …… mS | m |
其它阅卷员 | n1 n2 n3 …… ns | n |
(2)计算累计比重和累计比重差的绝对值
分数 | 某阅卷员 | 其他阅卷员 | 累计比重差的绝对值 | ||
考生 人数 | 考生人数累计比重 | 考生 人数 | 考生人数累计比重 | ||
1 2 3 . . S | m1 m2 m3 mS | p1= m1/m p2= (m1+m2)/m p3= (m1+m2+m3)/m …… pS= (m1+m2+…+mS)/m | n1 n2 n3 nS | q1= n1/n q2= (n1+n2)/n q3= (n1+n2+n3)/n …… qS= (n1+n2+…+nS)/n | |p1 -q1| |p2 –q2| |p3 –q3| …… |pS –qS| |
合计 | m | n |
(3)计算Z值
令D =上述表中的“累计比重差的绝对值”的最大值
计算
Z =
(4)给定显著水平1>α>0,根据柯尔莫哥洛夫-斯米尔诺夫分布表,取得临界值λ。
Q(λ)=1-α
取值范围为1>α>0或 0.32 <λ< 2.31, 这里取默认值λ=1.36 或α= 0.05。(λ的默认值还应该在实际当中不断修正)
(5)结论:
当Z >λ,则认为某阅卷员与其他阅卷员的评分分布之间有显著偏差;
当Z <λ,则认为某阅卷员与其他阅卷员的评分分布之间没有显著偏差;
为计算方便,其他阅卷员各分数考生人数累计比重可按照全体阅卷员各分数考生人数累计比重计算。
2、评卷员个人一致性控制
个人一致性控制主要通过个人复评试卷来检验评卷员在评卷中的稳定性。系统每隔一段时间(可以定时,可以随机,随机时要保证一定间隔)自动在评卷员已评试卷中抽取一定数量的个人复评试卷分发给评卷员进行评卷。
个人复评主要是检查评卷员在不同的时间对同一份试卷评判是否一致,并将比较结果写入统计结果库,以此来检查评卷老师在评卷过程中的“稳定性”。
其中个人复评的结果分数不作为有效评分。
7.6.7模块结构
7.6.8系统流程
系统管理流程图:
评卷过程数据流程图:
服务器控制数据流程图:
7.6.9系统特点总结
1、灵活性、广泛性
系统从实现功能、角色策略和评分控制机制来说,完全实现甚至超出了目前中高考评卷系统的功能要求,同时,作为一个稳定的软件系统进一步保证了不同规模考试评卷的成功。
2、安全性
系统在数据安全方面,系统的数据传输采用SSL加密技术、客户端采用数字证书、服务器Windows安全认证策略以及数据备份策略共同保证数据的安全性。
3、有效性
系统所采用的算法模型均是经过大量的数据实验、实际应用分析和经典的数学模型推导而来,都是在高考计算机网上阅卷中成熟应用的,从而保证了系统队误差的有效控制。
7.7成绩分析及监测
7.7.1概述
在完成网上评卷后,我们可以得到全部考生的各题、各小题的分数值,基于这些数据,可以得出很多测量指标。
统计分析子系统是根据《教育测量学》指标体系及实际需要开发的考试成绩统计分析与评价系统。它通过从系统合并生成的考试成绩数据(科目分、题目分、小题分)的统计分析,可实现对当次考试结果及考试本身进行科学的分析与评价。它既可实现对个人、班级、年级、学校乃至地区考试成绩的分析评价,也可实现对科目、题目乃至小题的考试情况的详细分析,而且还能从横向比较、纵向分析对考试结果进行全面的剖析。为教育局和学校提高教学质量和管理水平提供了科学决策依据。
7.7.2系统功能
统计分析子系统提供考试的详尽分析报告,内容涵盖了一次考试或多次考试的各类分数统计及教育测量指标。其特点与功能如下:
n 自动整理并校验评卷子系统产生的各科评卷数据;
n 自定义统计分析参数;
n 自动报表生成器,可转存为多种文件格式;
n 统计数据转存;
n 多种固定报表类型。可即时选择统计范围;
n 多种自定义格式报表类型,根据需求生成不同数据的报表;
n 支持不同生源(地区、学校)的对比分析。
7.7.3数据应用范围
序号 | 部门或人员 | 主要应用范围 |
1 | 教育局领导 教育科等部门 | (1)掌握全市、区县、学校教学情况,指导教学改革; (2)对各校教学质量和加工能力等进行评价; (3)中、高考预测。 |
2 | 教研室 (学科教研员) | (1)掌握全市、区县、学校教学情况,参与指导教学改革; (2)对各校教学质量和加工能力等进行评价; (3)中、高考预测。 (4)诊断试卷质量、分析各学科、题型、知识点的教学; (5)掌握各学校知识点教学质量,组织教学、教研交流; |
3 | 校领导 教务处 | (1)了解全市(或区县)及本校教学质量,制定本校教改方案; (2)掌握本校各班级、教师教学质量和加工能力,并进行评价; (3)中、高考预测; |
4 | 校教研组 | (1)了解全市(或区县)及本校教学质量,掌握本校各班教学情况; (2)掌握本校知识点教学质量,组织教学、教研交流。 |
5 | 班主任 | (1)了解全市(或区县)及本校教学质量; (2)掌握本班的各学科教学情况,及与其他班级的对比情况; (3)掌握学生个人详细分析,了解学生各学科学习情况; |
6 | 学科教师 | (1)了解全市(或区县)、本校在本学科的教学情况。 (2)了解本学科各知识点教学情况,并对本班的教学进行分析、定位、诊断与评价。 |
7 | 学生与家长 | 掌握各学科、各知识点的水平和发展变化,调整和优化学习方法。 |
7.7.4统计指标分类
平台的统计指标是根据《教育测量学》、《教育统计学》等学科为依据研发的,具有科学的理论基础。在软件的发展过程中,我们还借鉴了各地学校经过多年实践证明确实行之有效的一些的经验做法,共同形成了今天的指标体系。
(一)、《教育测量学》的指标
难度、区分度、信度、效度
(二)、《教育统计学》的指标
1、数据整理:(按种类、顺序、频率)
人数、优秀率、良好率、及格率、低分率、排名、最高分、最低分、分数段、名次段、成绩等级
2、集中量:平均分、中位数、众数、加权平均分
3、差异量:标准差、差异系数
4、相对量:百分等级、Z分数、T分数、标准分
5、相关量:相关系数、回归分析(变量)
(三)、其他理论或民间指标
达标平均分、达标贡献值、上线分、上线有效分、上线率、命中率、注意系数(s-p表)、超均率、比均率、综合水平
7.7.5典型指标
1、信度
(1)、含义
信度指的是测量结果的稳定性或可靠性的程度,亦即测量的结果是否真实、客观地反映了考生的实际水平。
(2)、作用
信度是教育测量的必要条件。一、它能给教师和教育工作领导者提供可靠信息,为他们的教育预测和决策提供依据;二、它使教师对学生评价变得客观可靠,也使学生对自己的认识更加符合实际情况,从而有助于改进教与学的方法;三、它有助于提高教师工作效率,只需要进行一次测量即可获得满意结果。
(3)、计算方法
信度分为重复信度(再测信度)、复本信度、折半信度(分半信度); a系数(克龙巴赫)等。
不同的信度指标有不同的计算方法。从我国现行的教育体制上看,我们认为采用a系数(克龙巴赫)的计算方法进行信度指标的计算是一种可行且有效的方法。
2、效度
(1)、含义
效度指测量结果的准确性和有效性的程度,亦即测量是否达到预期的目的。
(2)、作用
一、 判断测验能达到预期目的的程度。二、检验测验工具质量优劣的手段。
(3)、计算方法
效度分为内容效度、效标关联效度、结构效度等。
内容效度和结构效度都没有简单有效的定量分析方法。效标关联效度又称统计效度或经验效度,它是以测验分数和效标之间的相关系数来表示。
3、难度
(1)、含义
难度指测验试题的难易程度。
(2)、作用
试题的难度既可反映试题本身的复杂程度,又可反映教师与学生之间的教与学的状况。同一试题,在不同对象、不同环境中使用,所得的难度值不一定相同。
(3)、计算方法
难度实为考生的平均分得分率(用P表示)。
(1)客观题难度计算:P = R/N
(2)主观题难度计算:P = (PH + PL)/2
(3)通用的难度计算:P = 得分率
P值越大,试题越容易,相反,P值越小,试题越难。
4、区分度
(1)、含义
区分度是指测验对考生实际水平的区分程度。具有良好区分度的测验,实际水平高的学生应得高分,水平低的学生应得低分。所以,测验的区分度又叫鉴别力。
(2)、作用
测量专家们把试题的区分度称为测验是否具有效度的“指示器”,并作为评价试题质量,筛选试题的主要指标依据。
(3)、计算方法
D = Ph - Pl
即:试题区分度 = 高分段学生得分率 - 低分段学生得分率
5、标准差
(1)、含义
标准差是反映一个群体的考生分数之间离散程度的指标。可以理解为学生得分与群体平均分平均相差多少分值。
(2)、作用
它与平均分一起使用,决定了某次考试分数分布情况。S值越大,表示部分考生离平均分的“差距越大”,也就是分数分布较广;S值越小,则分数分布较窄或说“集中在平均分附近”。
(3)、计算方法
6、百分等级
(1)、含义
百分等级指某数值在次数分布中所处的地位,可用百分等级来表示,也称为百分位,百分等级反映的是某个观测分数以下数据个数占总个数的比例的百分数,在0~100之间取值。
(2)、作用
体现学生测验分数在群体中所处的位置,一定程度上可以代替排名使用。
(3)、计算方法
计算方法是把考生各科的原始分在全体考生中从高到低排序,算出每一个原始分以下的考生占全体考生总数的百分比,这个百分数就称为百分等级。
7、超均率、比均率
(1)、含义
超均率、比均率类似,是一种相对量指标。反映某个分值超出(或低于)整体水平的程度的数值。
(2)、作用
超均率、比均率常用于对评价对象进行纵向比较,体现其发展趋势。
(3)、计算方法
超均率 = ( 评价对象平均分 – 全体平均分 ) / 全体平均分 * 100%
比均率 = 评价对象平均分 / 全体平均分 * 100%
8、达标平均分
(1)、含义
根据测验总分预期实现目标(如上本科最低录取分数线分值),按各科试题难度系数的比例分配计算出的各科目标分数值。
(2)、作用
用于评价各学科分数是否达到预期目标值,可作为学生(或教师、班级、学校)各学科是否达标的参考。
(3)、计算方法
9、达标贡献值
(1)、含义
在某次考试中,针对某个实现目标,某个评价对象(学生、教师、班级、学校)的各学科成绩所发挥作用的大小,则为该对象该学科的达标贡献值。
(2)、作用
贡献值成功地把某群体在此次考试中各学科所作贡献大小量化了,同时也成功地把每个考生各科目贡献大小量化了,它具有可比性,因而具有评价作用。
(3)、计算方法
10、注意系数
(1)、含义:
根据“S-P学生问题分析理论”,针对学生或试题得分情况分析其异常状态的指标。针对学生的指标称为学生注意系数,针对试题的指标称为试题注意系数。
(2)、作用:
一、判断学生是否存在异常现象,即是否存在较多在具备作答能力的试题上犯错误的现象;
二、判断试题是否存在异常现象,即是否存在较多具备作答能力的应试者在该试题上犯错的现象。
(3)、计算方法:
学生注意系数(CSi)=
题目注意系数(CPi)=
7.7.6统计报表的分类
平台可以自动生成两种类型的分析报表,即:“统计报表”与“分析报告”。
“统计报表”是根据分析目的与使用用途划分的Excel电子报表,除了可以满足各个层面分析的需要,也可作为学校个性化分析的原始数据材料。
“分析报告”是根据使用者的角色生成的,体现该使用者从各个层面、各个角度去分析、评价监测对象。
(一)、统计报表
1、全区报表
(1)、整体(根目录)
学生成绩表、学生分组分析表、平均分对比表、各科综合表、学科分析表、上线情况表
(2)、学科(学科目录)
小题分表、小题分析表、小题平均分对比表、小题掌握情况表、题组分析表(学科题组分析)、分数段表、综合指标表、分数段对比表、名次段分布表、基本指标表
2、学校报表
(1)、整体(学校根目录)
学生成绩表、各科综合表
(2)、学科(学校中的学科目录)
小题分表、小题分析表、学生题组分析表、学科题组分析表、分数段表、分数段对比表
3、班级报表
(1)、整体(班级根目录)
学生成绩表、各科综合表
(2)、学科(班级中的学科目录)
小题分表、小题分析表、分数段表
(二)、分析报告
角色 | 分析报告 |
学生、家长 | 学生分析报告、学生复习建议、学生素质评估、 学生错题集、学生答卷图像、学生历次成绩跟踪 |
任课教师、班主任 | 班级分析报告、班级成绩对比、学生进退布预警、 学科异常情况分析、标记试卷讲评、教师素质评估、 班级历次成绩跟踪、班级分数段分析、班级临界生分析、 学科成绩分析、知识点分析、题型分析、试题分析 |
校长、教务主任 | 学校分析报告、学校成绩对比、各班成绩对比、 学校历次成绩跟踪、学校分数段分析、学校名次段分析、 学生进退步预警、教师进退步预警、学校临界生分析、 尖子生和学困生分析、考试作答情况分析、学校档案统计 |
局长、教研主任 | 考试分析报告、各校成绩对比、高考成绩分析、中考成绩分析、 考试质量分析、尖子生和学困生分析、评价学校加工能力、 评价教师加工能力、归因分析、档案统计 |
7.7.7数据的使用
平台提供了全方位、多层次的统计报表和分析报告,根据分析对象的不同,分别可以从全局、学校、班级、学生等层面进行成绩分析与教学诊断。
(一)、从考试全局看
1、考试质量:
(1)、试卷质量:报表——学科分析表、考试质量分析报告
关注——难度、区分度、信度
(2)、试题质量:报表——小题分析表、学科分析报告、考试质量分析报告
关注——难度、区分度、选择率
2、考试结果:
(1)、整体情况:报表——基本指标表、分数段表、各科综合表、考试成绩分析报告
关注——总分、科目分、分数段、综合性指标
(2)、学科情况:报表——小题分析表、学科分组分析表
关注——试题相关指标、知识块相关指标
(3)、学校对比:报表——平均分对比表、分数段对比表、名次段分布表、综合指标表、各校成绩对比报告
关注——平均分、排名、优秀率、及格率、低分率等等
(4)、预测划线:报表——分数段表(1分1段)、上线情况表
关注——总分上线分数、科目达标分数
(二)、从学校层面看
1、整体情况:报表——基本指标表、分数段表、各科综合表、学校成绩分析报告、考试作答情况分析
关注——总分、科目分、分数段、综合性指标、与常模比较(全体)
2、学科情况:报表——小题分析表、学科分组分析表
关注——试题相关指标、知识块相关指标、与常模比较(全体)
3、横向对比:报表——平均分对比表、综合指标表、学科分组分析表、各校成绩对比
关注——总分对比、科目分对比、综合性指标对比、知识块对比
4、教学管理:报表——综合指标表、上线情况统计表
关注——达标贡献值、双上线率
5、历次对比:关注——超均率、比均率、名次
(三)、从班级层面看
1、整体情况:报表——基本指标表、分数段表、各科综合表、班级成绩分析报告
关注——总分、科目分、分数段、综合性指标、与常模比较(全体、学校)
2、学科情况:报表——小题分析表、学科分组分析表、异常情况分析
关注——试题相关指标、知识块相关指标、与常模比较(全体、学校)
3、横向对比:报表——平均分对比表、学科分组分析表、各班成绩对比
关注——总分对比、科目分对比、知识块对比
4、教学管理:报表——综合指标表、上线情况统计表
关注——达标贡献值、双上线率
5、历次对比:关注——超均率、比均率、名次
6、教学问题:报表——班级分析报告
关注——注意系数
(四)、从学校分组层面看
关注——总分比较、学科比较、综合性指标比较、知识块比较
(五)、从学生层面看
1、整体情况:报表——学生成绩表、学生分析报告
关注——总分、科目分、排名、上线情况、与常模比较(全体、学校、班级)
2、学科情况:报表——小题分表、学科分组分析表、学生分析报告、错题集、复习建议
关注——试题情况、知识块情况、与常模比较(全体、学校、班级)、查漏补缺
3、学习问题:报表——学生分析报告、错题集
关注——达标贡献值、注意系数
7.8素质评估
7.8.1概述
除了考试成绩之外,从日常教学活动中获得学生的平时表现,老师的教学情况等,都是教育质量评估的重要依据,而通过不记名投票方式进行的调查问卷则是实现对日常教学活动评估的重要手段。
素质评估子系统主要是为学校或教育局实现对学生、教师进行教学评估而设计的功能。评估内容分为针对教师的评估、针对学生的评估。学校或教育局可根据实际需要灵活设置:评估内容、评估方法、评估结果处理等。
学生评估:学生是教学活动的主体,对日常教学活动的评估最有发言权,且学生人数众多,具有广泛性,因此,学生评估应作为日常教学活动质量评估的主要依据。学生评估每学期进行一次,主要以各任课教师或班主任为主体进行测评。
教师评估:教师评估主要是对任课教师进行课堂教学、课后辅导、教学态度、教学效果、日常工作等情况的评估,由老师所任教班级学生或家长对其进行比较评估,主要以学生问卷调查的方式进行。
归因分析:将影响学生学习的各种因素编写成调查问卷,向学生开展问卷调查,再将问卷调查数据与学生学习成绩进行归因分析,从而寻找影响学生学习的关键因素所在。
7.8.2评估表格和报表
各种评估表格可以根据学校情况自行设定调整,以下列出部分供参考表格。
学生基本素质评价表 | ||||
(20 ~20 学年第 学期) | ||||
被评学生: | 评价教师: | |||
评估项目 | 要素 | 评价内容 | 权重 | 评分 |
道德修养 | 文明礼貌 | 对师长、同学的态度….. | 0.1 | |
诚实守信 | 诚信表现,考试守纪… | 0.1 | ||
遵纪守法 | 遵纪、违纪情况 | 0.05 | ||
社会责任 | 关心社会……的表现 | 0.05 | ||
公民意识 | 遵守公共秩序、爱护… | 0.05 | ||
文化素养 | 知识结构 | 各学科学习情况,….. | 0.05 | |
学习方法 | 学习方法与策略….. | 0.05 | ||
学习能力 | 善于思考,合作学习….. | 0.05 | ||
学习态度 | 求知欲及兴趣表现….. | 0.05 | ||
综合实践 | 能力技能 | 联系社会、生活、学习 | 0.05 | |
活动次最 | 参加社会实践、社区….. | 0.05 | ||
成果表现 | 以写研究报告、论文….. | 0.05 | ||
身心健康 | 体质健康标准 | 体质健康标准是否合格… | 0.05 | |
体能素质标准 | 体能素质是否符合要求… | 0.05 | ||
心理健康水平 | 反映心理健康的情况 | 0.05 | ||
艺术素养 | 审美与情趣 | 审美表现,艺术感受……. | 0.05 | |
艺术表现能力 | 参加各种艺术活动的情况 | 0.05 | ||
艺术水平 | 掌握各种艺术活动情况 | 0.05 | ||
合 计 | 1 |
课堂教学教师评学表 | ||||
(20 ~20 学年第 学期) | ||||
被评教师: | 所在班级: | |||
评估项目 | 序号 | 评估指标 | 权重 | 评分 |
学习目标 | 1 | 学习目的明确,学习态度端正 | 0.1 | |
学 风 | 2 | 到课率高,迟到早退现象少 | 0.1 | |
3 | 遵守课堂纪律,听课时精神集中 | 0.05 | | |
4 | 能够积极提问并讨论,师生之间形成良好互动 | 0.05 | | |
5 | 遵守考场纪律,无雷同卷,卷面反映该班级学生总体上掌握了教学内容 | 0.1 | | |
学习过程 | 6 | 提前对所学课程进行预习,积极阅读指定的参考文献 | 0.05 | |
7 | 坚持课后复习,按时保质完成作业 | 0.05 | | |
8 | 能够跟随教师的思路,理解授课内容并记笔记 | 0.05 | | |
9 | 学习上能循序渐进,善于提出问题,敢于质疑,自学能力强 | 0.05 | | |
学习效果 | 10 | 掌握课程所传授的知识与技能 | 0.05 | |
11 | 理解能力、独立思考、分析和解决问题等能力 | 0.05 | | |
12 | 思想道德水平和文化素养 | 0.05 | | |
13 | 探索意识、创新意识及创新能力 | 0.05 | | |
总体评价 | 14 | 本学期对该班级学风和成绩的综合评价 | 0.2 | |
合 计 | 1 | |
l 教师评估题卡样式:
l 教师评估报表:
7.8.3问卷调查和归因分析
l 问卷调查表样式:
l 归因分析报表样式:
7.9题库应用
7.9.1概述
“网上阅卷与分析评价平台”是一个面向基础教育的教育测量、教育诊断与教育评价的信息化项目。功能应用包括:题库、设计题卡、考务管理、扫描识别、网上阅卷、统计分析、错题集、在线考试、素质评估、跟踪监测、教学评价、信息平台等。各种应用模块既是整个平台有机的组成部分,也可以相对独立地使用。
题库子系统包括题库管理、试题管理、试卷管理、在线考试和训练等功能模块。
题库子系统具有如下特点:
1、支持知识点编码的自主维护,提供预先定义好的知识点树形列表,也可以由用户自行编辑、自行维护。
2、支持题库资料的基本定义,支持题库的分级管理。
3、支持试题批量导入。用户可批量导入已在word文件中编写好的试题,图片、文字、公式均可方便导入。
4、支持试题属性的灵活编辑功能。用户可以编辑试题所属的知识点、认知层次和能力、题型、难度、客观题选数和答案、试题解析、分值等。
5、支持人工组卷、策略组卷功能。人工组卷由教师从题库中人工挑选试题生成试卷,策略组卷即按照设定的组卷策略抽取试题创建试卷,比如知识点、题型、题数、难度等等,试卷生成后,仍然可方便地进行试题顺序调整、替换。
6、支持从试卷直接生成答题卡的功能。答题卡生成后可以人工再进行调整,并可以以Word文件形式下载下来,答题卡格式符合网上阅卷系统扫描识别的要求。
7、提供学生自助训练的功能,学生可以选择相应的考试、学科进行针对性的训练,可以自由选择训练的知识点、难度、题量等。
7.9.2功能描述
1、题型设置
支持填空、判断、单选、多选、名词解释、简答、论述、作文等多种题型,针对每种题型的特点提供相应的编辑方式。支持试卷中各种题型的题量由命题教师灵活设定。
2、题目设置
题目包括知识点、认知能力、题型、难度、客观题选项和答案、试题解析、分值等属性,试题的浏览可以根据这些属性进行任意组合查询。试题的编辑可以像在Offic Word中一样任意排版,支持图片的插入。支持从其他数据源批量导入试题。
3、命题组卷
试卷是试题的组合,一份好的试卷应该有合理的知识分布、题型分布、难度分布。有经验的教师可以采用人工组卷方式命题组卷,可以根据试题的不同属性到题库中挑选符合要求的试题加入到试卷中。对于想快速组卷的教师可以采用策略组卷,策略组卷可以按照设定的组卷策略自动抽取试题创建试卷。试卷生成后,可方便地进行试题顺序调整、替换。
4、考试和练习
系统分考试和练习两种模式,考试模式,考生针对某份试卷作答,试卷由教师预先设定,包括试卷基本设置、组织范围和考试时间等。根据试卷设定的答题时间,如果考生答题时间到了,就会自动提交考卷。在练习模式,学生可以根据每次考试的知识点、难度、题型等进行针对性的训练,并且可以预先设定练习的时间。
5、评卷
对于客观题(单选题、多选题、判断题),系统可以实现自动评卷。对于主观题,可以由具备相应权限的老师进行批改。试卷的批改分为课程模式和班级模式,课程模式是按课程、按试卷进行批改,班级模式是按班级的次序进行批改,批改过程中可以设置考生重新考试。
6、对试卷的处理
在考试时,系统可以随时保存考生目前的答题情况,以防机器发生故障,重新启动或中途换机,都可以恢复考生的答题情况。
7、用户管理
分参考学生管理、教师阅卷管理。每次考试可以设定参加考试的学生范围,同时可以设定该次考试参与阅卷的教师以及教师批改的试卷及范围。
8、成绩的统计与查询
评卷完成后可以对考试进行统计分析,对教师生成相应的统计报表,对学生提供相应的试卷、答案和试题解析的浏览,并提供基本的成绩查询。
7.10信息共享与发布
1、能够自动检测并提示系统平台有新版本,支持一键下载更新。
2、支持向云端备份用户资料,当重装系统或需要恢复数据时能够一键恢复备份的用户资料。
3、支持用户在线提交自定义报表需求,定制完成的自定义报表可以自动下载、配置和使用。同时支持在报表“超市”中查找、下载全国各地用户定制的报表样式使用。
4、支持与微信公众号绑定,用户可以通过微信批量向家长推送成绩查询信息,家长也可以自行通过微信查询成绩。
5、支持支持手机客户端的安装,学生、家长可以通过手机APP查询成绩,教师可以通过手机APP查询成绩、网上阅卷等。
八、项目本期投资概算
8.1 总投资预算
总预估费用:XX万。
8.2 分项预算汇总表
序号 | 名称 | 规格、配置 | 单位 | 数量 | 单价(元) | 金额(元) | 备注 |
1 | 网上阅卷与分析评价平台 (教育局版) | 1300并发用户 | 套 | 1 | 主观题网上评卷,数据统计分析管理、发布和查询等功能的软件核心系统。 | ||
2 | 扫描识别子系统 | 标准版 | 套 | 11 | 网上阅卷与分析评价系统的子系统,实现客观题、考号的自动识别,与扫描仪配套使用完成数据的采集工作。 | ||
3 | A3型高速文档扫描仪 | 扫描速度为: A4纵向70页/分钟; A4横向90页/分钟 | 台 | 11 | 由于考生答卷规格的要求,需要的高速扫描仪的规格必须为A3幅面的,即扫描的最大篇幅为A3规格。 | ||
4 | 阅卷服务器 | CPU : 32核 内存:32G 硬盘:1TB | 台 | 3 | |||
合计:元整 |
备注:XX城区计划设4个扫描点;XX镇设2个扫描点;而XX镇、XX镇、XX镇、XX镇、XX镇各设1个扫描点,这样共计11个扫描点。
九、项目实施及管理
9.1阅卷系统环境
在系统环境和硬件配置中,我们是以考试规模而确定的较为合理的配置方案,既非最小配置方案也非最高配置方案。
【1】题卡扫描环境
答题卡扫描地点首先必须与保管试卷在同一地方,如果能与阅卷服务器在同一处更好,否则必须考虑扫描后的电子数据如何转移到阅卷服务器中。
扫描数据包括图像建议采用单独的扫描服务器中,按批次复制到阅卷服务器中,这样不仅完成了对原始扫描数据的备份工作,同时又不影响阅卷服务器带宽。
n 硬件配置:
Ø 扫描服务器:易采用专用服务器,重点在于大容量高性能硬盘,要求Windows Server操作系统;
Ø 扫描工作站:普通PC即可,重点在于主频要高,内存要大,要求Windows XP以上操作系统;
Ø 校对工作站:普通PC即可,要求Windows XP以上操作系统。
n 网络配置:100M或以上交换网络。
【2】网上评卷环境
尽管网上阅卷系统支持基于互联网的应用环境,但考虑到评卷速度、人员管理以及安全等方面的原因,仍建议在一个或几个集中环境中进行评卷。
n 硬件配置:
Ø 阅卷服务器:普通服务器,建议SCSI或SATA硬盘,8G以上内存,安装Windows Server2003或以上服务器操作系统,MS SQL Server2005或以上数据库系统;
Ø 阅卷工作站:普通PC,要求Windows XP以上操作系统。
网络配置:100M或以上交换网络, 交换机到服务器建议1000M。
9.2考务管理
网上阅卷的顺利进行,也需要考务方面密切配合,这里列出了大规模统考的考务方面着重注意和安排的事项,一般性的考试、测验不用那么严格,可酌情灵活调整。
【1】答题卡制作印刷
由于可以自主设计印刷,同过去制卷管理区别不大,重要的是答题卡中给各主观题留有足够的答题区域,应由相关人员确定,这是很重要的一点,这在某些省份初次网上评卷中时有发生。
【2】印制条形码
我们建议在统考中,考号可仿高考、中考,全部采用条形码的方式,而不使用OMR方式,这样不仅提高识别的准确性,减少人为填涂错误,而且提高了处理速度。
条形码的印制也是很重要的一个环节,通常考虑采用激光打印机直接打印在不干胶纸上,然后粘贴在答题卡上,但实际上,激光打印机采用墨粉加热定型,条形码很容易被汗渍损坏,而且有时因为粘贴不好,揭起后在粘贴,这时条形码很容易被损坏,因此我们在高考项目中实际采用以下方法:
答题卡条形码采用不干胶条,使用树脂色带专用条形码打印机打印,不干胶纸采用裁切好普通不干胶纸卷,这样制作的条形码不易被汗渍损坏,也可以多次粘贴,制作成本也不高。
统考涉及范围较小,考号条形码可以由教育局统一打印:
Ø 打印内容:条形码编码+考生号+姓名+考场号(考场号主要用于装袋)
Ø 发放流程:按考场顺序批量打印条码 —〉将条形码随答题卡一同装袋 —〉在考试现场由监考老师在开考前贴好所有条形码 —〉提示考生检查条形码是否对应
【3】缺考与违纪
对于缺考和违纪的登记,除原有在考场记录中仍须记录外,还要用以下方式做标记:
通常在答题卡上设计缺考和违纪两个OMR涂点,条码仍由监考老师贴好,并填涂相应的涂点;另一个方法是将缺考的条码由监考老师贴在题卡袋上,并在缺考的题卡上填写好缺考考生的考号和姓名。
【4】答题卡的回收
尽管扫描系统在扫描时可以鉴别题卡顺序和题卡正反面是否正确,但为了提高扫描阶段的效率,答题卡在各考场回收时,监考老师必须加以整理,装袋前,要将答题卡按照座位号依次叠放,并注意正反顺序不要放错,将空白卡放在最后,如果答题卡包括多页,那么每份答题卡的页序也应整理正确。
封袋时,注意胶水不要滴到答题卡上,也不要使答题卡粘在袋子里边。
【5】考生名册数据
考生名册数据是扫描过程判别考生号的唯一依据,也是网上阅卷过程查询考生和侦测雷同的依据,至少要包括考生号,姓名,考场号和座位号,并且只包括报名参加考试的考生。
9.3试卷扫描
【1】试卷的保管
由于气候的问题,试卷很容易潮湿,且压在一起叠放,容易造成扫描重张,大大降低扫描效率,因此在扫描前的试卷存放室应考虑防潮除湿的问题,否则只能在扫描前用空调简单除湿,但效果不好。
【2】试卷的出入库
试卷出库扫描,以及扫描后入库,都必须做好登记,并且将入库后的试卷按考点放置并记录放置位置,万一需要查询时能迅速找到该考场试卷。
【3】扫描
一般采用按考场(袋)为单位扫描,有时为加快扫描速度,也可以以三袋为单位扫描,每台扫描仪应配备两人操作(大多借调与考试无关的学生承担)试卷扫描,其中一人将试卷从袋中取出,另一人操作扫描仪、核对每袋扫描数量、处理可能的错误并扫描后装袋。
扫描初期,应随机抽查客观题的识别情况和图像情况,防止前期定义的扫描模版出现差错。
【4】校对考号
考号可以设专人同步进行,如果考号采用条形码,由于错误极少,可以采用实时或事后处理的方式,全部校对完毕后,应核对总人数、缺考以及违纪等方面的一致性。
9.4网上阅卷
【1】评分细则制定
在每一科进行网上评分前,都必须制定评分细则,包括评阅题组对应试题的分配,每道主观题采用何种误差控制方法及其阈值的设定、给分点的确定等等。要注意的是由于多评控制增加了评卷量,因此需根据评卷时间确定好两评还是三评以及多评试卷比例,个人复评比例;
【2】培训
评卷老师第一次使用网上评卷系统前,应有20分钟左右的时间进行操作培训,由于评卷端的软件操作相当简单,这个时间足矣。
【3】试评
对于每一科目,评卷过程通常划分为试评和正评两个阶段,试评阶段将发放一定数量的试卷供所有评卷老师熟悉评分标准,之后清除试评数据进入正式评卷阶段。
一般性的学校考试,试评阶段可以省略。
【4】评卷阶段
这个阶段除正常评卷外,各组长要做好评分误差监测、评分质量的控制工作。
做好定时数据备份工作。
【5】收尾阶段
备份所有数据,包括评分数据库和图像文件。
首先核对评卷状态无误,运行统计分析功能,导出各类数据,随机抽查10份试卷评分对比评分日志数据,核对无误后结束评卷工作
【6】总结
总结整个网上评卷过程,为下一次网上评卷工作总结经验。
9.5成绩分析及跟踪监测
【1】统计分析
由于每个学科考试时间、阅卷时间会有时间上的差异,已经完成阅卷的科目可以先导出原始成绩进行分析,待所有科目全部完成阅卷以后,再进行全部科目的合并统计,并生成当次考试的统计指标和分析报表。
【2】数据导出
系统生成的报表类型较多,可以根据实际需要有选择的导出,导出的分析报表按全区、学校、班级分类存储,管理员可以批量从服务器上压缩下载到本地,检查无误后再分发给各学校和教师。
【3】成绩归档
如果需要做历次成绩跟踪监测,则需要将每次网上阅卷后的数据进行归档处理,归档处理分为:学校归档、班级归档、学科归档、学生成绩归档。
其中学生成绩归档可以按照学籍号、考号、姓名三种方式归档。
归档后的考试数据可以在“数据分析中心”查阅,实现动态跟踪监测。
【4】数据分析中心
“数据分析中心”是平台用于教学质量监测的核心功能,其中为不同的角色(学生、家长、任课教师、班主任、备课组长、科组长、年级组长、教务主任、校长、教研员、教研主任、局长等)定制了不同的分析报表和分析报告。在使用前需要对每个用户定义相应的角色以及数据查询权限。注:一般只为用户分配相应的角色,数据查询权限采用系统默认的权限机制即可。
十、售后服务和培训要求
10.1项目工期要求
本项目合同签订后,要求供应商10天内完成交货,安装和培训以及验收工作。
10.2售后服务要求
(1) 严格要求供应商按照招标要求及合同相关条款执行;
(2) 安装调试、技术培训的过程中,要求供应商保证派出不少于3名熟练的技术人员。
(3)在质保期内为本项目提供每季度一次的例行维护服务和每年的开学前前一个星期上门检测服务;
(4)为用户提供常年电话、网络等远程的技术咨询、技术指导服务。
(5)现场支持响应4小时内;电话支持响应10分钟内。
(6)所有设备出现故障,响应时间不超过30分钟。
(7)对于设备及其它产品,在质保期内,如果出现质量问题,将按“三包”原则,免费维修、更换、安装、调试。
(8)备件服务。若本项目中的产品因出现故障影响正常运行时,要求供应商为本项目提供特殊备件支持服务,由供应商提供同等配置的设备替代使用,直至故障得以完全解决为止。
(9) 在系统免费维护期过后,要求供应商继续为本项目提供长期优惠的技术服务,包括技术支持、硬件的升级、故障的快速响应及相关人员的技术咨询。
10.3质保服务要求
(1)为本项目服务器提供三年质保服务、其他软硬件提供一年质保服务
供应商对本项目实行服务器提供三年质保服务、其他软硬件提供一年质保服务与一年免费上门服务,解决相应的使用与技术方面的问题。
(2)定期例行维护服务
在质保期内,供应商为本项目提供每季度一次的例行维护服务。
(3)提供长期技术咨询服务
供应商提供给用户方—份详细的技术咨询联系办法,客户可以随时通过电话、传真、书函、QQ以及电子邮件等各种灵活的通讯手段向供应商进行技术咨询。供应商会根据具体的需求情况通过电话、MAIL、QQ或指派工程师与用户进行直接沟通,以圆满解决用户的问题。
(4)免费升级
供应商对本公司产品提供终身免费系统自然升级服务。
(5)用户档案管理
由供应商专职人员对每次设备的型号及数量、运行与维护情况进行跟踪记录并存入微机作为用户档案,以便为今后服务提供准确的信息。
10.4培训要求
要求至少提供为期5天的技术培训,对使用单位相关人员进行设备和系统操作培训,保证使用方人员能够熟练掌握各种设备和软件等常规使用方法,以及小故障的判断与解决。
序号 | 培训事项 | 培训时间 | 培训讲师 | 培训对象 | 备注 |
1 | 产品整体介绍 | 0.5天 | 学科教研员、系统管理员 | ||
2 | 系统及设备安装调试 | 1天 | 系统管理员 | ||
3 | 答题卡制作印刷 | 0.5天 | 学科教研员、系统管理员 | ||
4 | 扫描识别部分使用与维护 | 1天 | 系统管理员 | ||
5 | 网上阅卷部分使用与维护 | 1天 | 学科教研员、系统管理员 | ||
6 | 数据统计分析和管理发布 | 1天 | 学科教研员、系统管理员 |
十一、社会效益与经济效益分析
(1)使用60克以上普通纸制作答卷,使用成本不足其他高考或中考系统所要求答卷的十分之一;
(2)以“统筹规划、统一标准、合理布局、高度整合、开放共享、深化应用、优质服务”的原则,构建开放性、共享化、成熟化的网上阅卷与分析评价平台。该平台的建成,将改善目前教育测量信息化建设的格局,逐步形成优势互补、良性互动的教育测量信息化新格局,大大提高教育信息化建设的绩效。
(1)免去对纸质答卷装订、翻阅、传递和流水线作业的中间等待,以及采用客观题自动阅卷与主观题网上评卷相结合的阅卷方式,评卷效率提高3-5倍;
(2)自动登分、加分与成绩统计,可确保阅卷数据全面、及时、准确。统计分析与评价速度更是几何级数提升。
(1)自动屏蔽考生信息的客观公正性保证有利于保证阅卷过程的公正、公平;
(2)阅卷过程的进度质量监控与多评误差控制机制有利于确保阅卷质量提高;
(3)考生成绩自动登分、加分与统计分析有利于杜绝人工操作产生的误差。
4、社会效益
(1)运用科学的教育测量、教育统计和教育评价方法与手段,对全区实现科学的教学诊断、教学评价乃至提升教学水平都具有积极作用;
(2)为促进全区教育体制改革,实现由应试教育向素质教育的方式转变奠定良好基础。
(3)系统实现的数据自动采集、数据自动分析、诊断依据科学、评价客观高效等优势,不但大幅提高教师的工作效率,减轻教师负担,而且还有利于教育部门落实以人为本,体现人文关怀的各项措施。