海云天科技 企业技术文件
名称：网上评卷题组长、学科组、领导组使用手册
编号：
版权声明
本文中的所有信息均为海云天科技公司内部公开信息，务请妥善保管，未经公司明确作出的书面许可，不得为任何目的、以任何形式或手段（包括电子、机械、复印、录音或其他形式）对本文档的任何部分进行复制、存储、引入检索系统或者传播。
深圳市海云天科技有限公司 发布
目 录
网上评卷题组长、学科组、领导组使用手册
1、概述
1.1、题组长角色定义
网上评卷题组长主要负责该题各成员的评卷监控和管理，对评卷进度、评卷质量等实施监控，并负责怀疑卷、雷同卷及问题卷等的评阅及处理。
1.2、本培训手册制作目的
通过本手册的学习，让题组长明确自己的职责权限范围，及掌握相应系统功能的操作。
2、系统权限及功能介绍
2.1、系统登陆
打开一个IE浏览器窗口，在地址栏中输入HTTP地址（如http://192.168.10.209:7001/hyt）并回车即可进入如下登录界面。输入用户名、密码，点击登录进入评卷系统。
登录系统常见问题的处理：
① 如果不能正常访问服务器，无法出现上图所示的登录页面，请检查：
Ø 在IE的地址栏中的输入的HTTP路径是否正确。
Ø 网络是否通畅，本地客户机与服务器是否已经连通。
Ø 应用服务器(weblogic)是否已经正常启动。
Ø 本地的局域网中是否使用了代理。
② 如果登录后二级主页面不能弹出，请检查：
Ø 客户机是否有网上助手或防火墙之类的软件开启。如果有，将其关闭，再重新登录。
Ø 点击IE“工具”菜单 --> “Internet选项” --> “高级” --> 还原默认设置.
如果评卷教师是第一次登录，则要求输入其必需的个人信息才能进入系统。
组长进入系统后的主界面：
2.2、评卷监控
2.2.1 、教师监控
组长可通过此模块中相关参数来评价教师的评卷情况。相关指标是否显示可与管理员联系进行设置。
上述界面相关指标介绍：
n 评卷状态：表示评卷教师当前的评卷状态，如试评、培训、正评等。
n 评卷总量：评卷教师评阅试卷的总量（评卷量/平均评卷量）。
n 无效数量：多评模式下没有按误差规则出分并且与最终成绩差值大于误差值的教师评阅的试卷数量。
n 未 作 答：教师在对学生评卷时对没有作答的题提交为未作答的零分卷数量。
n 平 均 分：所评阅的试卷的平均分。
n 最 低 分：所评阅的试卷中的不包括零分的最低分。
n 最 高 分：所评阅的试卷中的最高分。
n 速 度：评阅该题所用时间（图像下载完毕到给分提交），单位（秒/份）。
n 下载余量：系统中试卷的分发是按考场来的，因此评卷教师会有一部分已经分发到但尚未评阅的试卷。这部分试卷的量称为下载余量。
n 缓存余量：在评卷过程中系统会缓存一部分试卷以便于回评等操作，这部分试卷的量用缓存余量来表示。
n
离线时间：表示评卷教师离开的时间，即有多久没有评卷。
n
允许取任务：表示评卷教师当前是否允许取新的评卷任务。“√”表示允许取新任务，“×”表示不允许取新任务。
n
权 限：允许组长新增、修改教师信息，同时可调整其权限。
n
常态离差的统计：
①正离差值，即评卷教师所评试卷中评分高出实际得分的所有试卷，总共多给的分数之和除以评卷数量之值。
②负离差值，即评卷教师所评试卷中评分低于实际得分的所有试卷，总共少给的分数之和除以评卷数量之值。
③离差和，即正负离差绝对值之和。
常态离差的监测功能是：
评卷教师正离差值偏大者，可判定其标准把握过宽；
评卷教师负离差值偏大者，可判定其标准把握过严；
评卷教师正负离差值都偏大或离差和（正负离差绝对值之和）大者，可判定其标准把握失准。
n 吻合曲线：比较组员、小组和小题的评分分布；以及组员、小组和小题不同时期的分布情况。
n 复评指数：系统按指定的规则从一个教师的已阅试卷中随机抽取一部分发给这个教师再次评阅，比较两次评卷的误差，以此作为评价教师评卷质量的一个指标。
n 有 效 度：评卷教师有效评卷量与评卷总量的百分比。
n 综合评价：对评卷教师评卷数量、吻合指数、复评指数和有效率按权相加的一个较综合的指标。管理端可对各指数的权重进行设置。
n 培训指数：用于评价评卷教师评阅培训卷的质量、比较与专家评卷的差异情况。
n 标 准 差：用于监控教师给分一致性的指标。标准差越小则给分越集中，标准差越大则给分越随机，统计学上标准差越大表示越客观。
n 挑选卷量：指教师挑选卷数量。
指标计算公式（以四评为例）：
评卷数量平均值（30/25）=（某题的1评评卷数量+2评评卷数量+3评评卷数量）/题个人平均评卷量
平 均 分 = 题、组、个人的平均分
吻合指数 = 个人各评分分布百分率与题个分评分分布百分率的相关性系数＊１００。
复评指数 = 相关性(100) [百分制]。
有 效 度 = 100%-无效卷数量／评卷总量。
综合评价 = [评卷数量/平均评卷数量{超过平均的25}]*25%+吻合指数*25%+复评指数*25%+有效率*25%[百分制]。
培训指数 = 相关性(100) [百分制]。
考核指数 = 相关性(100) [百分制]。
标 准 差 = 根据数学标准差公式计算。
主客相关 设Zi为该教师所评阅的学生i的主观题得分，Ki为该学生客观题得分；
Z为该教师所评阅主观题的平均分，K为该教师所评阅客观题的平均分：
= ∑（（Zi-Z）*(Ki-K）)/sqrt(∑(（Zi-Z）2*∑(Ki-K）2)
2.2.2 、评分分布
该模块分析评卷过程中组员的分值对比分布情况。依次选择采样时间、小题和组员即可完成查询。管理端控制是否显示评分分布的理想曲线。
分析参数：
选择时间：指是否选择时间段。
分组统计：指选择时间后是汇总时间比较还是不汇总时间比较。
选择小题：只针对小题的图形分析。
选择小组：只针对小题和小组的图形分析。
选择组员：针对小题、小组和组员的图形分析。
2.2.3 、复评监控
本模块监控组员的复评卷评阅情况。系统可以按指定的规则从一个教师的已评试卷中随机抽取一部分发给这个教师再次评阅，比较两次评卷的误差，以此作为评价教师评卷质量的一个指标。这部分试卷我们称为复评卷。教师评阅这部分试卷不会影响最终成绩。
2.2.4 、评分均值监控
本模块提供评卷教师与小组及全体评卷员评分均值的比较。评分均值指一批试卷某题得分的平均值。组长可据此对评卷教师的评分状况进行及时了解与监控。
2.2.5 、标准差监控
组长可据此对评卷教师的评分状况进行及时了解与监控。对不同单位时间的标准差变化幅度较大的评卷员，特别是随着评卷进程，标准差越来越大或越来越小的评卷员，应及时反馈信息。
2.2.6 、各题进度
以题为单位统计其评阅情况。
2.2.7 、每日进度
本模块主要评价教师、小组、各题每日评卷情况。
2.2.8 、总体进度
具体参数说明：
1. 1评产生量：指本次评卷中已导入接口数量。
2. 2评产生量：指如果评卷误差控制模式为2评模式、3评模式或4评模式时，评卷中已完成的1评评卷量。
3. 3评产生量：指如果评卷误差控制模式为4评模式时，评卷中已完成的2评评卷但超出误差的试卷数量。
4. 终评产生量：指如果评卷误差控制模式为3评模式时，评卷中已完成的2评评卷但超出误差的试卷数量；如果评卷误差控制模式为4评模式时，评卷中已完成的3评评卷但超出误差的试卷数量
5. 问题卷产生量：指由于图像或其他原因导致不能评阅的试卷总量。
6. 纸质卷产生量：指由于图像或其他原因导致不看原卷不能评阅的试卷。
7. 抽 查 量：试卷的小题已出成绩，组长抽查的试卷量。
8. 抽查给分量：试卷的小题已出成绩，组长抽查并对给分不合理的试卷重新给分的试卷量。
9. 怀疑卷产生量：
系统根据误差模式将可能有问题的试卷按照一定的规则挑选出来，让专家审核。
10. 出成绩数量：指已出成绩的试卷总量。
2.3、评卷管理
2.3.1 、怀疑卷
系统根据误差模式将可能有问题的试卷按照一定的规则挑选出来，让专家审核。如：
1>.多评时根据异常误差产生的试卷。
2>.多评时出分为零而有教师给分不为零并相应误差分小于异常误差卷。
3>.满分提交怀疑卷（管理端-试卷结构设置中可控制）。
4>.终评时给零分试卷以及其他。
2.3.2 、纸质卷
处理所提交的纸质卷。
2.3.3 、问题卷
组长评阅评卷教师提交的问题卷。对于无法处理的问题卷如图像不清，可标记为纸质卷。
2.3.4 、雷同卷
本模块主要用于对评卷教师提交的雷同卷进行管理、确认，请慎重处理。
2.4、查询
2.4.1 、试评卷查询
对试评时评过的试卷进行查询。
Ø
显示查询条件
Ø
显示查询结果
2.4.2 、正评卷查询
对评卷过程（日志）和出成绩的试卷进行查询
Ø
显示查询条件
Ø 显示查询结果。单击序号，可直接将试卷设置为培训卷、考核卷、样卷等。
2.4.3 、问题卷查询
可对问题卷、怀疑卷、抽查给分卷进行查询
Ø
显示查询条件
Ø 显示查询结果
2.5、培训考核
2.5.1 、挑卷管理
本模块主要用于把挑选的试卷标记为培训卷、样卷、考核卷等。
组长或专家登录系统，在左边菜单选择培训考核→挑卷管理。
在右上试卷类型里面选择相应的试卷类型进行操作。默认为挑选卷，通过点击列表里面对应试卷型号下面的省略号（…），经过确认和分数评语的输入，挑选卷就可以成为相应的试卷。
如果要删除挑选卷里面的试卷，先在右上选择样卷或考核等按钮，然后在下面列表进行删除即可。
2.5.2 、样卷
组长或专家登录系统，选择菜单培训考核→样卷，就可以看到样卷。
2.5.3 、培训记录
此模块监控教师评培训卷的评阅情况。比较其评卷的误差，以此作为评价教师评卷质量的一个指标。
2.5.4 、考核记录
此模块监控教师评考核卷的评阅情况。比较其评卷的误差，以此作为评价教师评卷质量的一个指标。
2.6、其他功能
方便评卷教师对自己的个人信息进行维护。
建议评卷教师登录后立即修改初始密码。
在评卷过程中，评卷教师可通过系统提供的消息功能进行简单的交流。
权限说明：
Ø 一般教师：只能向上级组长发消息，回复学科组长或专家的信息；
Ø 题组长：可以发送到上级学科组长、其所管理的组员和同一题的其他题组长，也可以群发小题组员；
Ø 学科组长：具有题组长相同的权限；
Ø 具有管理员权限的组长可以群发所有组长。（管理员权限在管理端的组织架构设置）
操作说明：
Ø 群发：群发该题的所有组长和组员；
Ø 群发该题题组长：群发一题的所有题组长；
Ø 群发所有组长：群发该科目的所有小组长和专家；
Ø 全选：全部选择右下列表的所有人员；
Ø 强制提示：成功发送消息后，接收方自动弹出消息框。
评卷教师如暂时离开，可锁定系统当前状态。只有输入正确的密码才能解除系统锁定。如连续三次密码输入错误，系统将自动退出。
