专利名称：评卷员评卷质量的检测指标的图像化方法和系统的制作方法
技术领域：
本发明涉及试卷测评技术领域，特别涉及一种评卷员评卷质量的检测指标的图像化方法和系统。
背景技术：
目前的评卷系统大多是以计算机为工具，将试卷扫描转换成图像，在网上由评卷员进行评卷。现行高考、中考等多种考试中实行的是多评机制意思是，同一份试卷的每一道题目都有复数个(一般是两名以上、最多四名)评卷员给出分数，然后，按照对于评分误差的要求，达到最小误差要求的分数会被采纳。这种做法，避免一个人评分所带来的随意性， 从而实现了评卷的公平性。但是，对于评卷员来说，其对于试题评分标准的掌控程度不一致，换句话说，其评分的标准设定可能出现不合理的情况。现有技术中评判评分员评卷质量的方法通常是抽出一部分试卷请专家评定后作为考核卷(专家)，也会每隔一段将评卷员已经评分的试卷发给他重评(自评)，检验先后的一致程度。然而，这种做法无法客观地反映出评卷员的评卷质量，因此有必要通过数据的统计计算来客观的评价评卷质量。有鉴于此，需要提供一种新的技术，能够客观地反映出评卷员评卷质量。
发明内容
鉴于上述现有技术的不足之处，本发明的目的在于提供一种评卷员评卷质量的检测指标的图像化方法和系统，以解决现有技术的评卷机制无法客观地反映出评卷员的评卷质量的问题。为了达到上述目的，本发明采取了以下技术方案
一种评卷员评卷质量的检测指标的图像化方法，其中，所述方法包括以下步骤
51、采集评卷员对于试卷的评定信息；
52、根据评定信息制定S-P表；
53、根据S-P表的数据绘制出评卷员评分S曲线；
54、根据评卷员评分S曲线算出评分员注意系数CS；
55、计算出评卷员的自身一致性系数Pl；
56、根据评卷员注意系数CS和评卷员的自身一致性系数Pl描绘得到评卷员评卷质量的检测指标的图像。所述的评卷员评卷质量的检测指标的图像化方法，其中，所述步骤Sl中试卷的评定信息具体为，若评卷员对试卷的试题认可，则记为1 ；反之则记为0。所述的评卷员评卷质量的检测指标的图像化方法，其中，所述步骤S4中评分员注意系数CS=(M1*M2)/M3-N1*N2，其中，所述Ml为评卷员评分S曲线左侧为0的正答人数之和，所述M2为评卷员评分S曲线右侧为1的正答人数之和，所述M3为评分员评分S曲线左侧的正答人数之和，所述W为评卷员的总分，所述N2为平均正答数。
所述的评卷员评卷质量的检测指标的图像化方法，其中，所述步骤S5中评分员的自身一致性系数 Pl= (A+D)/ (A+B+C+D)。一种评卷员评卷质量的检测指标的图像化系统，其中，包括 采集单元，用于采集评卷员对于试卷的评定信息；
统计单元，用于根据评定信息制定S-P表； 曲线拟合单元，用于根据S-P表的数据绘制出评卷员评分S曲线； 测评单元，用于根据评卷员评分S曲线算出评分员注意系数CS以及评卷员的自身一致性系数Pl ；
绘图单元，用于根据评卷员注意系数CS和评卷员的自身一致性系数Pl描绘得到评卷员评卷质量的检测指标的图像。所述的评卷员评卷质量的检测指标的图像化系统，其中，所述采集单元中试卷的评定信息具体为，若评卷员对试卷的试题认可，则记为1 ；反之则记为0。所述的评卷员评卷质量的检测指标的图像化系统，其中，所述评分员注意系数CS= (M1*M2) /M3-N1*N2。所述的评卷员评卷质量的检测指标的图像化系统，其中，所述评分员的自身一致性系数 Pl= (A+D) / (A+B+C+D)。本发明提供的评卷员评卷质量的检测指标的图像化方法和系统，所述评卷员评卷质量的检测指标的图像化系统方法通过采集评卷员对于试卷的评定信息，根据评定信息制定S-P表，然后根据S-P表的数据绘制出评卷员评分S曲线，再根据所述评卷员评分S曲线算出评分员注意系数CS以及评卷员的自身一致性系数P1，最后利用评卷员注意系数CS和评卷员的自身一致性系数Pl描绘得到评卷员评卷质量的检测指标的图像。从而，通过数据客观地反映出评卷员的评卷质量，同时，通过图像的方式，使用户可以直观的看到评卷员的评卷水平。
图1是本发明的评卷员评卷质量的检测指标的图像化系统的结构框图。图2是本发明实施例的S-P的初始图表的示意图。图3是本发明实施例的S-P表的示意图。图4是本发明实施例的在S-P表中的S曲线的示意图。图5是本发明实施例的自身一致性系数的示意表图。图6是本发明实施例的评卷员评卷质量的检测指标的图像的示意图。图7是本发明的评卷员评卷质量的检测指标的图像化方法的流程图。
具体实施例方式本发明提供了一种评卷员评卷质量的检测指标的图像化方法和系统。为使本发明的目的、技术方案及效果更加清楚、明确，以下参照附图并举实例对本发明进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。请参阅图1，图1是本发明的评卷员评卷质量的检测指标的图像化系统的结构框图。如图所示，所述系统包括采集单元100、统计单元200、曲线拟合单元300、测评单元400和绘图单元500。具体说来，所述采集单元100用于采集评卷员对于试卷的评定信息，所述试卷的评定信息包括评卷员对于试卷上试题的评定结果，在本发明实施例中，若评卷员对试卷的某一试题认可(即认为试题出得不错，可以采用)，则记为1 ；反之则记为0。所述统计单元200用于根据评定信息制定S-P表。在本实施例中，如果评分员为 15人，分别设定为Sl到S15 ；试卷的题目数为10道，分别设定为Pl到P10。然后根据评卷员对试题认可(若认可则记为1、反之则记为0的方式填满整个表格，便得到如图2所示的 S-P的初始图表。然后，将每一行的和记为评分员的总分，将每一列的和记为试题的总分，比如，图2中第一行为评分员Sl的总分，第一列为试题Pl的总分。然后，按照评分员总分由高到低将各行从上到下排列，再按照试题总分将各列有高到低从左向右排列，便得到了所述的S-P表，如图3所示。所述曲线拟合单元300用于根据S-P表的数据绘制出评卷员评分S曲线。具体地说，所述评卷员评分S曲线可以按照如下方式绘出计算每个学生的总分，在每一个S (y) 和S (y)+l之间(总分不同时)划入相应的分界线。得到S曲线。举例来说，第一行S9和第二行S7之间的总分不同，则在P9下方划出一道分界线，第二行S7和第三行S3之间的总分不同，在Pl下面划出一道分界线，第三行S3与第四行S5之间的总分相同，则不划出分界线，直到S15和S4行不同，才在PlO下方划出分界线，依次类推，便得到S曲线，如图4所示。所述测评单元400用于根据评卷员评分S曲线算出评分员注意系数CS以及评卷员的自身一致性系数P1。其中，所述评分员注意系数CS的计算借鉴了 S-P表，在本发明实施例中，可以采用如下公式计算CS= (M1XM2)/M3-N1XN2，其中，所述Ml为评卷员评分S 曲线左侧为0的正答人数之和(所谓正答即表格中填涂1)，所述M2为评卷员评分S曲线右侧为1的正答人数之和，所述M3为评分员评分S曲线左侧的正答人数之和，所述m为评卷员的总分，所述N2为平均正答数。所谓平均正答数N2是指整个S-P表的平均正答数，如图 3所示的S-P表中，所有在表格中填1的数目/整个表格的数目便得到本发明实施例的平均正答数N2。另外，自身一致性系数Pl的计算可以通过评卷员自身的评定信息与标准评定信息的比较来得到。在本发明实施例中，采用如下公式得到自身一致性系数P1= (A+D)/ (A+B+C+D)，其中，A、B、C、D的数值(也采用二分法，即1和0)请参阅图5。如图5所示，A为 1时，表示评卷员的评定结果与自己正常水平的评定结果一致且与标准评定信息也一致，否则为ο ;B为1时，表示与自己正常水平的评定结果不一致且与标准评定信息一致，否则为 0 ;C为1时，表示与自己正常水平的评定结果一致且与标准评定信息不一致，否则为0 ;D为 1时，表示与自己正常水平的评定结果不一致且与标准评定信息也不一致，否则为0。当采用如上述的方法时，便得到评分员注意系数CS以及评卷员的自身一致性系数Pl两组数据。最后，所述绘图单元500用于根据评卷员注意系数CS和评卷员的自身一致性系数Pl描绘得到评卷员评卷质量的检测指标的图像。其图像的方法可以为各种形式， 只要能够使人直观地看到评分员的评卷质量即可。在本发明实施例中，采用坐标图的形式， 来描述出评卷员评卷质量的检测指标的图像。具体地说，如图6所示，以评卷员注意系数 CS为横坐标，以评卷员自身一致性系数Pl为纵坐标，将所有评卷员的数据绘制成散点图。 则，我们可以清楚只管地从图上得到如下结论越靠右的评卷员评分准确性越高，越靠上的评卷员评分稳定性越高。如果进一步将图形分为四个象限的话，则右上象限的评卷员优秀，坐下象限评卷员较差，左上象限稳定性好而准确性差，右下象限的准确性好而稳定性差。故此，我们便可以清楚、客观地评判出评卷员的评卷质量。请继续参阅图7，本发明还提供了一种评卷员评卷质量的检测指标的图像化方法， 其中，所述方法包括以下步骤
51、采集评卷员对于试卷的评定信息；
52、根据评定信息制定S-P表；
53、根据S-P表的数据绘制出评卷员评分S曲线；
54、根据评卷员评分S曲线算出评分员注意系数CS；
55、计算出评卷员的自身一致性系数Pl；
56、根据评卷员注意系数CS和评卷员的自身一致性系数Pl描绘得到评卷员评卷质量的检测指标的图像。进一步地，所述步骤Sl中试卷的评定信息可以具体为，若评卷员对试卷的试题认可，则记为1 ；反之则记为0。另外，所述步骤S4中评分员注意系数CS=(M1*M2)/M3-N1*N2， 所述评分员的自身一致性系数Pl= (A+D)/ (A+B+C+D)。其中，评分员注意系数CS以及评卷员的自身一致性系数Pl计算公式中的各种数值的计算如评卷员评卷质量的检测指标的图像化系统中所描述的，在这里就不再一一冗述了。综上所述，本发明提供的评卷员评卷质量的检测指标的图像化方法和系统，所述评卷员评卷质量的检测指标的图像化系统方法通过采集评卷员对于试卷的评定信息，根据评定信息制定S-P表，然后根据S-P表的数据绘制出评卷员评分S曲线，再根据所述评卷员评分S曲线算出评分员注意系数CS以及评卷员的自身一致性系数P1，最后利用评卷员注意系数CS和评卷员的自身一致性系数Pl描绘得到评卷员评卷质量的检测指标的图像。从而， 通过数据客观地反映出评卷员的评卷质量，同时，通过图像的方式，使用户可以直观的看到评卷员的评卷水平。可以理解的是，对本领域普通技术人员来说，可以根据本发明的技术方案及其发明构思加以等同替换或改变，而所有这些改变或替换都应属于本发明所附的权利要求的保护范围。
权利要求
1.一种评卷员评卷质量的检测指标的图像化方法，其特征在于，所述方法包括以下步骤51、采集评卷员对于试卷的评定信息；52、根据评定信息制定S-P表；53、根据S-P表的数据绘制出评卷员评分S曲线；54、根据评卷员评分S曲线算出评分员注意系数CS；55、计算出评卷员的自身一致性系数Pl；56、根据评卷员注意系数CS和评卷员的自身一致性系数Pl描绘得到评卷员评卷质量的检测指标的图像。
2.根据权利要求1所述的评卷员评卷质量的检测指标的图像化方法，其特征在于，所述步骤Sl中试卷的评定信息具体为，若评卷员对试卷的试题认可，则记为1 ；反之则记为0。
3.根据权利要求2所述的评卷员评卷质量的检测指标的图像化方法，其特征在于，所述步骤S4中评分员注意系数CS= (M1*M2) /M3-N1*N2,其中，Ml为评卷员评分S曲线左侧为0的正答人数之和，M2为评卷员评分S曲线右侧为1的正答人数之和，M3为评分员评分 S曲线左侧的正答人数之和，Nl为评卷员的总分，N2为平均正答数。
4.根据权利要求2所述的评卷员评卷质量的检测指标的图像化方法，其特征在于，所述步骤S5中评分员的自身一致性系数Pl= (A+D) / (A+B+C+D),其中，所述A为1时，表示评卷员的评定结果与自己正常水平的评定结果一致且与标准评定信息也一致，否则为0 ； B为1时，表示与自己正常水平的评定结果不一致且与标准评定信息一致，否则为0 ;C为1 时，表示与自己正常水平的评定结果一致且与标准评定信息不一致，否则为0 ;D为1时，表示与自己正常水平的评定结果不一致且与标准评定信息也不一致，否则为0。
5.一种评卷员评卷质量的检测指标的图像化系统，其特征在于，包括采集单元，用于采集评卷员对于试卷的评定信息；统计单元，用于根据评定信息制定S-P表；曲线拟合单元，用于根据S-P表的数据绘制出评卷员评分S曲线；测评单元，用于根据评卷员评分S曲线算出评分员注意系数CS以及评卷员的自身一致性系数Pl ；绘图单元，用于根据评卷员注意系数CS和评卷员的自身一致性系数Pl描绘得到评卷员评卷质量的检测指标的图像。
6.根据权利要求5所述的评卷员评卷质量的检测指标的图像化系统，其特征在于，所述采集单元中试卷的评定信息具体为若评卷员对试卷的试题认可，则记为1 ；反之则记为 O0
7.根据权利要求6所述的评卷员评卷质量的检测指标的图像化系统，其特征在于，所述评分员注意系数CS= (M1*M2)/M3-N1*N2，其中，Ml为评卷员评分S曲线左侧为0的正答人数之和，M2为评卷员评分S曲线右侧为1的正答人数之和，M3为评分员评分S曲线左侧的正答人数之和，Nl为评卷员的总分，N2为平均正答数。
8.根据权利要求6所述的评卷员评卷质量的检测指标的图像化系统，其特征在于，所述评分员的自身一致性系数Pl= (A+D) / (A+B+C+D),其中，所述A为1时，表示评卷员的评定结果与自己正常水平的评定结果一致且与标准评定信息也一致，否则为0 ;B为1时，表示与自己正常水平的评定结果不一致且与标准评定信息一致，否则为0 ;C为1时，表示与自己正常水平的评定结果一致且与标准评定信息不一致，否则为O ;D为1时，表示与自己正常水平的评定结果不一致且与标准评定信息也不一致，否则为0。
全文摘要
本发明公开了一种评卷员评卷质量的检测指标的图像化方法和系统，所述评卷员评卷质量的检测指标的图像化系统方法通过采集评卷员对于试卷的评定信息，根据评定信息制定S-P表，然后根据S-P表的数据绘制出评卷员评分S曲线，再根据所述评卷员评分S曲线算出评分员注意系数CS以及评卷员的自身一致性系数P1，最后利用评卷员注意系数CS和评卷员的自身一致性系数P1描绘得到评卷员评卷质量的检测指标的图像。从而，通过数据客观地反映出评卷员的评卷质量，同时，通过图像的方式，使用户可以直观的看到评卷员的评卷水平。
文档编号G06F19/00GK102411670SQ20111022259
公开日2012年4月11日 申请日期2011年8月4日 优先权日2011年8月4日
发明者杨晨, 罗宇龙 申请人:深圳市海云天教育测评有限公司