评分信度pingfen xindu
指不同评分者对相同考生或相同答卷的评分结果的可靠性或一致性。评分信度高,说明评分误差小。若评分者只有2人,则可用积差相关系数或等级相关系数来衡量评分信度。若评分者在3人以上,则用下式来计算评分信度系数:

式中 K——评分者的人数
N——考生或试卷数

式中 Ri——秩次和

——秩次和的平均值
W在0~1之间,对W进行显著性检验的公式为:
X2=K(N-1)W
它服从于自由度为N-1的X
2分布。但在大规模的筛选性考试中要求W在0.9以上。
[例] 4个评分者对5篇高考作文的评分结果如下,求评分信度。
答卷 评分 评分者 | A | B | C | D | E |
分数 | 秩 | 分数 | 秩 | 分数 | 秩 | 分数 | 秩 | 分数 | 秩 |
1 2 3 4 | 17 28 20 23 | 1 1.5 1.5 1.5 | 29 28 36 23 | 2.5 1.5 4.5 1.5 | 35 33 31 37 | 4 4.5 3 5 | 37 33 36 32 | 5 4.5 4.5 3 | 29 31 20 35 | 2.5 3 1.5 4 |
Ri | | 5.5 | | 10 | | 16.5 | | 17 | | 11 |
依式计得:

查X
2分布表可知P>0.05,即表明这4位评分者的评分一致性很差。