评分者信度

百科含义

评分者信度（scorer reliability），指的是多个评分者给同一批人的答卷评分的一致性程度。在由客观性试题组成的心理测验中，答案具体而固定，无需考察评分者信度；但在投射测验、道德判断测验、创造性思维测验等测验的评分中，答案并不固定，评分时必然掺杂有主观判断因素，因此在评定这些主观性题目时，评分者之间的变异是产生误差的重要原因之一。因此，需要考察评分者信度。考察评分者信度的方法是：随机抽取相当份数的试卷，由两位或多位评分者按记分规则分别给分，然后根据每份试卷的分数考察评分的一致性。主要评分方法包括皮尔逊积矩相关法、斯皮尔曼等级相关法以及肯德尔和谐系数法，一般要求在成对的受过训练的评分者...