注意:Kappa 值是一个用来表示一致性的统计量。Kappa 值越接近 1,一致性就越高。Kappa 值越接近 0 则指示一致性越低。
“一致性报表”显示针对每个评级员汇总的一致性以及总体一致性。该报表是在“计数量具图”报表的第二个图中表示的数据的数值形式(Figure 6.5)。
“一致性比较”报表使用 Kappa 统计量显示每个评级员与其他所有评级员的比较结果。仅当您在启动窗口中指定了“标准”变量后,才会将评级员与该标准加以比较。
“评级员内部的一致性”报表显示所检查的项数。置信区间为得分置信区间,正如 Agresti and Coull (1998) 所建议的那样。“匹配数”是检查的项数总和,其中每次检查单个项,评级员本人都给出了相同的评级。“评级员得分”是“匹配数”除以“检查数”后得到的结果。
“类别间的一致性”报表显示随机情况下期望的分类的一致性。它评估的是固定数目的评级员在对项分类时相互之间的一致程度。
图 6.6 一致性报表