Fleiss' kappa系数。该检验适用于分析重复测量3次及以上且测量结果是无序分类变量的重测一致性或观察者一致性检验。SPSS没有内置操作模块,但可以通过拓展包输出结果。Fleiss' kappa系数,可以补充SPSS在一致性检验方面的不足。接下来使用R语言实现这一个过程。我们取 irr 包中的diagnoses 数据集的一部分,截取前三个医生对 30 位病人的诊断结果,注意这些诊断结果是无序分类变量。
#案例数据
dat <- diagnoses[,1:3]
现在有3组观察值做诊断和评估,常规的kappa系数不能胜任了,Fleiss' kappa系数比较合适。Fleiss' kappa系数的取值范围是【-1,1】,其系数越大,一致性越强,一般经验认为低于0.7是不可接受的尚需要改进,0.7可接受,0.9优秀。有时候也可以考虑参照常规的kappa系数进行解读,一般认为0.4<kappa<0.6时表明一致性一般,0.6<kappa<0.8时,表明有较高的一致性,kappa>0.8表明有很好的一致性,kappa<0.4,则一致性较差。此外还应通过显著性检验,也就是p值<0.05。利用irr包中的kappam.fleiss()函数实现Fleiss' kappa系数的计算。library(irr)kappam.fleiss(dat)
Fleiss' Kappa for m RatersFleiss' kappa系数=0.534,通过显著性检验,0.534<0.7,几位医生的诊断评估一致性一般。