二分类资料的五种一致性评价指标应用效果比较*
2016-10-26中山大学公共卫生学院医学统计与流行病学系510080
中山大学公共卫生学院医学统计与流行病学系(510080)
公为洁 赵 志 顾豪高 张晋昕△
二分类资料的五种一致性评价指标应用效果比较*
中山大学公共卫生学院医学统计与流行病学系(510080)
公为洁赵志顾豪高张晋昕△
【提要】目的探讨5种不同的一致性评价指标用于估计二分类结局一致性的应用效果。方法用Monte Carlo法模拟得到不同样本含量和不同阳性率的二分类数据,分别估计各指标、标准误及估计值与真实值的相对偏差,从列联表的均衡性角度评价各系数的适用性。实例数据则使用Bootstrap估计加以验证。结果当列联表趋于均衡时,5种系数的标准误和相对偏差均较小;列联表趋于不均衡,Kappa、Scottπ和Krippendorffα这3种系数的标准误和相对偏差越大;对于各种情形下的列联表,AC1和G指数的标准误和相对偏差变化均较小。结论列联表的均衡状态对Kappa、Scottπ和Krippendorffα这3种系数的稳定性影响较大。当列联表趋于不均衡时,推荐使用AC1和G指数评价二分类结局的一致性。
一致性评价诊断试验Kappa系数二分类结局
同一方法由不同或同一评价者重复评估同一组样本,所得结果往往不尽相同。因此,有必要对评价结果的一致性程度进行探讨。采用合理的指标客观评价诊断结果很重要[1]。二分类结局作为一种常见的结局类型,对其评价最普遍的方法是Kappa系数。然而,Kappa在实际应用中存在多种悖论[2],有学者指出应谨慎甚至停止使用[3-4]。以两评价者D和F评估结果的四格表为例,可将结果整理为表1。即使a和d数值不变,当b和c的差值增大(即列联表趋于不对称)时,Kappa取值随之增大,影响对一致性的判断[5]。……
