刘博谈验证 这是刘博谈验证的第二十一篇,在本篇中,我们来讨论如何设计测试的性能评估试验。 9、系列截止点的真阳性率和假阳性率之间的关系可以用图形表示。 该图被称为接受者操作特征(ROC)曲线,ROC曲线首先被用来表示雷达系统在区分战机和雷达屏幕上其他物体的性能,图2.4是运动心电图的ROC曲线。 ROC曲线用图形表达了一个基本规则:当你调整截止点以测试更多的疾病患者时,你不可避免地将更多的非疾病患者标记为有疾病。 例如,图2.4中的ROC曲线显示,当我们选择2.5mm ST段压低作为阳性结果的定义时,很少有假阳性结果。 然而,很少有冠心病患者在运动心电图上有如此极端的结果,如果选择这个分界点,会有很多假阴性的结果。 而选择1毫米的ST段压低来定义异常结果,可以测试到更多的疾病患者,但假阳性结果远远多于选择2.5毫米ST段压低时的结果。 图2.4 运动心电图作为显著冠状动脉疾病的预测指标的ROC曲线。数字代表ST段压低的程度(以毫米为单位),用来定义运动心电图测试的结果为阳性。 如何选择ROC曲线上的最佳分界点?最佳点是由疾病的预检概率(p[D])和把未患病的患者当作患病来治疗的成本(C)与治疗患病患者的收益(B)的比率决定的。 对于接近原点的点,ROC曲线的斜率相对较陡,这时真阳性率和假阳性率都很低。 当疾病比较少见或治疗比较危险时,临床医生应选择靠近原点的分界点,这种选择将有助于尽量减少假阳性结果的数量和对未患病患者的危险。 ROC曲线的斜率在右上角附近是平的,这里的真阳性率非常高,假阴性结果不常见,临床医生应该在患者非常可能患病或治疗安全有效的情况下,选择这个区域的Cutoff值。 在假阴性结果非常有害的情况下,这种选择会使假阴性结果最小化。 |