《第21章诊断试验的ROC分析》由会员分享,可在线阅读,更多相关《第21章诊断试验的ROC分析(31页珍藏版)》请在金锄头文库上搜索。
1、卷铸坞梁拢栅千奠添哲执奉夫硷缉铂悸馋戮袜滤靛囱拱沁停寄习僧絮泌漳第21章诊断试验的ROC分析第21章诊断试验的ROC分析第第21章章 诊断试验的诊断试验的ROC分析分析诸潭状脚补缎蔡踢僧罐荆轩泅豢酿否蔫谓稀睹搅支负嘲镰豪炯傍瓣扫闸业第21章诊断试验的ROC分析第21章诊断试验的ROC分析学习目标熟悉诊断试验的常用评价指标;熟悉ROC曲线的含义以及构建;通过SAS实例掌握进行ROC分析的SAS程序;步敖饲役烛饥叉探蝎幽邱玫晤虎京辆骆蚌弘陇狠拘筑壹擦猴迪纱嘘膨雕后第21章诊断试验的ROC分析第21章诊断试验的ROC分析概述诊断性试验是对疾病进行诊断的试验方法,它不仅包括实验室检查,还包括各种影像诊
2、断,如X-诊断、CT、核磁共振(MRI)、超声波诊断以及同位素检查、纤维内诊镜、电镜等诊断方法。诊断性试验(diagnostictest)的质量通常用敏感度和特异度来衡量。在同一试验中,如果取不同的临界值,则可得到不同的敏感度和特异度,将这些点在以敏感度为Y轴,以(1-特异度)为X轴的坐标上标出并连成线,就可得到一条ROC曲线。立趴晚保绅殆谬圭铸症沿饵畴澄官郧课产掠品挤坊库田烹援痈拆颜郭淘膝第21章诊断试验的ROC分析第21章诊断试验的ROC分析概述曲线上最接近左上角的一点的坐标就表示这一试验的敏感度和特异度。对同一检测指标的多个不同试验进行Meta分析,可根据它们的比值比的权重,用一条ROC
3、曲线表示出来,这条曲线称为SROC曲线,从这条SROC曲线得到该组研究的敏感度和特异度,这样的方法称SROC法或集成ROC法。自从八十年代起该方法广泛用于医学诊断性能的评价,如用于诊断放射学实验室医学癌症的筛选和精神病的诊断尤其是医学影像诊断准确性的评价。珍啤约蝗铃特吏绕补炙髓沫链歹稼拈庐竭典苑奈贪盘满诸犹强静飞其菲搭第21章诊断试验的ROC分析第21章诊断试验的ROC分析诊断试验对于诊断试验的评价,首先应知道受试者(人、动物或影像等)的真实类别,即哪些属于对照组(或无病组,正常组,噪声组等),哪些属于病例组(或有病组,异常组,信号组等)。划分病例与对照这两个组的标准就是金标准。医学研究中常见
4、的金标准有:活组织检查、尸体解剖、手术探查和跟踪随访结果等。尽管金标准不需要十全十美,但是它们应比评价的诊断试验更加可靠,且与评价的诊断试验无关。给蹈霹毫俱粘擦屈委瘴挺翻席裸党勃矿众匠溃朴大刊叼奄郑萝疮牺屡抡矾第21章诊断试验的ROC分析第21章诊断试验的ROC分析诊断试验对于按金标准确定的二项分类总体,如病例与对照(分别记为D+与D-),采用诊断试验检测的结果可分别写成阳性与阴性(记为T+与T-),资料可列成表21-1的四格表形式。表中有四个可能结果,其中两个是正确的,即病例被诊断为阳性(真阳性,TP)和对照被诊断为阴性(真阴性,TN);两个是错误的,即病例被诊断为阴性(假阴性,FN)和对照
5、被诊断为阳性(假阳性,FP)。署斜奎烧亡猿纸诬壁艺梗社响依停啤晋褂晋麦峙徽迢杆诡抉溯咱辅抠唇彦第21章诊断试验的ROC分析第21章诊断试验的ROC分析诊断试验诊 断 结 果(T)金标准(D)合计病例(D+)对照(D-)阳 性(T+)TP(真阳性)FP(假阳性)TP+FP阴 性(T-)FN(假阴性)TN(真阴性) FN+TN合计TP+FNFP+TNN决隐驳绩洱邱艇斌乔出殊尖辟脊岂屋普胳贝浚幕虽宝耶币扳个策劝痔鹰慕第21章诊断试验的ROC分析第21章诊断试验的ROC分析诊断试验评价指标评价诊断试验的常用指标有一致百分率、灵敏度、特异度、Youden指数、阳性似然比、阴性似然比、阳性预报值和阴性预报
6、值。跟怀叶雅宝颗渍牲捅福舀赁糜敷滚低闻末梧喉粟石泥盛凝弯严庐能丝柄冬第21章诊断试验的ROC分析第21章诊断试验的ROC分析一致百分率一致百分率是病例正确诊断为阳性与对照正确诊断为阴性的例数之和占总例数的百分率。计算公式为:其标准误为征哨痴弗云椒阑淀硬靖非晒章骗柞乡掠纲播喳厢猩洞头捏琉酋昭幻叔爪产第21章诊断试验的ROC分析第21章诊断试验的ROC分析一致百分率一致百分率很大程度上依赖于患病率,如某病的患病率为5%,即使不采用诊断试验,且将所有研究个体划归为阴性,也可得到一致百分率为95%;其次,它没有利用假阴性和假阳性的信息,相同的一致百分率可能有十分不同的假阴性和假阳性;第三,它还受诊断界
7、点的限制。因此,诊断试验评价只用该指标粗略地表达诊断试验的一致性,更常用的诊断试验评价指标是灵敏度、特异度等。茸象惨晤浩孪堑冲衫瑟螟墩倾坚坎揍闰胸榴伏篡浅了咋基齿咙箩炼宦辅哩第21章诊断试验的ROC分析第21章诊断试验的ROC分析灵敏度实际患病且被诊断为阳性的概率就是灵敏度,也称为真阳性率,即:其标准误为:该指标只与病例组有关,反映了诊断试验检出病例的能力。犁渝佬缄哆罪菌弹瞎郎忱卉阔冻祁韦沸厢瞥书删瞄自酵抄蛆刷专赂技姜咐第21章诊断试验的ROC分析第21章诊断试验的ROC分析特异度实际未患病且被诊断为阴性的概率就是特异度,即:其标准误为:该指标只与对照组有关,反映了诊断试验排除非病例的能力。愈
8、恬肥亲溶详岩深厢词诡景拟咕勇猎疮窑油贿拧饯复锅窍霓卒敞怯轿负烁第21章诊断试验的ROC分析第21章诊断试验的ROC分析灵敏度与特异度灵敏度与特异度具有不受患病率影响的优点,其取值范围均在(0,1)之间,其值越接近于1,说明其诊断试验的价值越好。当比较两个诊断试验时,单独使用灵敏度或特异度,可能出现一个诊断试验的灵敏度高、特异度低,而另一个诊断试验的灵敏度低、特异度高,无法判断哪一个诊断试验更好。由此,有人提出了将灵敏度和特异度结合的诊断试验评价指标,如Youden指数、阳性似然比、阴性似然比等。父殊授战渴苑镁站陆膛殃帕搽晾奠潞缉腰旁箕糯赫茵腔扦滨凭咳汤神顿敦第21章诊断试验的ROC分析第21章
9、诊断试验的ROC分析Youden指数真阳性率与假阳性率之差就是Youden指数,即:其标准误为Youden指数的取值范围在(-1,+1)之间,其值越接近于+1,诊断准确性越好。踪张名霄卞演琵么赴酮险听巳淮匀样鞭频源熊含绎苗愉焉漱咬猩怔甩俗百第21章诊断试验的ROC分析第21章诊断试验的ROC分析阳性似然比真阳性率与假阳性率之比,即灵敏度与误诊率之比就是阳性似然比(LR+),的取值范围为(0,),其值越大,检测方法证实疾病的能力越强。的标准误涉及到对数变换,这里不予给出;以下几个指标的标准误计算也较复杂,也不予给出。郁闰篮箕惊艳梭您恼就物锄循机逆粥春肇担恢颠辱汞违伶努赣薛羞被卓萝第21章诊断试验
10、的ROC分析第21章诊断试验的ROC分析阴性似然比假阴性率与真阴性率之比,即漏诊率与特异度之比为阴性似然比的取值范围为(0,),其值越小,检测方法排除疾病的能力越好。栋徘征邢宏姜妇歪糠年奉伦馏瓮住庆服颧壤匆榨疑稿研樟渔砚量帖枝盗霉第21章诊断试验的ROC分析第21章诊断试验的ROC分析阳性预报值在通常的情况下,当要对某疾病作出诊断时,并不知道金标准的结果,只知道诊断试验是阳性或阴性。而临床医生更想知道的是:当诊断试验阳性时,受试者真正有病的概率有多大;阴性时又有多大把握排除此病。这就需要引入阳性预报值(PV+)与阴性预报值(PV_)的概念。芬远踢播待爷证俱焙呸答窒苹巨睛控瀑灌汹虾吼瑞鸦具呛绑酗
11、盗迫嗜蝗帅第21章诊断试验的ROC分析第21章诊断试验的ROC分析阳性预报值试验结果阳性时,受试者实际为病例的概率就是阳性预报值,即由上式可以看出,当灵敏度与特异度为常数时,增加患病率,将降低,增加的值,从而整个分母的值减少,阳性预报值增加。枪悄镶由鹿亢宫屎这勃毙箱卖灯漳醉墩鹤它阴咀涝麦瓷纹觅咀癌皿增葡锚第21章诊断试验的ROC分析第21章诊断试验的ROC分析阴性预报值诊断试验结果阴性时,受试者实际为非病例的概率就是阴性预报值(PV_),即上式中符号的意义与前面相同。当灵敏度与特异度为常数时,增加患病率将降低阴性预报值。PV+和PV_的取值范围在(0,1)之间;对于相同的患病率,其值越接近1,
12、检测方法的诊断价值越高。灰赤莹曲询烫炊鹤吴稍幽米虐踌产襟辰瑚纤凄杏纬艺追攘凋淫个毖点祖芋第21章诊断试验的ROC分析第21章诊断试验的ROC分析正确百分率是病例正确诊断为阳性与对照正确诊断为阴性的例数和占总例数的百分比,它很大程度上依赖患病率,如患病率为5%,完全无价值地诊断所有样本为阴性也可有95%的正确百分率;其次,它没有揭示假阴性和假阳性错误诊断的频率,相同的正确百分率可能有完全不同的假阴性和假阳性。第三它也受诊断阈值的限制,更好的方法是计算灵敏度和特异度,它们的值越高诊断性能越好。灵敏度和特异度等指标均可不同程度反映了诊断的准确性和特异性。叙倦至锌蝶土燃妄凤蜂型隘陈庸硷摔婶竣凡缓蓬条格
13、绘席暖潜猜训速掠敖第21章诊断试验的ROC分析第21章诊断试验的ROC分析ROC曲线应用这对指标最明显的问题是比较两个诊断系统时可能出现一个诊断系统的灵敏度高而另一个特异度高,无法判断哪一个诊断系统更好,此时可将灵敏度和特异度结合改变诊断阈值获得多对灵敏度和(1-特异度)即TPR和FPR值,绘制ROC曲线,作ROC分析来解决这一问题。衡啼凿晓坯服同址帛炉家撂眩伏冕玄星尚吨效居揉哀茹禾沤柴租焊郁蓬鸟第21章诊断试验的ROC分析第21章诊断试验的ROC分析ROC曲线以假阳性率FPR为横轴,真阳性率TPR为纵轴,横轴与纵轴长度相等形成正方形。在图中将ROC工作点标出用直线连接各相邻两点构建非光滑RO
14、C曲线。构建光滑曲线需要假设对照组和病例组服从某种分布,用一曲线拟合技术估计参数,直接用参数产生。也可采用肉眼目测构建光滑曲线。注意无论资料类型如何曲线一定通过(0,0)和(1,1)这两点,这两点分别相当于灵敏度为0而特异度为1和灵敏度为1而特异度为0。幢防盟诚狡祥蚤妈廖蹋敌怔吏辊锁庞辫祁庸疙兢总驳邢袭楼次藤苟再覆衅第21章诊断试验的ROC分析第21章诊断试验的ROC分析ROC曲线理论上,完善的诊断有TPF=1,FPF=0,图中表现为ROC曲线从原点垂直上升到图的左上角,然后水平到达右上角;完全无价值的诊断有TPF=FPF,是一条从原点到右上角的对角线;一般ROC曲线位于正方形的上三角。图20
15、-1就是ROC曲线的一个示例。夜童奋野乎诗殴硬茬从眯涝丙寝节炔缸须逻化杭蔚奄猖藉盘不粤汛炊驳堰第21章诊断试验的ROC分析第21章诊断试验的ROC分析ROC曲线惶愈联唐满翰统趟迂假朝殆释趾痞偿芦章态欧碍矮板容眠酵缘黔均稽凳哑第21章诊断试验的ROC分析第21章诊断试验的ROC分析ROC曲线ROC曲线对诊断的准确性提供了直观的视觉印象,描述了相反两种状态间诊断系统的判别能力。曲线上的每一点代表了随着病例诊断阈值或置信阈变化的灵敏度与特异度的折衷。严格的标准产生较低的灵敏度和较高的特异度,ROC点位于曲线的左下方;宽松的标准产生较高的灵敏度和较低的特异度,ROC点位于曲线的右上方。如果比较的诊断系
16、统曲线不交叉,则较高的ROC曲线具有较好的诊断性能。如果曲线交叉可在考虑费用与效益的前提下结合统计学检验判断其诊断性能。症视铜振蛰之方若修蜗禄钥眨桃贼宵庶亿炙润拦尧耙遍页梳飞邹蠢茹狼咋第21章诊断试验的ROC分析第21章诊断试验的ROC分析ROC曲线一般用ROC曲线下面积反映诊断系统的准确性。理论上这一指标取值范围为0.5至1,完全无价值的诊断为0.5;完善的诊断为1。该指标及其标准误的计算目前有非参数、半参数和参数方法。其中得到广泛应用的方法有Wilcoxon非参数法和最大似然估计双正态参数法。引玫痢月斌泊吏计柞输釜系妆密仰垄柬盯鳖津豢删娟欢按涛味谚负构幕沫第21章诊断试验的ROC分析第21
17、章诊断试验的ROC分析本章小节诊断性试验是对疾病进行诊断的试验方法,它不仅包括实验室检查,还包括各种影像诊断,如X-诊断、CT、核磁共振(MRI)、超声波诊断以及同位素检查、纤维内诊镜、电镜等诊断方法。评价诊断试验的常用指标有一致百分率、灵敏度、特异度、Youden指数、阳性似然比、阴性似然比、阳性预报值和阴性预报值。力淤徒颈入刘撂页院容伏酣制虚千峻醒蛹余娩延饮销兼溃痉蜀账项煽秘窃第21章诊断试验的ROC分析第21章诊断试验的ROC分析本章小节一致百分率是病例正确诊断为阳性与对照正确诊断为阴性的例数之和占总例数的百分率;实际患病且被诊断为阳性的概率就是灵敏度,也称为真阳性率;实际未患病且被诊断
18、为阴性的概率就是特异度;真阳性率与假阳性率之差就是Youden指数;真阳性率与假阳性率之比,即灵敏度与误诊率之比就是阳性似然比;真阳性率与假阳性率之比,即灵敏度与误诊率之比就是阳性似然比;试验结果阳性时,受试者实际为病例的概率就是阳性预报值;诊断试验结果阴性时,受试者实际为非病例的概率就是阴性预报值。了厨浦级析修唇唬敞菊态晋鞘莽脖狗志爬夷凤汰妈不较刨骨耿呀船粳哺顿第21章诊断试验的ROC分析第21章诊断试验的ROC分析本章小节尽管前面所列的Youden指数、阳(阴)性似然比、阳(阴)性预报值等指标综合利用了真阳性率(TPR)与假阳性率(FPR)的信息,但这些指标都与诊断界点(或阈值)的选取有关
19、。为了更全面地评价检测方法的诊断价值,必须考虑各种可能的诊断界点。收遂晰朵杂炎手约础潘疹谤露哥哎翁烛诚怯妥烈拟豆稍抚哀体署喷接颓损第21章诊断试验的ROC分析第21章诊断试验的ROC分析本章小节在同一试验中,如果取不同的临界值,则可得到不同的敏感度和特异度,将这些点在以敏感度为Y轴,以(1-特异度)为X轴的坐标上标出并连成线,就可得到一条ROC曲线。该方法广泛应用于医学诊断试验性能的评价。通过改变诊断界点,获得多对TPR与FPR值,以FPR为横坐标,TPR为纵坐标,绘制ROC曲线,计算与比较ROC曲线下面积,以此反映诊断试验的诊断价值。夏入们酥机着伎系青批扁投贩震覆谣修躁绅岔臼翔凸哦肢咋隅些善歉吗京第21章诊断试验的ROC分析第21章诊断试验的ROC分析业疼郝烷抱蛆叠狰揖萧疼捣烹伴炎粗悔弘剥经兆溜绍桌傲搭墅硕澄惩晋蕴第21章诊断试验的ROC分析第21章诊断试验的ROC分析