《如何评价临床实验文献的优劣课件》由会员分享,可在线阅读,更多相关《如何评价临床实验文献的优劣课件(89页珍藏版)》请在金锄头文库上搜索。
1、临床研究文献质量的临床研究文献质量的严格评价严格评价如何评价临床实验文献的优劣2主要内容主要内容n概述概述n随机对照研究文献的严格评价随机对照研究文献的严格评价n其他类型研究文献的严格评价其他类型研究文献的严格评价如何评价临床实验文献的优劣3一、概述一、概述n来源复杂来源复杂n质量良莠不齐质量良莠不齐n应用时需要结合患者的具体应用时需要结合患者的具体情况情况1、临床研究文献评价的重要性、临床研究文献评价的重要性如何评价临床实验文献的优劣4n内部真实性内部真实性n外部真实性(即适用性)外部真实性(即适用性)n重要性重要性2、文献评价的内容、文献评价的内容如何评价临床实验文献的优劣5真实性或效度(
2、真实性或效度(validityvalidity)是指研究收)是指研究收集的数据、分析结果和所得结论与客观集的数据、分析结果和所得结论与客观实际的符合程度。真实性包括内部真实实际的符合程度。真实性包括内部真实性和外部真实性两个方面性和外部真实性两个方面。真实性(真实性(validity)如何评价临床实验文献的优劣6 定义定义 研究结果与研究结果与实际研究对象真实情况的符合程度,回答一个真实情况的符合程度,回答一个研究本身是否真实或有效。能正确反映研究人群真实状况的研究本身是否真实或有效。能正确反映研究人群真实状况的研究结果,称之为具有内部真实性。研究结果,称之为具有内部真实性。影响因素影响因素
3、研究环境条件;研究环境条件; 研究对象范围(类型的多少)等因素。研究对象范围(类型的多少)等因素。改善措施改善措施 限制研究对象类型;限制研究对象类型; 限定研究的环境条件;限定研究的环境条件; 限定干预措施。限定干预措施。)内部真实性)内部真实性(internal validity)如何评价临床实验文献的优劣7v定义定义 研究结果与研究结果与推论对象推论对象真实情况的符合程度,又称真实情况的符合程度,又称普遍性,普遍性,回答一个研究能否推广应用到研究对象以外的人群。回答一个研究能否推广应用到研究对象以外的人群。 有内部真实性的结果推广到靶人群以外的其他人群仍然有内部真实性的结果推广到靶人群以
4、外的其他人群仍然有效,称之为具有外部真实性。有效,称之为具有外部真实性。v影响因素影响因素 研究人群与其他人群的特征差异、研究对象类型等因素研究人群与其他人群的特征差异、研究对象类型等因素的影响。的影响。v改善措施改善措施 增加研究对象的异质性增加研究对象的异质性)外部真实性)外部真实性(external validity)如何评价临床实验文献的优劣8n没有内部真实性的结果必定没有外部真实性,具有内部真没有内部真实性的结果必定没有外部真实性,具有内部真实性的结果也未必都有外部真实性。实性的结果也未必都有外部真实性。n增加研究对象的同质性(如限制类型如年龄、职业、体质增加研究对象的同质性(如限制
5、类型如年龄、职业、体质特征或疾病分型等),可改善内部真实性。特征或疾病分型等),可改善内部真实性。n增加研究对象的异质性,可改善外部真实性。增加研究对象的异质性,可改善外部真实性。n在研究中经常将只有内部真实性而无外部真实性的结果任在研究中经常将只有内部真实性而无外部真实性的结果任意推广应用至靶人群以外的其他人群,导致张冠李戴、南意推广应用至靶人群以外的其他人群,导致张冠李戴、南辕北辙、贻误时机。辕北辙、贻误时机。n在实际研究中需综合考虑研究对象的同质性和异质性问题。在实际研究中需综合考虑研究对象的同质性和异质性问题。)内部真实性与外部真实性的联系)内部真实性与外部真实性的联系如何评价临床实验
6、文献的优劣9抽样机遇内部真实性和内部真实性和外部真实性外部真实性 病人总体(包括其他设施中的病人)如何评价临床实验文献的优劣10实例:美国退伍军人高血压治疗临床试验实例:美国退伍军人高血压治疗临床试验n研究对象是研究对象是143143例例30307373岁退役军人,平均舒张压岁退役军人,平均舒张压115 115 129mmHg 129mmHg,均无高血压并发症。研究设计严谨,采,均无高血压并发症。研究设计严谨,采用随机分组、双盲观察,研究对象始终配合很好,统用随机分组、双盲观察,研究对象始终配合很好,统计学处理正确。研究结果发现采用双氢克尿噻与利血计学处理正确。研究结果发现采用双氢克尿噻与利血
7、平联合用药能明显降低心、脑、肾等并发症。平联合用药能明显降低心、脑、肾等并发症。n该研究全过程采取措施防止了偏倚发生,因而公认其该研究全过程采取措施防止了偏倚发生,因而公认其结论内部真实性较高。但是,该结论对于女性或非退结论内部真实性较高。但是,该结论对于女性或非退役军人是否有效?对于舒张压不在役军人是否有效?对于舒张压不在115 115 129mmHg 129mmHg范范围内或已有高血压并发症的病人是否也有效呢?该研围内或已有高血压并发症的病人是否也有效呢?该研究是无法解决这些问题的。究是无法解决这些问题的。如何评价临床实验文献的优劣11(1)内部真实性评价)内部真实性评价n研究结果是来自何
8、种设计方案研究结果是来自何种设计方案n有无对照以及设置是否恰当有无对照以及设置是否恰当n对象选择是否合理(诊断、纳入与排除)对象选择是否合理(诊断、纳入与排除)n组间基线状况是否均衡可比、有无相关偏倚因组间基线状况是否均衡可比、有无相关偏倚因素存在以及是否采取了相应的防止或处理的措素存在以及是否采取了相应的防止或处理的措施、依从性如何?施、依从性如何?n对相应的试验观测指标及资料所采用的整理、对相应的试验观测指标及资料所采用的整理、统计分析方法是否恰当统计分析方法是否恰当如何评价临床实验文献的优劣12(2)外部真实性(适用性)评价)外部真实性(适用性)评价n外部真实性、适用性、外推性外部真实性
9、、适用性、外推性n指研究结果或结论在不同人群、不同地指研究结果或结论在不同人群、不同地点和针对具体病例的推广应用价值。点和针对具体病例的推广应用价值。n如:大型临床试验证明使用如:大型临床试验证明使用-受体阻滞剂受体阻滞剂对心力衰竭有益,而对一名伴有糖尿病的患对心力衰竭有益,而对一名伴有糖尿病的患者是否有应适?者是否有应适?如何评价临床实验文献的优劣13(2)重要性评价)重要性评价n指研究结果本身是否具有临床价值指研究结果本身是否具有临床价值n包括临床重要性与统计学意义相方面,包括临床重要性与统计学意义相方面,两者应相互结合,缺一不可。两者应相互结合,缺一不可。n常需要借助于一些定性或定量指标
10、来进常需要借助于一些定性或定量指标来进行行n如:相对危险度降低率如:相对危险度降低率RRR,绝对危险度除,绝对危险度除低率低率ARR、防止一例某种事件发生需要治疗、防止一例某种事件发生需要治疗的病例数的病例数NNT,等。,等。如何评价临床实验文献的优劣143、文献评价的基本步骤、文献评价的基本步骤n明确评价目的明确评价目的n明确文献的研究类型明确文献的研究类型n确定评价内容与顺序确定评价内容与顺序n选择评价方法及评价工具选择评价方法及评价工具如何评价临床实验文献的优劣154、文献评价过程、文献评价过程n明确评价目的明确评价目的n评价目的不同,决定了评价内容和重点各有评价目的不同,决定了评价内容
11、和重点各有侧重侧重n疗效、病因、预后、诊断、卫生经济学评价疗效、病因、预后、诊断、卫生经济学评价n评价结果受评价者自身能力与水平的限制,评价结果受评价者自身能力与水平的限制,需要学习和掌握临床流行病学原则与方法,需要学习和掌握临床流行病学原则与方法,以确保评价结果的真实性和结论的可靠性。以确保评价结果的真实性和结论的可靠性。如何评价临床实验文献的优劣164、文献评价过程、文献评价过程n明确文献的研究类型明确文献的研究类型n原始文献:随机对照研究、队列研究、病例原始文献:随机对照研究、队列研究、病例对照研究、现况研究等对照研究、现况研究等n二次文献:系统综述等二次文献:系统综述等如何评价临床实验
12、文献的优劣174、文献评价过程、文献评价过程n确定评价内容与顺序确定评价内容与顺序n按内部真实性、重要性与适用性的顺序对文按内部真实性、重要性与适用性的顺序对文献展开评价献展开评价如何评价临床实验文献的优劣184、文献评价过程、文献评价过程n选择文献质量评价工具选择文献质量评价工具n清单类清单类(checklist)n尺度类尺度类(scale)如何评价临床实验文献的优劣19二、随机对照试验文献评价二、随机对照试验文献评价n随机对照试验是评价干预措施是否有效、是否随机对照试验是评价干预措施是否有效、是否利大于弊的利大于弊的“金标准金标准”。n随机对照试验的价值因其设计特点所决定。随机对照试验的价
13、值因其设计特点所决定。n随机对照试验的诞生是改变我们建立诊断、预随机对照试验的诞生是改变我们建立诊断、预后和治疗的临床工作的基础。后和治疗的临床工作的基础。(Sackett).(一)基本概念(一)基本概念如何评价临床实验文献的优劣202、随机对照试验优势、随机对照试验优势n按随机化原则分配受试对象至不同的组别,能控制已知或未知的混杂因素,使结果可比。n为前瞻性临床试验,能确定受试对象的标准,主动控制试验措施及确定效应的标准,易于控制偏倚,使试验可重复。n随机对照试验与盲法结合,结果更具说服力.如何评价临床实验文献的优劣(二)随机对照研究评价要点(二)随机对照研究评价要点1、内部真实性评价、内部
14、真实性评价2、重要性评价、重要性评价3、适用性(实用性)评价、适用性(实用性)评价如何评价临床实验文献的优劣221、研究结果是否是真实的?、研究结果是否是真实的?1.是否采用了真实的随机法?是否采取随机隐匿是否采用了真实的随机法?是否采取随机隐匿2.是否随访了纳入研究的所有患者?是否报告了失是否随访了纳入研究的所有患者?是否报告了失访情况?访情况?3.是否随机分配入组的所有患者都进行了分析?是否随机分配入组的所有患者都进行了分析?4.对照设置是否合理?是否采用了盲法?对照设置是否合理?是否采用了盲法?5.是否保证了组间基线状态的可比性是否保证了组间基线状态的可比性6.是否注意了辅助治疗的影响是
15、否注意了辅助治疗的影响7.选择的统计分析方法是否合适?选择的统计分析方法是否合适?如何评价临床实验文献的优劣23随机化与随机隐匿随机化与随机隐匿n随机化是指研究总体中每一个观察单位随机化是指研究总体中每一个观察单位均有同等的机会被选入试验组或对照组。均有同等的机会被选入试验组或对照组。n随机化方法:随机数字表、计算机软件随机化方法:随机数字表、计算机软件n随机隐匿:将随机化分配序列隐藏起来,随机隐匿:将随机化分配序列隐藏起来,以防止分配结局被负责纳入研究对象者以防止分配结局被负责纳入研究对象者预先知晓。预先知晓。如何评价临床实验文献的优劣24为什么要进行随机分配隐匿为什么要进行随机分配隐匿n随
16、机分配序列产生后,受试对象的入组情况就已经随机分配序列产生后,受试对象的入组情况就已经确定。如果受试对象的选择者知道随机分配序列,确定。如果受试对象的选择者知道随机分配序列,在病例选择过程中就预先知道下一个合格对象的在病例选择过程中就预先知道下一个合格对象的入组情况。入组情况。n有时,研究人员为了让具有某种特征的受试对象接有时,研究人员为了让具有某种特征的受试对象接受某种干预措施以获得有益于该干预措施的结果,受某种干预措施以获得有益于该干预措施的结果,就有可能改变随机分配序列,不按照事先产生的就有可能改变随机分配序列,不按照事先产生的分配序列分配对象,而导致选择性偏倚。分配序列分配对象,而导致
17、选择性偏倚。如何评价临床实验文献的优劣25隐匿随机分配方案的方法隐匿随机分配方案的方法n研究表明:与分配方案隐藏完善的试验相比,研究表明:与分配方案隐藏完善的试验相比,未隐藏分配方案或方案分配隐藏不完善的试验,未隐藏分配方案或方案分配隐藏不完善的试验,常常夸大治疗效果常常夸大治疗效果30-41%。n中心电话随机中心电话随机(central telephone randomization)n药房控制随机分配(药房控制随机分配(pharmacy control of allocation)n编号或编码的容器编号或编码的容器(numbered or coded container)n按顺序编码、密封
18、、不透光的信封(按顺序编码、密封、不透光的信封(serially numbered, opaque, sealed envelopes)常用随机方案隐藏的方法常用随机方案隐藏的方法如何评价临床实验文献的优劣26随访与失访随访与失访n治疗期与随访期的区别治疗期与随访期的区别n随访与失访、退出、终止、剔除随访与失访、退出、终止、剔除n失访:受试者找不到失访:受试者找不到n退出:受试者主动退出试验,常由于副作用退出:受试者主动退出试验,常由于副作用n终止:研究者终止受试者的试验,常由于副作用或终止:研究者终止受试者的试验,常由于副作用或受试者违背方案受试者违背方案n剔除:研究结束进行资料整理时,发现
19、不合格者,剔除:研究结束进行资料整理时,发现不合格者,将其剔除不进行分析。将其剔除不进行分析。如何评价临床实验文献的优劣27不完全结局数据不完全结局数据n包含失访、中止、退出与剔除的数据均称为不包含失访、中止、退出与剔除的数据均称为不完全结局数据完全结局数据(incomplete outcome data)n参与了随机分组的患者是否全部进行了分析参与了随机分组的患者是否全部进行了分析n报告与处理报告与处理n假定治疗组所有失访者为阴性结果或发生了不良事假定治疗组所有失访者为阴性结果或发生了不良事件,而对照组的所有失访者为阳性结果或没有不良件,而对照组的所有失访者为阳性结果或没有不良事件,进行统计
20、处理。事件,进行统计处理。如何评价临床实验文献的优劣28不完全结局数据不完全结局数据n参与了随机分组的患者是否全部进行了参与了随机分组的患者是否全部进行了分析分析n意向性分析(意向性分析(intention-to-treat, ITT):根据研究对象最初分组的情况进):根据研究对象最初分组的情况进行分析,不考虑分组后发生的情况。行分析,不考虑分组后发生的情况。n符合方案分析(符合方案分析(per protocol analysis, PPA)如何评价临床实验文献的优劣29结论是否包括纳入研究的全部研究对象内、外科治疗双侧颈动脉狭窄的随机对照试验 暂时性脑缺血发作、卒中或死亡组别 是 否 病人数
21、外科手术组 43 36 79 (54.4%)内科药物组 53 19 72 (73.6%) 2 =5.98 P=0.02 151外科手术的RRR=26%如何评价临床实验文献的优劣30结论是否包括纳入研究的全部研究对象 内、外科治疗双侧颈动脉狭窄的随机对照试验 暂时性脑缺血发作、卒中或死亡组别 是 否 病人数外科手术组 43+15 36 94 (61.7%)内科药物组 53+1 19 73 (74.0%) 2 =2.80 P=0.09 167外科手术的RRR=16.7%如何评价临床实验文献的优劣31研究对象流程图研究对象流程图如何评价临床实验文献的优劣32盲法盲法n盲法的重要性盲法的重要性n盲法的
22、设置盲法的设置n设置盲法的目的设置盲法的目的如何评价临床实验文献的优劣33随机分配方案隐匿与盲法比较随机分配方案隐匿与盲法比较n两者的作用目的、实施阶段与可行性不一样两者的作用目的、实施阶段与可行性不一样n前者目的是为了避免选择性偏倚,作用在受试前者目的是为了避免选择性偏倚,作用在受试者分配入组之前,在任何随机对照试验中都可者分配入组之前,在任何随机对照试验中都可实施。实施。n后者的目的是为了避免受试对象和研究人员的后者的目的是为了避免受试对象和研究人员的主观偏倚,作用在受试对象分配入组并接受相主观偏倚,作用在受试对象分配入组并接受相应干预措施后,并不是任何随机对照试验都可应干预措施后,并不是
23、任何随机对照试验都可全部实施。全部实施。如何评价临床实验文献的优劣34基础治疗与基线情况基础治疗与基线情况n除考核的干预措施外,其他治疗是否相除考核的干预措施外,其他治疗是否相同同n两组间治疗前基本情况是否具有可比性两组间治疗前基本情况是否具有可比性n当样本含量小于当样本含量小于200例时,即使执行了例时,即使执行了严格的随机化程序,也有可能导致一些严格的随机化程序,也有可能导致一些基线情况不可比。基线情况不可比。如何评价临床实验文献的优劣35统计方法是否合理统计方法是否合理n多数临床研究存在的问题多数临床研究存在的问题n统计方法的合理选择与研究设计、分析目的以及分统计方法的合理选择与研究设计
24、、分析目的以及分析的指标属性与分布类型有关。析的指标属性与分布类型有关。n亚组分析风险亚组分析风险n基于全部受试人员得到的结论可靠性远大于只基于部分基于全部受试人员得到的结论可靠性远大于只基于部分人群分析的结论可靠性。人群分析的结论可靠性。n探索性亚组分析(事后)不可避免地带来偏性探索性亚组分析(事后)不可避免地带来偏性n但确证性亚组分析(事先设计)结果同样可靠。但确证性亚组分析(事先设计)结果同样可靠。如何评价临床实验文献的优劣36无对照试验不能肯定干预措施的真正疗效无对照试验不能肯定干预措施的真正疗效n疾病自愈倾向n安慰剂效应 X线照射脑垂体治疗高血压,X线组17(25) 假动作组14(1
25、8)n霍桑效应:指人们因为成了研究中特别感兴趣和观察的目标而改变他们的心理和行为的一种倾向。受试者只对特别注意产生兴趣而不是疗法本身。合理设置对照合理设置对照如何评价临床实验文献的优劣37自然自然 转归转归安慰剂安慰剂+霍桑效应霍桑效应传统疗法传统疗法新疗法新疗法试验性治疗真实效应示意图试验性治疗真实效应示意图如何评价临床实验文献的优劣38两种“有效”药物和一种安慰剂与不给药对慢性瘙痒控制的比较n药物 瘙痒计分 缓解率%nPeriactin 27.6 44nTemaril 34.6 30n安慰剂 30.4 39n不给药 49.6 19如何评价临床实验文献的优劣39不合理的对照n历史对照n自身前
26、后对照n同期非随机对照(按病人的意愿,两组分属两个医院等)如何评价临床实验文献的优劣40非随机对照试验结果可信的条件n某种疾病不容易误诊n其他因素不易影响疾病的进程n终点指标的判断明确(伤残、死亡)n既往治疗无能为力n如果一种新疗法明显改变了疾病的进程,而且在不同地区、人群及医生取得了相似的结果。这种结论也是可信的。如何评价临床实验文献的优劣412、重要性评价、重要性评价n治疗效果的大小是多少?治疗效果的大小是多少?n治疗效果的精确度如何?治疗效果的精确度如何?n该结果是否有临床意义?该结果是否有临床意义?如何评价临床实验文献的优劣42治疗的统计学效果治疗的统计学效果n可信区间是按一定的概率估
27、计总体参数可信区间是按一定的概率估计总体参数所在的范围。常用所在的范围。常用95%的概率进行估计的概率进行估计n可信区间越宽,说明被估计的总体参数可信区间越宽,说明被估计的总体参数可能的取值范围越宽;而越窄则说明总可能的取值范围越宽;而越窄则说明总体参数可能的取值范围越窄。体参数可能的取值范围越窄。n可信区间越宽,研究结果的精确度越差;可信区间越宽,研究结果的精确度越差;反之则越好。反之则越好。如何评价临床实验文献的优劣43是否同时考虑临床意义和统计学意义n关心试验措施与对照措施差异有否统计学意义,更要关心这种差异是否有临床意义。n常用的效应指标有: 绝对危险降低率(ARR)=Pc-Pe 相对
28、危险降低率(RRR)=(Pc-Pe)/ Pc 需治疗人数(NNT)=1 / ARR如何评价临床实验文献的优劣44某项降血脂试验的疗效分析组别心梗发生率RRRARRNNT试验组0.08 0. 50.0813对照组0.16如何评价临床实验文献的优劣45n统计学意义只是告诉我们这种差异极可能是真实的,而不能指出这种差异是否有临床意义 P0.05?n差异确有临床意义而没有统计学意义,提示样本量不足,效能过低。n结果有统计学意义而没有临床意义,说明其应用性差。如何评价临床实验文献的优劣463、研究结果的适用性(外部真实、研究结果的适用性(外部真实性)性)n研究中的患者与临床实际中的患者有何研究中的患者与
29、临床实际中的患者有何差别差别n研究中的治疗措施是否现实可行研究中的治疗措施是否现实可行n是否报告全部临床结果是否报告全部临床结果如何评价临床实验文献的优劣47研究中的患者与临床实际中的患研究中的患者与临床实际中的患者有何差别者有何差别n研究中的患者情况是否详细?研究中的患者情况是否详细?n纳入对象有明确的诊断标准、纳入标准、排除标准。n对病人的年龄、性别、民族、临床表现,病情、病程、病型进行描述n中医辨证分型的标准。n研究中的患者与临床实际中的患者有何研究中的患者与临床实际中的患者有何差别?差别?如何评价临床实验文献的优劣48该项措施是否切实可行n切实可行的干预措施的特征切实可行的干预措施的特
30、征n详细描述研究的有关内容,别人能重复。n能改善该病的临床过程。n考虑到卫生经济学价值。n治疗措施适合临床实际并能为医生掌握,病人能理解,经济上能承担,行动上能遵从。n是否报告不良反应。如何评价临床实验文献的优劣49是否报告了全部临床结果1. 是一种科学态度,更是医疗道德问题 如氯贝丁酯防治冠心病随机对照试验 安慰剂 氯贝丁酯 血清胆固醇变化 +1 -9 非致命心梗发病率 7.2 5.8 致命心梗发病率 8.9 7.4 病死率 (%0) 5.2 6.2如果研究者如果研究者不报告病死不报告病死率的结果,率的结果,将会产生何将会产生何种后果?种后果?如何评价临床实验文献的优劣50是否报告了全部临床
31、结果 2. 有否采用次要的结局指标代替主要结局指有否采用次要的结局指标代替主要结局指标。标。 疾病影响健康的结局: 病理改变 各种症状、体征、不适 日常生活能力减退 社会活动功能障碍 死亡如何评价临床实验文献的优劣51结局指标n主要结局指标:指那些对病人影响最大,病人最关心,最希望避免的临床事件。n次要结局指标:指单纯的生物学指标,包括体征和实验室检测。次要指标只有被证实能反映主要结局的变化,与主要结局有相关性,并确定由治疗所带来的结果时,选择为疗效判定指标才有意义。如何评价临床实验文献的优劣52主要结局指标与次要结局指标的比较n是真正的疾病结局,是真正的疾病结局,易于反映真正的干预易于反映真
32、正的干预效果效果 n能反映干预的真正效能反映干预的真正效果,偏倚较少果,偏倚较少 n不是真正的临床结局,不是真正的临床结局,恰当的次要结局指标也恰当的次要结局指标也可反映真正的干预效果可反映真正的干预效果并在一定条件下替代主并在一定条件下替代主要结局指标要结局指标 n出出现现时时间间较较早早,节节省省试试验验时时间间;较较客客观观,变变异异小小,易易测测量量;往往往往能能大大大减少样本量大减少样本量如何评价临床实验文献的优劣53主要结局指标与次要结局指标的比较n出出现现时时间间晚晚,试试验验所所需需时时间间较较长长,某某些些主主观观指指标标变变异异大大,不不稳稳定定;需需要要样样本本量量大大;
33、若若结结局局出出现现距距干干预预结结束束时时间间较较长长,则则易易受受其他非干预因素干扰其他非干预因素干扰n验证疗效,推广应用验证疗效,推广应用n若不经过严格的效度若不经过严格的效度评价,易产生偏倚评价,易产生偏倚(现时所用的替代指现时所用的替代指标极少满足严格的效标极少满足严格的效度评价条件度评价条件) n探索治疗的机理,一探索治疗的机理,一定条件下也用于疗效定条件下也用于疗效的验证的验证 如何评价临床实验文献的优劣(三)常用临床试验质量(三)常用临床试验质量评价工具介绍评价工具介绍1 1、随机对照临床试验报告的国、随机对照临床试验报告的国际规范际规范(CONSORT)2、GRADE证据分级
34、与推荐证据分级与推荐3、Cochrane偏倚风险评估偏倚风险评估如何评价临床实验文献的优劣55 1、随机对照临床试验报告的国际规随机对照临床试验报告的国际规范范(CONSORT) 20世纪90年代中期,一个由国际知名的临床试验专家、统计学家、流行病学家和生物医学杂志编辑组成的小组开始起草并发表了一项方法学的研究报告,即如何提高随机对照试验报告的质量。根据几年的使用和反馈意见,该小组对报告又进行了修订,权威杂志于2010年再次发表。最新的报告由25个条目的清单和一张报告的流程图组成。 如何评价临床实验文献的优劣561.题目、摘要与前言题目、摘要与前言如何评价临床实验文献的优劣57对象与方法(对象
35、与方法(1)如何评价临床实验文献的优劣58对象与方法(对象与方法(2)如何评价临床实验文献的优劣59结果结果如何评价临床实验文献的优劣60讨论及其他讨论及其他如何评价临床实验文献的优劣61研究对象流程图研究对象流程图如何评价临床实验文献的优劣n题目与摘要题目与摘要(条目条目1):是否有能反映随机对是否有能反映随机对照试验的题目和摘要(照试验的题目和摘要(1a1a),以及能体现),以及能体现试验设计、方法、结果和结论部分的结构试验设计、方法、结果和结论部分的结构式摘要(式摘要(1b1b)。)。n引言引言( (条目条目2)2):是否叙述了研究的背景和依是否叙述了研究的背景和依据据(2a)(2a)并
36、明确具体的目的和假设并明确具体的目的和假设(2b)(2b)。题目、摘要与研究背景(条目题目、摘要与研究背景(条目1-2)CONSORT声明解读声明解读如何评价临床实验文献的优劣63n试验设计试验设计(条目(条目3 3 ):是否描述了试验设计方法,:是否描述了试验设计方法,以及受试者入组的比例(以及受试者入组的比例(3a)3a);试验后是否对试验设;试验后是否对试验设计进行了重要改变,如有,是否说明原因计进行了重要改变,如有,是否说明原因(3b)(3b)。n受试者受试者( (条目条目4 4):方法部分中,是否描述了研究对方法部分中,是否描述了研究对象需有纳入、排除标准象需有纳入、排除标准(4a)
37、(4a),以及研究进行的场所,以及研究进行的场所和资料来源和资料来源(4b)(4b)。n干预措施干预措施( (条目条目5)5):是否:是否详细描述各组的干预措施以详细描述各组的干预措施以及治疗方案如应用途径及时间,以便他人能够重复。及治疗方案如应用途径及时间,以便他人能够重复。 研究方法(条目研究方法(条目3-12)如何评价临床实验文献的优劣64n结局指标结局指标( (条目条目6)6):是否完整而确切地说明预先:是否完整而确切地说明预先设定的主要和次要结局指标及其测定的方法和时设定的主要和次要结局指标及其测定的方法和时间间(6a)(6a);如果对结局指标有更改,是否说明原因;如果对结局指标有更
38、改,是否说明原因(6b)(6b)。 n样本大小样本大小( (条目条目7)7):是否说明如何计算样本含量:是否说明如何计算样本含量及测算依据及测算依据(7a)(7a);必要时,解释中期分析和试验必要时,解释中期分析和试验中止的原则中止的原则(7b)(7b)。 n随机化随机化(条目条目8):是否报告:是否报告产生随机分配的序列产生随机分配的序列的方法如随机数字表等(的方法如随机数字表等(8a8a);是否报告随机分);是否报告随机分组的类型如完全随机、区组随机等组的类型如完全随机、区组随机等(8b)(8b)。 研究方法(条目研究方法(条目3-12)如何评价临床实验文献的优劣65n随机分配方案隐藏随机
39、分配方案隐藏(条目条目9):是否报告了随机分配序列的机制,:是否报告了随机分配序列的机制,即隐藏方法即隐藏方法如中心随机化、药房控制的随机、密封的不透光的如中心随机化、药房控制的随机、密封的不透光的序列编码的信封;序列编码的信封; n随机的实施随机的实施(条目条目l0):是否:是否注明由谁来产生随机方案、谁来登注明由谁来产生随机方案、谁来登记病人、谁对病人进行分组;记病人、谁对病人进行分组;n盲法盲法(条目条目11):是否对病人、干预措施的实施者、结局评估者、:是否对病人、干预措施的实施者、结局评估者、数年据分析者进行设盲,盲法如何实施数年据分析者进行设盲,盲法如何实施(11a)?必要时,需)
40、?必要时,需描述两组干预措施的相似之处即安慰剂的情况描述两组干预措施的相似之处即安慰剂的情况(11b)。n统计分析方法统计分析方法(条目(条目12):是否详细描写了各类指标的可能统:是否详细描写了各类指标的可能统计分析方法计分析方法(12a);以及可能的附加分析方法(;以及可能的附加分析方法(11b)。)。研究方法(条目研究方法(条目3-12)如何评价临床实验文献的优劣66结果(条目结果(条目13-19)n受试者流程受试者流程(条目条目13):结果部分中,是否报告了研结果部分中,是否报告了研究对象进入试验的流向图,如果没有,是否详细描究对象进入试验的流向图,如果没有,是否详细描述了受试者在试验
41、各阶段的走向及流失情况。包括述了受试者在试验各阶段的走向及流失情况。包括详细报告随机分配到各组的例数、接受已知分配干详细报告随机分配到各组的例数、接受已知分配干预的例数以及纳入主要结局分析的例数预的例数以及纳入主要结局分析的例数(13a)(13a);以及;以及分组后,各组脱落和剔除的例数,并说明原因分组后,各组脱落和剔除的例数,并说明原因(13b)(13b)。 n受试者招蓦受试者招蓦(条目条目14):是否说明招蓦期和随访时间:是否说明招蓦期和随访时间的长短,并说明具体日期的长短,并说明具体日期(14a);是否说明中断或停;是否说明中断或停止试验的原因止试验的原因(14b) 如何评价临床实验文献
42、的优劣67结果(条目结果(条目13-19)n基线资料基线资料(条目条目15):是否用表格列出各组的人:是否用表格列出各组的人口和临床特征的基线资料口和临床特征的基线资料的比较情况。的比较情况。n纳入分析的病例数纳入分析的病例数(条目条目16):是否报告各组纳:是否报告各组纳入每种分析的受试者数目,以及是否按最初的入每种分析的受试者数目,以及是否按最初的分组分析即意向性治疗分组分析即意向性治疗(ITT)分析原则,即无分析原则,即无论退出与失访多少,均按照随机分配的最初的论退出与失访多少,均按照随机分配的最初的全部受试者进行统计分析。全部受试者进行统计分析。如何评价临床实验文献的优劣68结果(条目
43、结果(条目13-19)n结局及其效应结局及其效应(条目条目17):是否报告了每组主要和次要:是否报告了每组主要和次要结局指标的效应估计值及其精确性,即给出各组汇总结局指标的效应估计值及其精确性,即给出各组汇总的结果、计算的效应值及其精确度如的结果、计算的效应值及其精确度如95可信区间可信区间(17a)(17a);对于二分类指标,是否给出绝对效应值如;对于二分类指标,是否给出绝对效应值如15/20(17b)15/20(17b)。n附加分析附加分析(条目条目18):附加分析指通过亚组和校正分析:附加分析指通过亚组和校正分析探讨对结果解释的多种假设。对于附加分析是否指出探讨对结果解释的多种假设。对于
44、附加分析是否指出哪些是预先设定的,哪些是新尝试的分析。哪些是预先设定的,哪些是新尝试的分析。n不良事件不良事件(条目条目19):是否报告每一组的所有重要的不:是否报告每一组的所有重要的不良事件或不良反应。良事件或不良反应。 如何评价临床实验文献的优劣69讨论(条目讨论(条目20-22)n研究的局限性研究的局限性(条目条目20):在:在讨论部分中,是否讨论部分中,是否结合试验的假设、潜在的偏倚或试验的局限性结合试验的假设、潜在的偏倚或试验的局限性和与结果分析相关的危险性进行讨论;和与结果分析相关的危险性进行讨论; n推广应用性推广应用性(条目条目21):是否对试验结果的外部:是否对试验结果的外部
45、真实性即推广应用性加以解释;真实性即推广应用性加以解释;n证据的综合证据的综合(条目条目22):是否根据当前证据对试:是否根据当前证据对试验结果进行综合性解释。验结果进行综合性解释。即本研究与相关其他即本研究与相关其他研究之间的比较分析。研究之间的比较分析。如何评价临床实验文献的优劣70其他信息(条目其他信息(条目23-25)n临床试验注册临床试验注册(条目(条目23):是否报告了:是否报告了临床试验注册号和注册机构。临床试验注册号和注册机构。n研究方案研究方案(条目(条目24):是否报告了研究:是否报告了研究方案的发表情况或可查阅情况方案的发表情况或可查阅情况n研究资助情况研究资助情况(条目
46、(条目25)如何评价临床实验文献的优劣71关于关于CONSORT声明的说明声明的说明nCONSORT声明是为了提高报告质量而制订声明是为了提高报告质量而制订的,不是用来评价研究设计质量。但报告质的,不是用来评价研究设计质量。但报告质量与设计质量有关联。量与设计质量有关联。n两者关系两者关系 设计好设计好 报告好报告好 优秀,最理想优秀,最理想 设计差设计差 报告差报告差 实事求是实事求是 设计好设计好 报告差报告差 损害研究质量损害研究质量 设计差设计差 报告好报告好 夸大结果,属弄虚作假夸大结果,属弄虚作假如何评价临床实验文献的优劣72关于关于CONSORT声明的说明声明的说明nCONSOR
47、T声明主要目的是透明报告试验结果。虽然如声明主要目的是透明报告试验结果。虽然如此,此,CONSORT也会间接地影响试验的设计与实施。也会间接地影响试验的设计与实施。n如果研究工作存在缺陷,透明的报告将暴露这些缺陷。如果研究工作存在缺陷,透明的报告将暴露这些缺陷。因为如果实施了设计不当的试验,在透明报告中研究人因为如果实施了设计不当的试验,在透明报告中研究人员将无法不披露其中的不足而通过论文发表的审核程序。员将无法不披露其中的不足而通过论文发表的审核程序。n因此,这种日益变得现实的处境将为改进将来的试验设因此,这种日益变得现实的处境将为改进将来的试验设计和实施提供了原动力。计和实施提供了原动力。
48、n所以,所以,CONSORT是有助于研究者提高临床研究设计水是有助于研究者提高临床研究设计水平。平。如何评价临床实验文献的优劣732、评价工具、评价工具-GRADEnGRADE工作组工作组2000年由一群有志于克年由一群有志于克服当前卫生保健分级系统缺陷的人组成服当前卫生保健分级系统缺陷的人组成的非正式协作网发展而来。我们的目标的非正式协作网发展而来。我们的目标是建立一个普适、恰当的方法对证据质是建立一个普适、恰当的方法对证据质量和推荐强度进行分级。量和推荐强度进行分级。n是针对证据体而不是单个临床研究结果是针对证据体而不是单个临床研究结果 如何评价临床实验文献的优劣74GRADE系统对证据质
49、量分级系统对证据质量分级n高质量:进一步研究也不能改变该疗效评估结高质量:进一步研究也不能改变该疗效评估结果的可信度果的可信度n中等质量:进一步研究很可能影响该疗效评估中等质量:进一步研究很可能影响该疗效评估结果的可信度,且可能改变该评估结果。结果的可信度,且可能改变该评估结果。n低质量:进一步研究极有可能影响该疗效评估低质量:进一步研究极有可能影响该疗效评估结果的可信度,且该评估结果很可能改变结果的可信度,且该评估结果很可能改变n极低质量:任何疗效评估结果都很不确定。极低质量:任何疗效评估结果都很不确定。如何评价临床实验文献的优劣75影响证据质量级别的因素影响证据质量级别的因素n可能降低证据
50、质量的因素可能降低证据质量的因素n研究的局限性研究的局限性: 方法学缺陷方法学缺陷n研究结果不一致:不同研究间结果的异质性研究结果不一致:不同研究间结果的异质性n间接证据:间接证据:A与与C,B与与C存在,存在,A与与B?n结果不精确:可信区间较宽结果不精确:可信区间较宽n报告有偏倚:是否存在发表偏倚报告有偏倚:是否存在发表偏倚n可能增加证据质量的因素可能增加证据质量的因素n效应值很大效应值很大n可能的混杂因素会降低疗效可能的混杂因素会降低疗效n剂量剂量-效应关系效应关系如何评价临床实验文献的优劣76GRADE对证据的推荐强度对证据的推荐强度n只有只有“强推荐强推荐”和和“弱推荐弱推荐”两个级
51、别,主要根据某干预两个级别,主要根据某干预措施的措施的“利利”与与“弊弊”的确定程度来界定。的确定程度来界定。n“利利”指降低发病率和病死率、提高生活质量、降低医疗负担和资指降低发病率和病死率、提高生活质量、降低医疗负担和资源消耗等源消耗等n“弊弊”则与之相反则与之相反n强推荐:确定干预措施的利大于弊或利小于弊;强推荐:确定干预措施的利大于弊或利小于弊;n支持使用的强推荐支持使用的强推荐n反对使用的强推荐反对使用的强推荐n弱推荐:干预措施可能利大于弊或者利小于弊,但把握不弱推荐:干预措施可能利大于弊或者利小于弊,但把握不大大n支持使用的弱推荐支持使用的弱推荐n反对使用的弱推荐反对使用的弱推荐如
52、何评价临床实验文献的优劣77决定证据推荐强度的关键因素决定证据推荐强度的关键因素n利弊关系:利弊关系:n利弊间的差别越大,越适合作出强推荐;反之只能是弱利弊间的差别越大,越适合作出强推荐;反之只能是弱推荐推荐n证据质量:证据质量:n证据质量越高,越适合作出强推荐证据质量越高,越适合作出强推荐n价值观和意愿:价值观和意愿:n价值观和意愿越大,或不确定性越大,越适合弱推荐价值观和意愿越大,或不确定性越大,越适合弱推荐n成本成本n成本越高,越不适合作出强推荐。成本越高,越不适合作出强推荐。如何评价临床实验文献的优劣78形成推荐的形成推荐的GRADE过程图过程图证据总体质量评价证据总体质量评价如何评价
53、临床实验文献的优劣79http:/如何评价临床实验文献的优劣80如何评价临床实验文献的优劣81如何评价临床实验文献的优劣823、Cochrane风险评估表风险评估表n由由Cochrane系统评价方法学小组制订系统评价方法学小组制订n旨在对纳入旨在对纳入Cochrane系统综述的临床试系统综述的临床试验性文献的方法学质量进行评估。验性文献的方法学质量进行评估。n共有共有7个条目个条目(6个方面),每个条目用高个方面),每个条目用高风险、低风险和不清楚三个等级表示风险、低风险和不清楚三个等级表示 如何评价临床实验文献的优劣83如何评价临床实验文献的优劣84Cochrane 文献质量评价方法 -偏倚
54、风验评估表(图)Selection biasPerformance biasDetection bias如何评价临床实验文献的优劣85续表Attrition biasReporting biasOther bias如何评价临床实验文献的优劣86质量评估图质量评估图如何评价临床实验文献的优劣87评估结果评估结果如何评价临床实验文献的优劣88文献总体质量的评估文献总体质量的评估如何评价临床实验文献的优劣89三、其他类型研究文献的评价三、其他类型研究文献的评价n观察性研究文献的严格评价观察性研究文献的严格评价n诊断性试验文献的严格评价诊断性试验文献的严格评价n系统综述的严格评价系统综述的严格评价如何评价临床实验文献的优劣