《多元线性回归分析(3)课件》由会员分享,可在线阅读,更多相关《多元线性回归分析(3)课件(49页珍藏版)》请在金锄头文库上搜索。
1、 讲述内容讲述内容第一节第一节 多元线性回归多元线性回归第二节第二节 自变量选择方法自变量选择方法第三节第三节 多元线性回归的应用多元线性回归的应用 及其注意事项及其注意事项多元线性回归分析(3)课件目的:作出以多个自变量估计应变量的多元线性回归方程。资料:应变量为定量指标;自变量全部或大部分为定量指标,若有少量定性或等级指标需作转换。用途:解释和预报。意义:由于事物间的联系常常是多方面的,一个应变量的变化可能受到其它多个自变量的影响,如糖尿病人的血糖变化可能受胰岛素、糖化血红蛋白、血清总胆固醇、甘油三脂等多种生化指标的影响。多元线性回归分析(3)课件第一节第一节 多元线性回归多元线性回归多元
2、线性回归分析(3)课件变量:变量:应变量应变量1个,自变量个,自变量m 个,共个,共m+1个。个。样本含量:样本含量:n数据格式见表数据格式见表15-1回归模型一般形式:回归模型一般形式:一、多元线性回归模型一、多元线性回归模型多元线性回归分析(3)课件表15-1多元回归分析数据格式条件条件(1)Y与mXXX,21L之间具有线性关系。(2)各例观测值), 2 , 1(niYiL=相互独立。(3)残差 e 服从均数为 0、方差为2s的正态分布,它等价于对任意一组自变量mXXX,21L值,应变量 Y 具有相同方差,并且服从正态分布。多元线性回归分析(3)课件一一般般步步骤骤建立回归方程(2)检验并
3、评价回归方程检验并评价回归方程及各自变量的作用大小及各自变量的作用大小多元线性回归分析(3)课件二、多元线性回归方程的建立例15-127名糖尿病人的血清总胆固醇、甘油三脂、空腹胰岛素、糖化血红蛋白、空腹血糖的测量值列于表15-2中,试建立血糖与其它几项指标关系的多元线性回归方程。多元线性回归分析(3)课件表15-227名糖尿病人的血糖及有关变量的测量结果多元线性回归分析(3)课件求偏导数原理最小二乘法多元线性回归分析(3)课件三、假设检验及其评价1.方差分析法:方差分析法:(一)对回归方程多元线性回归分析(3)课件多元线性回归分析(3)课件表15-4例15-1的方差分析表表15-3多元线性回归
4、方差分析表多元线性回归分析(3)课件2.决定系数决定系数R 2:多元线性回归分析(3)课件3.复相关系数复相关系数多元线性回归分析(3)课件(二)对各自变量指明方程中的每一个自变量对Y的影响(即方差分析和决定系数检验整体)。1.偏回归平方和多元线性回归分析(3)课件多元线性回归分析(3)课件表表15-5对例对例15-1数据作回归分析的部分中间结果数据作回归分析的部分中间结果各各自自变变量量的的偏偏回回归归平平方方和和可可以以通通过过拟拟合合包包含含不不同同自自变变量量的的回回归归方方程程计计算算得得到到,表表15-515-5给给出出了了例例15-115-1数数据分析的部分中间结果。据分析的部分
5、中间结果。多元线性回归分析(3)课件结结果果多元线性回归分析(3)课件2.t 检验法是一种与偏回归平方和检验完全等价的一种方法。计算公式为多元线性回归分析(3)课件结结 果果结结 论论多元线性回归分析(3)课件3标准化回归系数变量标准化是将原始数据减去相应变量的均数,然后再除以该变量的标准差。计算得到的回归方程称作标准化回归方程,相应的回归系数即为标准化回归系数。多元线性回归分析(3)课件注意:注意: 一般回归系数一般回归系数有单位,用来解释各自有单位,用来解释各自变量对应变量的影响,表示在其它自变量保变量对应变量的影响,表示在其它自变量保持不变时,持不变时, 增加或减少一个单位时增加或减少一
6、个单位时Y Y 的平的平均变化量均变化量 。不能用各。不能用各 来比较各来比较各 对对 的影响大小。的影响大小。 标准化回归系数标准化回归系数无单位,用来比较各无单位,用来比较各自变量对应变量的影响大小,自变量对应变量的影响大小, 越大,越大, 对对 的影响越大。的影响越大。多元线性回归分析(3)课件结结论论多元线性回归分析(3)课件第二节自变量选择方法目的目的:使得预报和(或)解释效果好多元线性回归分析(3)课件一、全局择优法目的:预报效果好意义:对自变量各种不同的组合所建立的回归方程进行比较择优。选择方法:多元线性回归分析(3)课件多元线性回归分析(3)课件多元线性回归分析(3)课件例15
7、-2用全局择优法对例15-1数据的自变量进行选择。多元线性回归分析(3)课件二、逐步选择法1.1.前进法,回归方程中的自变量从无到有、从少到多逐个引入回归方程。此法已基本淘汰。2.后退法,先将全部自变量选入方程,然后逐步剔除无统计学意义的自变量。剔除自变量的方法是在方程中选一个偏回归平方和最小的变量,作F检验决定它是否剔除,若无统计学意义则将其剔除,然后对剩余的自变量建立新的回归方程。重复这一过程,直至方程中所有的自变量都不能剔除为止。理论上最好,建议使用采用此法。3.逐步回归法,逐步回归法是在前述两种方法的基础上,进行双向筛选的一种方法。该方法本质上是前进法。多元线性回归分析(3)课件多元线
8、性回归分析(3)课件表15-7逐步回归过程多元线性回归分析(3)课件表15-8例15-3方差分析表“最优”回归方程为结果表明:血糖的变化与甘油三脂、胰岛素和糖化血红蛋白有线性回归关系,其中与胰岛素负相关。由标准化回归系数看出,糖化血红蛋白对空腹血糖的影响最大。多元线性回归分析(3)课件表15-9例15-3的回归系数的估计及检验结果多元线性回归分析(3)课件第三节多元线性回归的应用及注意事项多元线性回归分析(3)课件一、多元线性回归的应用多元线性回归分析(3)课件1.影响因素分析 例如影响例如影响高血压的因素高血压的因素可能有可能有年龄年龄、饮饮食习惯食习惯、吸烟状况、吸烟状况、工作紧张度工作紧
9、张度和和家族史家族史等,在影响高血压的众多可疑因素中,需等,在影响高血压的众多可疑因素中,需要研究哪些因素有影响,哪些因素影响较要研究哪些因素有影响,哪些因素影响较大。大。多元线性回归分析(3)课件在临床试验中,则可能由于种种原因难以在临床试验中,则可能由于种种原因难以保证各组的指标基线相同,如在保证各组的指标基线相同,如在年龄年龄、病病情情等指标不一致出现混杂的情况下,如何等指标不一致出现混杂的情况下,如何对不同的治疗方法进行比较等。对不同的治疗方法进行比较等。 这些问题都可以利用这些问题都可以利用回归分析回归分析来处理。来处理。控制混杂因素控制混杂因素( (confoundingfacto
10、r) )的一个的一个简单办法就是将其引入回归方程中,简单办法就是将其引入回归方程中,与其与其他主要变量一起进行分析他主要变量一起进行分析 多元线性回归分析(3)课件2.估计与预测如由儿童的如由儿童的心脏横径心脏横径、心脏纵径心脏纵径和和心脏宽心脏宽径径估计估计心脏的表面积心脏的表面积;由胎儿的;由胎儿的孕龄孕龄、头头颈颈、胸径胸径和和腹径腹径预测预测出生儿出生儿体重体重等。等。 多元线性回归分析(3)课件3.统计控制逆估计。 例如采用射频治疗仪治疗脑肿瘤,脑例如采用射频治疗仪治疗脑肿瘤,脑皮质的皮质的毁损半径毁损半径与与射频温度射频温度及及照射时间照射时间有有线性回归关系,建立回归方程后可以按
11、预线性回归关系,建立回归方程后可以按预先给定的脑皮质毁损半径,确定最佳控制先给定的脑皮质毁损半径,确定最佳控制射频温度和照射时间。射频温度和照射时间。 多元线性回归分析(3)课件二、多元线性回归应用的注意事项二、多元线性回归应用的注意事项1指标的数量化指标的数量化分2类,可用一个(0,1)变量。如性别分k类,k-1个(0,1)变量,如血型。多元线性回归分析(3)课件数据格式回归方程建立回归方程建立回归方程b1 :相当相当A型相对于型相对于O型的差别型的差别b2 :相当:相当B型相对于型相对于O型的差别型的差别b3 :相当:相当AB型相对于型相对于O型的差别型的差别多元线性回归分析(3)课件(3
12、)等级定量。一般是将等级从弱到强转换为(或)如文化程度分为小学、中学、大学、大学以上四个等级。Y为经济收入。解释:b(b1)反映X(X1) 增加1个单位, 增加b个单位(如:500元)。表示中学文化较小学收入多500,大学较中学多500,余类推。多元线性回归分析(3)课件b1,b2,b3分别反映中学、大学、大学以上相对于小学分别反映中学、大学、大学以上相对于小学文化程度者经济收入差别的大小文化程度者经济收入差别的大小也可将K个等级转换为K-1个(0,1)变量多元线性回归分析(3)课件2样本含量:n=(510)m。3关于逐步回归:对逐步回归得到的结果不要盲目的信任,所谓的“最优”回归方程并不一定
13、是最好的,没有选入方程的变量也未必没有统计学意义。例如,例15-3中若将选入标准和剔除标准定为和选入的变量是,而不是,结果发生了改变。不同回归方程适应于不同用途,依专业知识定。多元线性回归分析(3)课件4.多重共线性即指一些自变量之间存在较强的线性关系。如高血压与年龄、吸烟年限、饮白酒年限等,这些自变量通常是高度相关的,有可能使通过最小二乘法建立回归方程失效,引起下列一些不良后果:(1)参数估计值的标准误变得很大,从而t值变得很小。(2)回归方程不稳定,增加或减少某几个观察值,估计值可能会发生很大的变化。(3)t检验不准确,误将应保留在模型中的重要变量舍弃。(4)估计值的正负符号与客观实际不一致。消除多重共线性:剔除某个造成共线性的自变量,重建回归方程;合并自变量;采用逐步回归方法。多元线性回归分析(3)课件多元线性回归分析(3)课件多元线性回归分析(3)课件多元线性回归分析(3)课件多元线性回归分析(3)课件