《含定性变量的回归模型.doc》由会员分享，可在线阅读，更多相关《含定性变量的回归模型.doc（8页珍藏版）》请在金锄头文库上搜索。
1、含定性变量的回归模型一、自变量中含有定性变量的回归模型在回归分析中，对一些自变量是定性变量的情形先量化处理，引入只取0和1 两个值的虚拟自变量。例如，在研究粮食产量问题，需考虑正常年份和干旱年份，对这个问题就可以引入虚拟变量D，令D=1表示正常年份，D=0表示干旱年份。当在某些场合定性自变量可能取多类值时，例如考虑销售量的季节性影响，季节因素分为春、夏、秋、冬4种情况。为了用定性自变量反映四个季度，可以引入自变量，如果这样引入会出现一个问题，即自变量之和恒等于1，构成了完全多重共线性。所以，一个定性变量有k类可能的取值时，只需要引入k-1个0-1型自变量。所以在分析季节因素的时候，引入3个0-
2、1自变量即可。例1 某经济学家想调查文化程度对家庭储蓄的影响，在一个中等收入的样本框中，随机调查了13户高学历家庭与14户中低学历的家庭，因变量y为上一年家庭储蓄增加额，自变量x1为上一年家庭总收入，自变量x2表示家庭学历，高学历家庭x2=1,低学历家庭x2=0。数据如下所示。序号yx1x2序号yx1x212352.301532653.8123463.211632654.6133652.801735674.2144683.511836583.7156582.601945883.5068673.212064364.81710852.6021904751812363.412279854.20912
3、382.202389503.901013452.812498654.801123652.302598664.601223653.7126102354.801332564127101404.201432562.90建立y对x1,x2的线性回归模型，回归方程为：=-7976+3826x1-3700x2这个结果表明，中等收入的家庭每增加1万元收入，平均拿出3826元作为储蓄。高学历家庭每年的平均储蓄额少于低学历的家庭，平均少3700元。如果不引入家庭学历定性变量x2，仅用y对家庭年收入x1做一元线性回归，得判定系数R2=0.618，拟合效果不好。家庭年收入x1是连续型变量，它对回归的贡献也是不可缺少
4、的。如果不考虑家庭年收入这个自变量，13户高学历家庭的平均年储蓄增加额为3009.31元，14户低学历家庭的平均年储蓄增加额为5059.36元，这样会认为高学历家庭每年的储蓄额比低学历的家庭平均少5059.36-3009.31=2050.05元，而用回归法算出的数值是3824元，两者并不相等。用回归法算出的高学历家庭每年的平均储蓄额比低学历的家庭平均少3824元，这是在假设两者的家庭年收入相等的基础上的储蓄差值，或者说是消除了家庭年收入的影响后的差值，因而反映了两者储蓄额的真实差异。而直接由样本计算的差值2050.05元是包含有家庭年收入影响在内的差值，是虚假的差值。所调查的13户高学历家庭的
5、平均年收入额为3.8385万元，14户低学历家庭的平均年收入额为3.4071万元，两者并不相等。需要指出的是，虽然虚拟变量取某一数值，但这一数值没有任何数量大小的意义，它仅仅用来说明观察单位的性质或属性。二、单因素方差模型推断统计中的单因素方差分析、无交互作用的双因素方差分析和有交互作用的双因素方差分析模型，都可以转化为0-1型自变量的回归分析模型。下面以单因素方差为例。下面给出的先是单因素方差分析的结果。单因素方差分析：行业因素是否影响投诉次数零售业旅游业航空公司家电制造业5768314466394951492921654045347734564058535144方差分析：单因素方差分析SU
6、MMARY组观测数求和平均方差零售业734349116.6667旅游业628848184.8航空公司517535108.5家电制造业529559162.5方差分析差异源SSdfMSFP-valueF crit组间1456.6093485.5362323.4066430.0387653.12735组内270819142.526316总计4164.60922将上面的单因素方差分析转化为0-1型自变量的回归分析模型。设是正态总体的样本，原假设为，记，则有，进而有，记，则有，引入0-1型自变量，将上式表示为，其中，. ，即为多元线性回归模型。但其中存在一个问题，就是c个自变量之和恒等于1，存在完全的多
7、重共线性。为此需要删除建立回归模型即可。这个回归方程的显著性检验的原假设为：，由可知。方差分析的原假设和回归方程的假设是等价的。作回归方程的F检验与单因素方差分析的F检验是等价的。下面将刚才的例子转化为0-1型自变量的回归分析模型。将例子的数据整理如下。投诉次数(y)行业x1x2x357零售业10066零售业10049零售业10040零售业10034零售业10053零售业10044零售业10068旅游业01039旅游业01029旅游业01045旅游业01056旅游业01051旅游业01031航空公司00149航空公司00121航空公司00134航空公司00140航空公司00144家电制造业00
8、051家电制造业00065家电制造业00077家电制造业00058家电制造业000对上面数据进行回归分析，得到结果如下所示。SUMMARY OUTPUT回归统计Multiple R0.591404124R Square0.349758837Adjusted R Square0.24708918标准误差11.93843858观测值23方差分析dfSSMSFSignificance F回归分析31456.609485.53623.4066430.038764525残差192708142.5263总计224164.609Coefficients标准误差t StatP-valueLower 95%Up
9、per 95%C595.33903211.050691.03E-0947.8252775370.17472x1-106.990434-1.430530.168807-24.631146174.631146x2-117.229084-1.521630.144571-26.130645754.130646x3-247.550532-3.178580.004946-39.80344407-8.19656从线性回归的方差分析表可以看出，单因素方差分析表和回归模型的方差分析表是一样的。从回归系数表中还可以看出X3的回归系数与其它系数存在差异，这与方差分析的多重比较分析结果也是一样的。所以，如果所建立的回
10、归模型其中的自变量全是定性变量，称这样的回归模型为方差分析模型，如果模型中既包含数量变量，又包含定性变量，其中以定性自变量为主，称这样的模型为协方差模型。三、自变量中含有定性变量的回归模型的应用1、分段回归在实际问题中，会碰到某些变量在不同的影响因素范围内变化趋势截然不同，例如经济问题涉及经济政策较大调整时，调整前与调整后的变化幅度会有很大不同。对于这种问题，有时用多种曲线拟合效果仍不能令人满意。如果做残差分析，会发现残差不是随机的，而具有一定的系统性。对这类问题可以考虑分段回归的方法来处理。例：下表是某工厂生产批量x与单位成本y的数据，试用分段回归建立回归模型。序号yx1x212.57650
11、15024.4340034.52400041.3980030054.75300063.555707072.4972022083.774800做出y与x1的散点图，可以看出当生产批量大于500时，成本可能服从另一种线性关系，可以考虑由两段构成的分段线性回归，这可以通过引入一个0-1型虚拟自变量实现。假定回归直线的斜率在x=500处改变。则可以建立回归模型：，其中，为了方便起见，引入两个新的自变量x1,x2。这有，其中x1为生产批量，x2数值列在表中，这样回归模型可以转化为，该式子可以分解为两个线性回归方程：当时，当时，则得到，于是和分别是两条回归线的斜率，和是2个y的截距。用普通最小二乘法拟合回
12、归方程得：=5.895-0.00395x1-0.00389x2，利用模型可说明生产批量小于500时，每增加1个单位批量，单位成本降低0.00395；生产批量大于500时，每增加1个单位批量，单位成本降低0.00395+0.00389=0.00784美元；这里只是为了说明分段回归的方法，进一步做统计检验会发现x2的系数并不显著，这里不过多讨论。2、回归系数相等的检验在第一个例子的问题中，引入0-1型自变量的方法是假定储蓄增加额y对家庭收入的回归斜率与家庭年收入无关，家庭年收入只影响回归常数项，这个假设是否合理，还需要作统计检验，检验方法是引入如下含有交互效应的回归模型，其中y为上一年家庭储蓄增加
13、额，x1为上一年家庭总收入，x2表示家庭学历，高学历家庭x2=1,低学历家庭x2=0。所以回归模型可以分解为对高学历和对低学历家庭的两个线性回归模型，分别为：高学历家庭x2=1: 低学历家庭x2=0: 可见，高学历家庭的回归常数为，回归系数为；低学历家庭的回归常数为，回归系数为。要检验这两个回归方程的回归系数相等，等价于检验回归模型参数的假设检验,当拒绝时，认为0，这时高学历与低学历家庭的储蓄回归模型实际上被拆分为两个不同的回归模型。当接受时，认为=0，这时高学历与低学历家庭的储蓄回归模型是如下形式的联合回归模型。四、因变量是定性变量的回归模型1、定性因变量的回归方程的意义设y是只取0,1的定性变量,考虑简单线性回归模型，在这种y只取0,1的情况下,因变量均值有着特殊的意义。由于是0-1型贝努力随
