《第三章6受约束回归》由会员分享，可在线阅读，更多相关《第三章6受约束回归（29页珍藏版）》请在金锄头文库上搜索。
1、3.6 受约束回归受约束回归 在建立回归模型时，有时根据经济理论需对模型中变量的参数施加一定的约束条件。 如： 0阶齐次性阶齐次性 条件的消费需求函数 1阶齐次性阶齐次性 条件的C-D生产函数 模型施加约束条件后进行回归模型施加约束条件后进行回归，称为受约束受约束回归回归（restricted regression）; 不加任何约束的回归称不加任何约束的回归称为无约束回归无约束回归（unrestricted regression）。）。受约束回归受约束回归 一、模型参数的线性约束一、模型参数的线性约束 二、对回归模型增加或减少解释变量二、对回归模型增加或减少解释变量 三、参数的稳定性三、参数的
2、稳定性 *四、非线性约束四、非线性约束 一、模型参数的线性约束一、模型参数的线性约束对模型施加约束得或(*)(*)如果对（*）式回归得出则由约束条件可得： 然而，对所考查的具体问题能否施加约束能否施加约束？需进一步进行相应的检验。常用的检验有常用的检验有： F检验、x2检验与t检验， 主要介绍主要介绍F检验检验在同一样本下，记无约束无约束样本回归模型为受约束受约束样本回归模型为于是 受约束受约束样本回归模型的残差平方和残差平方和RSSR于是ee为无约束无约束样本回归模型的残差平方残差平方和RSSU(*) 受约束受约束与无约束无约束模型都有相同的相同的TSS由（*）式 RSSR RSSU从而 E
3、SSR ESSU这这意意味味着着，通通常常情情况况下下，对对模模型型施施加加约约束束条件会降低模型的解释能力条件会降低模型的解释能力。 但是但是，如果如果约束条件约束条件为为真真，则，则受约束受约束回归回归模型与模型与无约束无约束回归模型具有相同的解释能力回归模型具有相同的解释能力，RSSR 与 RSSU的差异变小。可用可用RSSR - RSSU的大小来检验约束的真实性的大小来检验约束的真实性 根据数理统计学的知识：于是： 讨论：讨论： 如果约束条件无效， RSSR 与 RSSU的差异较大，计算的F值也较大。 于是，可用计算的F统计量的值与所给定的显著性水平下的临界值作比较，对约束条件的真实性
4、进行检验。注意，kU - kR恰为约束条件的个数。 例例3.6.13.6.1 中中国国城城镇镇居居民民对对食食品品的的人人均均消消费费需需求求实例中实例中，对零阶齐次性零阶齐次性检验： 取=5%，查得临界值临界值F0.05(1,10)=4.96 判断：不不能能拒拒绝绝中中国国城城镇镇居居民民对对食食品品的的人人均均消费需求函数具有零阶齐次特性这一假设消费需求函数具有零阶齐次特性这一假设。 无约束回归:RSSU=0.00324， kU=3 受约束回归:RSSR=0.00332， KR=2 样本容量n=14， 约束条件个数kU - kR=3-2=1这里的这里的F F检验适合所有关于参数线性约束的检
5、验检验适合所有关于参数线性约束的检验如：多元回归中对方程总体线性性方程总体线性性的F检验： H0： j=0 j=1,2,k这里：受约束回归模型为这里，运用了ESSR 0。 二、对回归模型增加或减少解释变量二、对回归模型增加或减少解释变量考虑如下两个回归模型(*)(*)(*)式可看成是（*）式的受约束回归：受约束回归：H0：相应的统计量为： 如果约束条件为真，即额外的变量Xk+1, , Xk+q对没有解释能力，则统计量较小； 否则，约束条件为假，意味着额外的变量对有较强的解释能力，则统计量较大。 因此，可通过F的计算值计算值与临界值临界值的比较，来判断额外变量是否应包括在模型中。讨论：讨论： 统
6、计量的另一个等价式统计量的另一个等价式 三、参数的稳定性三、参数的稳定性 1 1、邹氏参数稳定性检验、邹氏参数稳定性检验 建立模型时往往希望模型的参数是稳定的，即所谓的结构不变结构不变，这将提高模型的预测与分析功能。如何检验？如何检验？ 假设需要建立的模型需要建立的模型为在 两 个 连 续 的 时 间 序 列 （ 1,2,， n1） 与（n1+1,，n1+n2）中，相应的模型分别为： 合并两个时间序列为( 1,2,，n1 ，n1+1,，n1+n2 )，则可写出如下无约束回无约束回归模型 如果 = ，表示没有发生结构变化，因此可针对如下假设进行检验： H0: = (*)式施加上述约束后变换为受约
7、束受约束回归模型(*)（*）因此，检验的F统计量为： 记RSS1与RSS2为在两时间段上分别回归后所得的残差平方和，容易验证，于是参数稳定性的检验步骤：参数稳定性的检验步骤： （1）分别以两连续时间序列作为两个样本进行回归，得到相应的残差平方： RSS1与RSS2 （2）将两序列并为一个大样本后进行回归，得到大样本下的残差平方和RSSR （3）计算F统计量的值，与临界值比较： 若F值大于临界值，则拒绝原假设，认为发生了结构变化，参数是非稳定的。 该 检 验 也 被 称 为 邹邹 氏氏 参参 数数 稳稳 定定 性性 检检 验验（Chow test for parameter stability）
8、。 2 2、邹氏预测检验、邹氏预测检验 上述参数稳定性检验要求n2k。 如果出现n2F(n2, n1-k-1) ，则拒绝原假设，认为预测期发生了结构变化。 例例3.6.2 中国城镇居民食品人均消费需求的邹氏检验。 1、参数稳定性检验、参数稳定性检验19811994：RSS1=0.003240 19952001： (9.96) (7.14) (-5.13) (1.81) 19812001: (14.83) (27.26) (-3.24) (-11.17) 给定=5%，查表得临界值F0.05(4, 13)=3.18 判断：判断：F值值临界值，拒绝参数稳定的原假设，表临界值，拒绝参数稳定的原假设，表
9、明中国城镇居民食品人均消费需求在明中国城镇居民食品人均消费需求在1994年前后发年前后发生了显著变化。生了显著变化。 2、邹氏预测邹氏预测检验检验给定=5%，查表得临界值F0.05(7, 10)=3.18判断判断： F值值临界值，拒绝参数稳定的原假设临界值，拒绝参数稳定的原假设 *四、非线性约束四、非线性约束 也可对模型参数施加非线性约束非线性约束,如对模型施加非线性约束12=1,得到受约束回归模型受约束回归模型: 该 模 型 必 需 采 用 非非 线线 性性 最最 小小 二二 乘乘 法法（nonlinear least squares）进行估计。 非非线线性性约约束束检检验验是建立在最最大大
10、似似然然原原理理基础上的,有最最大大似似然然比比检检验验、沃沃尔尔德德检检验验与拉拉格朗日乘数检验格朗日乘数检验. .1、最大似然比检验、最大似然比检验 (likelihood ratio test, LR) 估计估计: :无约束回归模型与受约束回归模型， 方法方法: :最大似然法， 检验检验: :两个似然函数的值的差异是否“足够”大。 记L( ,2)为一似然函数:无约束回归无约束回归 : Max:受约束回归受约束回归 : Max:或求极值： g( ):以各约束条件为元素的列向量, ：以相应拉格朗日乘数为元素的行向量 约束：g( )=0 受约束受约束的函数值不会超过的函数值不会超过无约束无约束
11、的函数值的函数值，但如果约束条件为真约束条件为真，则两个函数值就非常“接近接近”。 由此，定义似然比似然比（likelihood ratio）: 如果如果比值很小，说明说明两似然函数值差距较大，则应拒绝拒绝约束条件为真的假设； 如果如果比值接近于，说明说明两似然函数值很接近，应接受接受约束条件为真的假设。 具体检验具体检验时，由于大样本下： h是约束条件的个数。因此： 通过通过LR统计量的统计量的 2 2分布特性来进行判断。分布特性来进行判断。 在中国城镇居民人均食品消费需求例中国城镇居民人均食品消费需求例中，对零阶零阶齐次性齐次性的检验： LR= -2(38.57-38.73)=0.32 给
12、出=5%、查得临界值临界值 2 20.05(1)(1)3.84， 判断判断： LR 2 20.05(1),(1),不拒绝原约束的假设，不拒绝原约束的假设， 表明表明: :中国城镇居民对食品的人均消费需求函中国城镇居民对食品的人均消费需求函数满足零阶齐次性条件数满足零阶齐次性条件。 、沃尔德检验、沃尔德检验（Wald test, W） 沃尔德检验中，只须估计无约束模型。如对 在所有古典假设都成立的条件下，容易证明 因此，在1+2=1的约束条件下 记 可建立沃尔德统计量沃尔德统计量: 如果有h个约束条件，可得到h个统计量z1,z2,zh 约束条件为真时，可建立大样本大样本下的服从自由度为h的渐近
13、2 分布统计量 其中，Z为以zi为元素的列向量，C是Z的方差-协方差矩阵。 因此，W从总体上测量了无约束回归不满足约束条件的程度。从总体上测量了无约束回归不满足约束条件的程度。 对对非线性约束非线性约束，沃尔德统计量，沃尔德统计量W的算法描述要复杂得多。的算法描述要复杂得多。 3、拉格朗日乘数检验、拉格朗日乘数检验 拉格朗日乘数检验则只需估计受约束受约束模型. 受约束回归是求最大似然法的极值问题: 是拉格朗日乘数行向量，衡量各约束条件对最大似然函数值的影响程度。 如果某一约束为真，则该约束条件对最大似然函数值的影响很小，于是，相应的拉格朗日乘数的值应接近于零。 因此，拉格朗日乘数检验就是检验某些拉格朗日乘数的值是否“足够大”，如果“足够大”，则拒绝约束条件为真的假设。 拉格朗日统计量LM本身是一个关于拉格朗日乘数的复杂的函数，在各约束条件为真的情况下，服从一自由度恰为约束条件个数的渐近2分布。 n为样本容量，R2为如下被称为辅助回归辅助回归（auxiliary regression）的可决系数: 如果约束是非线性的，辅助回归方程的估计比较复杂，但仍可按（*）式计算LM统计量的值。 最后，一般地有最后，一般地有:LMLRW 同样地，如果为线性约束，LM服从一精确的2分布：(*)
