在一元线性回归模型中 试证:未知参数a b的最小二乘估计恰是极大似然估计
线性,模型,参数
已帮助 人
在一元线性回归模型中,试证:未知参数a,b的最小二乘估计恰是极大似然估计
-
[证明] 一元线性回归模型为:
最小二乘估计是指对x,y的n对试验值:(xi,yi)(i=1,2,…,n)作偏差平方和
,利用微积分中的求极值方法,求出使
,则
为所求线性回归方程.
极大似然法是:yi=a+bxi+εi,εi~N(0,σ2),则yi~N(a+bx,σ2),得样本的极大似然函数
要使L取最大值,则应使
为最小.用与最小二乘法中同样的极值方法,求得使
最小的
,得线性回归方程
由于两种方法讨论的都是,且由此求得
,故最小二乘法与极大似然法的结果是相同的.
