線性回歸模型的二階最小二乘估計
本文關鍵詞:線性回歸模型的二階最小二乘估計
更多相關文章: 線性回歸模型 加權最小二乘估計 收斂性 漸近正態(tài)性 均方誤差分類號
【摘要】:線性模型在數(shù)理統(tǒng)計學的理論和應用中都占據(jù)十分重要的地位,越來越多的研究領域都涉及到線性模型的參數(shù)估計問題。國內(nèi)外的學者已經(jīng)做了大量的研究,提出了多種估計方法,常用的有最小二乘估計法、嶺估計法、主成分估計法和廣義壓縮最小二乘估計法等。本文主要研究一種新的參數(shù)估計方法——二階最小二乘估計法——在線性回歸模型中的應用。二階最小二乘估計法的主要思想是極小化響應變量及響應變量的平方分別與響應變量的一階條件矩和二階條件矩的差的平方和得到估計值。本文主要考察具有非對稱分布誤差變量的線性模型的二階最小二乘估計,并且證明出統(tǒng)計性質(zhì),例如收斂性和漸近正態(tài)性。除此之外,還證明了當誤差變量的三階矩非零時,二階最小二乘估計是漸近優(yōu)于一般最小二乘估計的,并且當誤差變量為對稱的分布時,二者具有相同的漸近協(xié)方差矩陣。最重要的是,我們可以在不完全知道誤差變量分布的情形下,求得線性模型的參數(shù)估計。最后通過數(shù)值模擬試驗,比較不同樣本數(shù)情況下,線性回歸模型未知參數(shù)的最小二乘估計和二階最小二乘估計的方差和均方誤差。結果發(fā)現(xiàn),當樣本數(shù)小于50時,回歸系數(shù)與誤差變量方差的二階最小二乘估計優(yōu)于一般最小二乘估計,這也說明了當樣本數(shù)較少時,二階最小二乘估計法能夠充分利用數(shù)據(jù)中的信息來改良最小二乘估計法。
【關鍵詞】:線性回歸模型 加權最小二乘估計 收斂性 漸近正態(tài)性 均方誤差分類號
【學位授予單位】:北京交通大學
【學位級別】:碩士
【學位授予年份】:2016
【分類號】:O212.1
【目錄】:
- 致謝5-6
- 中文摘要6-7
- ABSTRACT7-9
- 第1章 緒論9-18
- 1.1 引言9-10
- 1.2 線性回歸模型10-11
- 1.3 常用的參數(shù)估計法介紹11-17
- 1.3.1 最小二乘估計11-13
- 1.3.2 嶺估計13-14
- 1.3.3 主成分估計14-15
- 1.3.4 廣義壓縮最小二乘估計15-17
- 1.4 估計量的評價方法17-18
- 第2章 線性回歸模型的二階最小二乘估計18-34
- 2.1 二階最小二乘估計定義方法18-20
- 2.2 統(tǒng)計性質(zhì)證明20-28
- 2.2.1 預備知識20-21
- 2.2.2 收斂性21-22
- 2.2.3 漸近正態(tài)性22-28
- 2.3 二階最小二乘估計的優(yōu)良性28-34
- 第3章 二階最小二乘估計與最小二乘估計的數(shù)值試驗比較34-41
- 3.1 數(shù)值試驗34-35
- 3.2 數(shù)值試驗結果分析35-41
- 第4章 結論41-42
- 參考文獻42-44
- 作者簡歷44-46
- 學位論文數(shù)據(jù)集46
【相似文獻】
中國期刊全文數(shù)據(jù)庫 前10條
1 張二艷;許燕;;利用配方法求解最小二乘估計的的應用研究[J];北京印刷學院學報;2009年06期
2 吳慎言;;最小二乘估計器存在性的研究[J];西安工程科技學院學報;1992年01期
3 吳劉倉,黃文亮,詹金龍;最小二乘估計的有效性[J];昆明理工大學學報(自然科學版);2001年02期
4 崔博文,陳劍,陳心昭,任章;復參數(shù)最小二乘估計方法[J];安徽大學學報(自然科學版);2005年03期
5 肖庭延;張培培;閻金華;;正則化的最小二乘估計及其應用[J];高等學校計算數(shù)學學報;2005年S1期
6 車金銳;梁剛;陳敏茹;;基于小波測量預處理的最小二乘估計[J];數(shù)學的實踐與認識;2006年04期
7 劉湘蓉;;最小二乘估計關于誤差分布的穩(wěn)健性[J];應用概率統(tǒng)計;2006年04期
8 李兵;朱寧;唐文芳;段復建;;改進的最小二乘估計確定高精度參數(shù)模型[J];統(tǒng)計與決策;2007年23期
9 吳如光;;約束最小二乘估計關于誤差分布的穩(wěn)健性[J];西安文理學院學報(自然科學版);2008年02期
10 藺煥泉;;普通最小二乘估計方差表達式的等價性[J];長春大學學報;2010年02期
中國重要會議論文全文數(shù)據(jù)庫 前5條
1 陳歡;楊德森;時勝國;;最小二乘估計的矢量陣近場虛擬聚焦算法[A];2008年全國聲學學術會議論文集[C];2008年
2 范龍;白鴿;;基于抗差最小二乘估計的載體速度計算方法[A];第二屆中國衛(wèi)星導航學術年會電子文集[C];2011年
3 張崇高;;Fuzzy變量的配方回歸模型的最小二乘估計[A];模糊集理論與模糊應用專輯——中國系統(tǒng)工程學會模糊數(shù)學與模糊系統(tǒng)委員會第十屆年會論文選集[C];2000年
4 崔博文;陳劍;陳心昭;任章;;基于U-D分解的復參數(shù)最小二乘估計方法[A];第二十三屆中國控制會議論文集(上冊)[C];2004年
5 劉娜;張端金;楊林;;基于SVD的偏差補償最小二乘估計算法[A];2011年中國智能自動化學術會議論文集(第一分冊)[C];2011年
中國博士學位論文全文數(shù)據(jù)庫 前1條
1 趙媛媛;信號模型中若干參數(shù)估計問題的研究[D];中國科學技術大學;2011年
中國碩士學位論文全文數(shù)據(jù)庫 前10條
1 王媛;線性回歸模型的二階最小二乘估計[D];北京交通大學;2016年
2 盧冬暉;約束泛最小二乘估計及其影響分析[D];湖北師范學院;2014年
3 桂詠新;奇異增長曲線模型中參數(shù)陣的最優(yōu)估計及最小二乘估計的有效性[D];華中師范大學;2003年
4 于家富;回歸系數(shù)的混合估計和最小二乘估計的相對效率[D];山東師范大學;2006年
5 劉洪偉;線性模型最小二乘估計遞推算法[D];東北林業(yè)大學;2012年
6 王劍;線性回歸系數(shù)的Stein估計[D];華中科技大學;2007年
7 尤太林;EV模型的正交回歸分析[D];貴州財經(jīng)學院;2011年
8 詹小平;工具變量回歸中的估計問題[D];東北師范大學;2006年
9 黃超;推廣增長曲線模型中協(xié)差陣的最小二乘估計及其優(yōu)良性[D];華中師范大學;2001年
10 王曉光;序約束下ARCH模型最小二乘估計[D];吉林大學;2004年
,本文編號:933937
本文鏈接:http://www.sikaile.net/kejilunwen/yysx/933937.html