統計決策理論
正文
由統計學家A.瓦爾德在1950年提出的一種數理統計學的理論,這種理論把數理統計問題看成是統計學家與大自然之間的博弈;用這種觀點把各種各樣的統計問題統一起來,以對策論的觀點來研究。在此以前,人們對數理統計,主要是著眼於其推斷的功能,亦即從觀測數據出發對總體作出某種論斷(見統計推斷)。至於由此應該採取什麼決策或行動,會產生什麼後果,則被認為不屬於統計的範疇。瓦爾德的理論則把後面這一部分內容也納入統計的範圍之內,這在數理統計學上是一項革新,有較大的實際意義。在一個統計問題中,統計工作者掌握的資料是樣本X=(x1,x2…,xn),X所來自的總體的分布Fθ中包含的參數θ為未知,而只知道θ所屬的集合
![統計決策理論](/img/1/92c/ml2ZuM3X5MjN5AjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzL5MzLt92YucmbvRWdo5Cd0FmL0E2LvoDc0RHa.jpg)
![統計決策理論](/img/1/92c/ml2ZuM3X5MjN5AjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzL5MzLt92YucmbvRWdo5Cd0FmL0E2LvoDc0RHa.jpg)
![統計決策理論](/img/1/92c/ml2ZuM3X5MjN5AjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzL5MzLt92YucmbvRWdo5Cd0FmL0E2LvoDc0RHa.jpg)
統計決策三要素 可以通過三個要素把一個統計決策問題表達出來。
① 樣本空間 H與樣本分布族{Fθ:θ∈
![統計決策理論](/img/1/92c/ml2ZuM3X5MjN5AjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzL5MzLt92YucmbvRWdo5Cd0FmL0E2LvoDc0RHa.jpg)
② 行動空間A 它是統計工作者可以採取的單純策略(或稱行動)的集合。例如,設 θ為一維參數,要對θ作區間估計,則實軸上任一區間【α,b)】構成一個單純策略,這時行動空間為所有【α,b)】構成的集合,即{【α,b)】:-∞<α≤b<∞}。若問題是要檢驗有關 θ的假設,則行動空間 A由α0(接受假設)和α1(拒絕假設)兩個元素構成。
③ 損失函式L 統計決策理論有一個基本出發點:所採取的行動的後果可以數量化。設參數真值為 θ,統計工作者採取的行動為α,則所遭受的損失可表為 α與θ的函式L(θ, α),稱之為損失函式。在一個具體問題中,採取什麼損失函式最好,是一個需要進行大量調查研究以至理論工作的問題,這也是在使用決策理論時的一個困難點。
統計決策函式 當三個要素都已給定時,統計工作者採取什麼行動,取決於他所掌握的樣本。求一個統計決策問題的解,就是制定一個規則,以便對樣本空間中每一點,在行動空間中都有一個元素與之對應,也就是找一個定義於樣本空間 H而取值於行動空間A的函式或分布函式δ,當有了樣本X=尣,就按δ(尣)採取行動,稱δ為決策函式。用對策論的語言,δ就是統計工作者所採取的策略。
選擇決策函式的準則 對一個統計決策問題,為選定一個較優的決策函式,需要建立反映決策函式優劣的指標。風險函式R(θ,δ)就是這樣的指標,定義為R(θ,δ)=Eθ 【L(θ,δ(X))】,即採取決策函式δ而參數真值為θ時所遭受的平均損失。風險函式愈小,決策函式愈好。在這個原則下,可以引進種種更具體且可行的準則。
① 容許性準則 設δ為一決策函式,若存在另一決策函式δ
![統計決策理論](/img/9/2a4/ml2ZuM3X0UDO1QjM4ITNxgDM5ETMwADMwADMwADMwADMxAzL1EzL0UzLt92YucmbvRWdo5Cd0FmLxE2LvoDc0RHa.jpg)
![統計決策理論](/img/1/92c/ml2ZuM3X5MjN5AjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzL5MzLt92YucmbvRWdo5Cd0FmL0E2LvoDc0RHa.jpg)
![統計決策理論](/img/9/2a4/ml2ZuM3X0UDO1QjM4ITNxgDM5ETMwADMwADMwADMwADMxAzL1EzL0UzLt92YucmbvRWdo5Cd0FmLxE2LvoDc0RHa.jpg)
![統計決策理論](/img/1/92c/ml2ZuM3X5MjN5AjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzL5MzLt92YucmbvRWdo5Cd0FmL0E2LvoDc0RHa.jpg)
![統計決策理論](/img/1/92c/ml2ZuM3X5MjN5AjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzL5MzLt92YucmbvRWdo5Cd0FmL0E2LvoDc0RHa.jpg)
![統計決策理論](/img/1/92c/ml2ZuM3X5MjN5AjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzL5MzLt92YucmbvRWdo5Cd0FmL0E2LvoDc0RHa.jpg)
② 最小化最大準則 最大風險
![統計決策理論](/img/7/595/ml2ZuM3XzgDNyEjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzLzgzLt92YucmbvRWdo5Cd0FmLxE2LvoDc0RHa.jpg)
![統計決策理論](/img/9/2a4/ml2ZuM3X0UDO1QjM4ITNxgDM5ETMwADMwADMwADMwADMxAzL1EzL0UzLt92YucmbvRWdo5Cd0FmLxE2LvoDc0RHa.jpg)
![統計決策理論](/img/9/2a4/ml2ZuM3X0UDO1QjM4ITNxgDM5ETMwADMwADMwADMwADMxAzL1EzL0UzLt92YucmbvRWdo5Cd0FmLxE2LvoDc0RHa.jpg)
![統計決策理論](/img/9/2a4/ml2ZuM3X0UDO1QjM4ITNxgDM5ETMwADMwADMwADMwADMxAzL1EzL0UzLt92YucmbvRWdo5Cd0FmLxE2LvoDc0RHa.jpg)
③ 貝葉斯準則 它以貝葉斯風險為指標, 在參數空間
![統計決策理論](/img/1/92c/ml2ZuM3X5MjN5AjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzL5MzLt92YucmbvRWdo5Cd0FmL0E2LvoDc0RHa.jpg)
![統計決策理論](/img/1/92c/ml2ZuM3X5MjN5AjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzL5MzLt92YucmbvRWdo5Cd0FmL0E2LvoDc0RHa.jpg)
![統計決策理論](/img/4/084/ml2ZuM3X4YDM0EjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzL4YzLt92YucmbvRWdo5Cd0FmLzE2LvoDc0RHa.jpg)
![統計決策理論](/img/6/fc7/ml2ZuM3X5ETM1EjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzL5EzLt92YucmbvRWdo5Cd0FmLxE2LvoDc0RHa.jpg)
![統計決策理論](/img/6/dec/ml2ZuM3XwIDO5EjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzLwIzLt92YucmbvRWdo5Cd0FmLwE2LvoDc0RHa.jpg)
![統計決策理論](/img/9/2a4/ml2ZuM3X0UDO1QjM4ITNxgDM5ETMwADMwADMwADMwADMxAzL1EzL0UzLt92YucmbvRWdo5Cd0FmLxE2LvoDc0RHa.jpg)
④ 最優同變性準則 這是一種在限制決策函式有同變性的條件下,求一致最優決策函式的準則。同變性是指當問題由於平移、刻度等變換而發生變化時,相應的決策(對策)也能有同步地變換的性質。例如,在正態總體N(μ,1)中抽樣x1,x2,…,xn以估計μ,若將度量原由零點(O)移到с處,則樣本在新坐標系下變為x1+с,x2+с…,xn+с,而參數變為μ+с,如果接受“估計結果不應與坐標原點的取法有關”的原則,則所用的決策δ應滿足:對任何實數с,有
![統計決策理論](/img/f/be8/ml2ZuM3X3YTOwIjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzL3YzLt92YucmbvRWdo5Cd0FmLwE2LvoDc0RHa.jpg)
在點估計中,限制使用的估計量有無偏性,採用平方損失函式
![統計決策理論](/img/4/3cc/ml2ZuM3XwQDMyIjN4QTNxgDM5ETMwADMwADMwADMwADMxAzL1EzLwQzLt92YucmbvRWdo5Cd0FmLzE2LvoDc0RHa.jpg)
一旦選定了優良性標準,統計決策問題的解決,就相當於一個數學上的最最佳化問題。1950年後的幾十年來在這方面做了不少工作,這不僅使統計問題有了嚴格的數學提法,同時也在形式上部分地突出了瓦爾德的想法,把形式不一樣的統計問題歸併在一個模式下統一處理。決策函式的觀點使統計更注重了所採取行動的效果,也使統計問題提法更加多樣化,從而開拓了某些新的研究領域,例如前面提到的關於容許性及最小化最大準則的研究。因此,瓦爾德的理論受到統計學界的重視,成為二次大戰後統計學史上一個重大事件。但是,在這個問題上的看法也並不一致,英國統計學家M.肯德爾認為“損失的數量化”並非在任何情況下都合理可行,而且他還認為,把統計問題歸之於統計工作者與大自然之間的博弈的觀點,是值得懷疑的。
參考書目
A. Wald,Statistical Decision Functions, John Wiley & Sons, New York, 1950.
J.O.Berge,Statistical Decision Theory, John Wiley & Sons, New York, 1980.