威沙特参数 |
自由度 (實數) 尺度矩陣 (正定) |
---|
值域 |
是正定的 |
---|
概率密度函数 |
|
---|
期望值 |
|
---|
眾數 |
|
---|
特徵函数 |
|
---|
以統計學家约翰·威沙特為名的威沙特分佈是統計學上的一種半正定矩陣隨機分佈。[1]這個分佈在多變量分析的协方差矩阵估計上相當重要。
定義
假設X為一n × p矩陣,其各行(row)來自同一均值向量為的維多變量常態分佈且彼此獨立。
則威沙特分佈為散異矩陣
的機率分佈。
有該機率分佈通常記為
其中正整數為自由度。有時亦記號為。若且則該分佈退化為一自由度為的單變量卡方分佈。
常見應用
威沙特分佈常用於多變量的概似比檢定,亦用於隨機矩陣的頻譜理論中。
機率密度函數
威沙特分佈具有下述的機率密度函數:
令'為一正定對稱隨機變數矩陣。令為一特定正定矩陣。
如此,若,則服從於一具自由度n的威沙特分佈且有機率度函數
其中為多變量Gamma分佈,其定義為
上述定義可推廣至任一實數[2]
特徵函數
威沙特分佈的特徵函數為
也就是說
其中為期望值
(這裡的及 皆為與維度相同的矩陣。( 為單位矩陣,而為-1的平方根).[3]
理論架構
若為一自由度為m,共變異矩陣為的威沙特分佈,記為——其中為一的q秩矩陣,則[4]
推論1
若為一非負常數向量,則[4]
.
則在此情形下,為一卡方分佈且(因為正定,所以為一正常數)。
推論2
在 的情形下(亦即第j個元素為1其他為0),推論1可導出
為矩陣的每一個對對角元素的邊際分佈。
統計學家George Seber曾論證威沙特分佈並非多變量卡方分佈,這是因為非對角元素的邊際分佈並非卡方分佈,Seber傾向於將某某多變量分佈此一遣詞用於所有元素的邊際分佈皆相同的情形。[5]
多變量常態分佈的估計
由於威沙特分佈可視為一多變量常態分佈其共變異矩陣的最大概似估計量(MLE)的分佈,其衍自MLE的計算可為令人驚喜地簡約而優雅。[6] 基於頻譜理論,可將一純量視為一矩陣的跡(trace)。請參考共變異矩陣的估計。
分佈抽樣
以下的演算法取材自 Smith & Hocking (1972)。[7]一個來自自由度為n及共變異矩陣為的威沙特分佈的(其中)隨機樣本可以如下方式抽樣而得:
- 生成一隨機下三角矩陣 使得:
- ,意即 為一卡方分佈隨機樣本的平方根。
- 其中,為一常態分佈的隨機樣本。[8]
- 計算的Cholesky分解。
- 計算。此時, 為一的隨機樣本。
若,則因,可以直接以進行抽樣。
參考條目
參考資料
- ^ Wishart, J. The generalised product moment distribution in samples from a normal multivariate population. Biometrika. 1928, 20A (1–2): 32–52. JFM 54.0565.02. JSTOR 2331939. doi:10.1093/biomet/20A.1-2.32.
- ^ Uhlig, H. On Singular Wishart and Singular Multivariate Beta Distributions. The Annals of Statistics. 1994, 22: 395–405. doi:10.1214/aos/1176325375.
- ^ Anderson, T. W. An Introduction to Multivariate Statistical Analysis 3rd. Hoboken, N. J.: Wiley Interscience. 2003: 259. ISBN 0-471-36091-0.
- ^ 4.0 4.1 Rao, C. R. Linear Statistical Inference and its Applications. Wiley. 1965: 535.
- ^ Seber, George A. F. Multivariate Observations. Wiley. 2004. ISBN 978-0471691211.
- ^ Chatfield, C.; Collins, A. J. Introduction to Multivariate Analysis. London: Chapman and Hall. 1980: 103–108. ISBN 0-412-16030-7.
- ^ Smith, W. B.; Hocking, R. R. Algorithm AS 53: Wishart Variate Generator. Journal of the Royal Statistical Society, Series C. 1972, 21 (3): 341–345. JSTOR 2346290.
- ^ Anderson, T. W. An Introduction to Multivariate Statistical Analysis 3rd. Hoboken, N. J.: Wiley Interscience. 2003: 257. ISBN 0-471-36091-0.
- Gelman, Andrew. Bayesian Data Analysis 2nd. Boca Raton, Fla.: Chapman & Hall. 2003: 582 [3 June 2015]. ISBN 158488388X. (原始内容存档于2021-02-17).
- Zanella, A.; Chiani, M.; Win, M.Z. On the marginal distribution of the eigenvalues of wishart matrices. IEEE Transactions on Communications. April 2009, 57 (4): 1050–1060. doi:10.1109/TCOMM.2009.04.070143.
- Bishop, C. M. Pattern Recognition and Machine Learning. Springer. 2006: 693.
- Pearson, Karl; Jeffery, G. B.; Elderton, Ethel M. On the Distribution of the First Product Moment-Coefficient, in Samples Drawn from an Indefinitely Large Normal Population. Biometrika (Biometrika Trust). December 1929, 21: 164–201. JSTOR 2332556. doi:10.2307/2332556.
- Craig, Cecil C. On the Frequency Function of xy. Ann. Math. Statist. 1936, 7: 1–15 [2016-05-02]. doi:10.1214/aoms/1177732541. (原始内容存档于2020-06-07).
- Peddada and Richards, Shyamal Das; Richards, Donald St. P. Proof of a Conjecture of M. L. Eaton on the Characteristic Function of the Wishart Distribution,. Annals of Probability. 1991, 19 (2): 868–874. doi:10.1214/aop/1176990455.
- Gindikin, S.G. Invariant generalized functions in homogeneous domains,. Funct. Anal. Appl. 1975, 9 (1): 50–52. doi:10.1007/BF01078179.
- Dwyer, Paul S. Some Applications of Matrix Derivatives in Multivariate Analysis. J. Amer. Statist. Assoc. 1967, 62 (318): 607–625. JSTOR 2283988.