協方差(Covariance)在概率論和統計學中用于衡量兩個變量的總體誤差。而方差是協方差的一種特殊情況,即當兩個變量是相同的情況。
協方差表示的是兩個變量的總體的誤差,這與只表示一個變量誤差的方差不同。如果兩個變量的變化趨勢一致,也就是說如果其中一個大于自身的期望值,另外一個也大于自身的期望值,那么兩個變量之間的協方差就是正值。如果兩個變量的變化趨勢相反,即其中一個大于自身的期望值,另外一個卻小于自身的期望值,那么兩個變量之間的協方差就是負值。
定義
在概率論和統計學中,協方差用于衡量兩個變量的總體誤差。而方差是協方差的一種特殊情況,即當兩個變量是相同的情況。
期望值分別為與的兩個實隨機變量X與Y之間的協方差定義為:
從直觀上來看,協方差表示的是兩個變量總體誤差的期望。
如果兩個變量的變化趨勢一致,也就是說如果其中一個大于自身的期望值時另外一個也大于自身的期望值,那么兩個變量之間的協方差就是正值;如果兩個變量的變化趨勢相反,即其中一個變量大于自身的期望值時另外一個卻小于自身的期望值,那么兩個變量之間的協方差就是負值。
如果X與Y是統計獨立的,那么二者之間的協方差就是0,因為兩個獨立的隨機變量滿足。
但是,反過來并不成立。即如果X與Y的協方差為0,二者并不一定是統計獨立的。
協方差的度量單位是X的協方差乘以Y的協方差。而取決于協方差的相關性,是一個衡量線性獨立的無量綱的數。
協方差為0的兩個隨機變量稱為是不相關的。
性質
若兩個隨機變量X和Y相互獨立,則,因而若上述數學期望不為零,則X和Y必不是相互獨立的,亦即它們之間存在著一定的關系。
協方差與方差之間有如下關系:
協方差與期望值有如下關系:
。
協方差的性質:
(1);
(2),(a,b是常數);
(3)。
由協方差定義,可以看出。
協方差作為描述X和Y相關程度的量,在同一物理量綱之下有一定的作用,但同樣的兩個量采用不同的量綱使它們的協方差在數值上表現出很大的差異。為此引入如下概念:
定義
若,則稱X與Y不線性相關。
即的充分必要條件是,亦即不相關和協方差為零是等價的。
設是隨機變量X和Y的相關系數,則有
(1);
(2)充分必要條件為,(a,b為常數,)
定義
設X和Y是隨機變量,若,,2,...存在,則稱它為X的k階原點矩,簡稱k階矩。
若,2,...存在,則稱它為X的k階中心矩。
若,2,...存在,則稱它為X和Y的k+p階混合原點矩。
若,2,...存在,則稱它為X和Y的k+l階混合中心矩。
顯然,X的數學期望是X的一階原點矩,方差D(X)是X的二階中心矩,協方差是X和Y的二階混合中心矩。
對于隨機變量序列與,有
對于隨機變量序列,有
矩陣
分別為m與n個標量元素的列向量隨機變量X與Y,這兩個變量之間的協方差定義為矩陣。其中X包含變量X1,X2,...,Xm,Y包含變量Y1,Y2,...,Yn。假設X_1的期望值為μ_1,Y_2的期望值為v_2,那么在協方差矩陣中(1,2)的元素就是X1和Y2的協方差。
協方差有時也稱為是兩個隨機變量之間“線性獨立性”的度量,但是這個含義與線性代數中嚴格的線性獨立性不同。
應用
協方差在農業上的應用
農業科學實驗中,經常會出現可以控制的質量因子和不可以控制的數量因子同時影響實驗結果的情況,這時就需要采用協方差分析的統計處理方法,將質量因子與數量因子(也稱協變量)綜合起來加以考慮。
比如,要研究3種肥料對蘋果產量的實際效應,而各棵蘋果樹頭年的“基礎產量”不一致,但對試驗結果又有一定的影響。要消除這一因素帶來的影響,就需將各棵蘋果樹第1年年產量這一因素作為協變量進行協方差分析,才能得到正確的實驗結果。
當兩個變量相關時,用于評估它們因相關而產生的對應變量的影響。
當多個變量獨立時,用方差來評估這種影響的差異。
當多個變量相關時,用協方差來評估這種影響的差異。
參考資料 >