條件
統計結論效度,實際上是內部效度的特例,他們都涉及研究本身所獲因果關係結論的可靠性問題。一項研究設計良好,控制了無關變數的干擾,就可能保證自變數和因變數關係明確,讓研究有內部效度;但是,若統計方法運用不當,則也不能獲得一個可靠的因果關係的結論。因此,統計結論效度,可以視為內部效度的一部分 。
研究的統計結論效度主要取決於兩個方面的條件:一是數據的質量,數據分析程式是效度是以數據的質量為基礎的;二是統計檢驗的假設,數據分析中所采有和的各種統計方法都有其明確的統計檢驗假設,一項研究中統計檢驗假設不明或者被違犯,就會顯著的降低統計結論效度。
影響因素
影響統計結論效度的因素:
(1)統計功效低。統計功效又稱為統計檢驗能力,在統計學上定義為不犯Ⅱ類錯誤的機率(1-β)。當樣本小而且α值定得較低時,犯Ⅱ類錯誤的可能性增加;如果這時α值定得較高,又容易犯Ⅰ類錯誤。這些都會影響研究的統計結論效度。
(2)違反統計檢驗的假設。在採用不同檢驗時,應了解其特定的基本假設並解決有關的問題。例如,對於順序量表所測得的數據應運用非參數統計方法進行分析;許多統計檢驗方法要求數據呈常態分配,應注意數據的這一特徵,以免違反統計檢驗的假設,影響研究的統計結論效度。
(3)測量信度低。低信度的測量會誇大估計值的標準差誤。測量信度低就降低了統計結論效度。提高測量信度的方法是運用具有高相關項目的較長測驗,或者採用較大分析單位。
(4)實驗處理實施的可靠性。由於研究者之間的差異或同一研究者在不同時間採用了不同方式實施實驗處理,使實驗處理不夠標準化,這會增大差誤變異並減少發現真實差異的可能性,進而降低統計結論效度。
(5)研究背景中隨機的無關因素。應儘可能排除無關變異源,並使被試集中注意於實驗處理,減少背景變數的突出性和影響。
(6)被試的隨機異質性。被試的異質性會降低統計結論效度,也會損害研究的外部效度。這可以通過選擇相同同質的被試和採用“被試內設計”的方法來解決。
明白了上述影響統計結論效度的因素,也就是有了相應的改善之道。如必須保證數據的質量,嚴格遵循各種統計檢驗方法的基本假設和適用條件,不違規選用統計程式;適量增大樣本的容量;忠實的報告研究結果 。