Statistical-Significance
顯著性檢驗對比較基線的隨機組有意義嗎?
許多隨機對照試驗 (RCT) 論文報告了隨機化之後/之前對基線參數的顯著性檢驗,以表明這些組確實相似。這通常是“基線特徵”表的一部分。然而,顯著性檢驗衡量的是偶然獲得觀察到的(或更強的)差異的概率,不是嗎?如果測試是顯著的,我們會得出結論,即存在真正的差異,因為這種程度的隨機差異不太可能發生。當我們知道任何差異必須是由於偶然性時,在隨機化後顯著性檢驗是否有意義?
假設檢驗是荒謬的,但顯著性檢驗可能有用。
正如您的問題所表明的那樣,假設檢驗將測試已知為真的零假設。將統計檢驗應用於任何具有通過完全可靠信息已知的真值的假設是愚蠢的。
顯著性檢驗提供了一個 P 值,正如您已經說過的,它表明在給定零假設的情況下,將數據獲取為極端或更極端的概率。然而,在我看來,這樣的 P 值可以以等同於對“我希望多久看到一次與這次一樣大或更大的基線值差異?”這個問題的答案來解釋。即使不清楚目的是什麼,答案也可能有用。