隨筆 -- 為什麼不相信推論統計

隨因為推論統計邏輯明顯有問題

心理學實驗看到的 p value是 P(Data| Hyptohesis), 也就是假設成立的情況下拿到這樣的資料的機率 以下是大家常見的推論步驟:

1. 先設一個虛無假設 (H0)
2. 拿資料, 算 p value ( = P(Data | Hypothesis)
3. 如果 p value <= alpha (usually .05 or .10) 那麼就拒絕 H0

問題來了 P(Data | Hypothesis) 和 P(Hypothesis | Data) 以及 P(Hypothesis)是不同的東西 所以明顯不能把 p value 當作 P(Hypothesis | Data) 或者 P(Hypothesis) （在這裡 Hypothesis 就是 H0) 來拒絕

所以步驟2不能跳到步驟3

所以為什麼要相信推論統計