統計謬誤索引:55 個概念

目錄
  1. 一、抽樣偏誤(6 種)
  2. 二、測量偏誤(6 種)
  3. 三、數字直覺(6 種)
  4. 四、因果推論(5 種)
  5. 五、認知偏誤(7 種)
  6. 六、統計方法(11 種)
  7. 七、實驗設計(9 種)
  8. 八、呈現與報告(5 種)

這份清單依分析階段整理 55 種統計謬誤。每個條目都連到對應文章的說明段落:

  • 設計抽樣計畫:一、抽樣偏誤
  • 設計問卷或測量工具:二、測量偏誤
  • 解讀比率、平均值與分組資料:三、數字直覺
  • 從相關性討論原因:四、因果推論
  • 檢查分析過程中的判斷:五、認知偏誤
  • 使用迴歸、檢定或模型:六、統計方法
  • 設計 A/B 測試或其他實驗:七、實驗設計
  • 準備或閱讀報告:八、呈現與報告

一、抽樣偏誤(6 種)

# 謬誤 一句話
1 倖存者偏誤 只看到活下來的案例,看不到消失的失敗者
2 樣本選擇偏誤 資料進來之前就先篩過一輪,樣本偏向特定的人
3 涵蓋偏誤 抽樣名單上根本沒有這些人
4 自我選擇偏誤 只有情緒強烈的人才會開口,沉默大多數不在樣本裡
5 便利抽樣偏誤 只問身邊問得到的人
6 時間區間偏誤 只在特定時段採樣,選到的是那個時間點會出現的人

二、測量偏誤(6 種)

# 謬誤 一句話
7 社會期許偏誤 受訪者答的,常常是自己覺得應該是幾個
8 觀察者偏誤 量的人期待什麼,就量到什麼
9 回憶偏誤 印象再鮮明,也可能是錯的
10 工具與測量誤差 量的工具本身就不準
11 確認偏誤(蒐集階段) 只記下符合預期的觀察
12 時間與季節偏誤 把季節性波動當作自己努力的成果

三、數字直覺(6 種)

# 謬誤 一句話
13 基本率謬誤 只看 99% 的檢測準確率,忽略疾病本身的低患病率
14 賭徒謬誤 以為連開 10 次正面之後反面機率更高
15 小數法則 人數少的組,最好和最差的都是它們
16 辛普森悖論 每個子群體都更好,整體反而更差
17 區位謬誤 州的趨勢和個人的趨勢,方向可以相反
18 個體謬誤 個人的規律搬到州的層級,可能翻面

四、因果推論(5 種)

# 謬誤 一句話
19 干擾因子 第三個變數同時影響 X 和 Y,兩者看起來就有關
20 反向因果 因果方向弄反了:犯罪多才派比較多警察
21 對撞偏誤 只看通過篩選的樣本,本來無關的兩件事會變得有關
22 虛假相關 鸛的數量和出生人數相關,p = 0.008
23 中介變數謬誤 把原因和結果中間那一環控制掉,等於切斷你要研究的路

五、認知偏誤(7 種)

# 謬誤 一句話
24 確認偏誤(分析階段) 只搜尋支持預設觀點的資訊,主動迴避反面證據
25 錨定效應 判斷會往第一個看到的數字靠
26 可得性捷思法 容易想起來的事不代表發生機率更高
27 代表性捷思法 用「描述像不像」來判斷機率,忽略基本率
28 麥納馬拉謬誤 只量可以量的,忽略量不到但重要的東西
29 古德哈特定律 指標一旦成為目標,就不再是好的指標
30 路徑依賴 早期的選擇鎖住了後來的選項

六、統計方法(11 種)

# 謬誤 一句話
31 迴歸謬誤 把極端值自然迴歸平均,當成自己做的事有效
32 多重共線性 預測變數之間高度相關,係數估計不穩定
33 遺漏變數偏誤 漏掉重要的變數,它的影響會算到別的變數頭上
34 過度擬合 模型連訓練資料的雜訊都背了下來,換新資料就不準
35 資料洩漏 訓練資料裡混進了實際使用時不會有的線索
36 前視偏誤 回測用到了當時還不知道的資料
37 外插謬誤 把模型延伸到訓練範圍以外,結論不可信
38 誤解 P 值 p 值說不出「新版本更好的機率」
39 忽略效果量 統計顯著但效果微小,沒有實際意義
40 檢定力不足 樣本數太小,真實存在的效果也測不到
41 多重比較問題 跑夠多檢定,總會有一個 p < 0.05

七、實驗設計(9 種)

# 謬誤 一句話
42 霍桑效應 被測者知道自己被觀察就改變行為
43 安慰劑效應 相信治療有效,主觀感受就真的變好
44 實驗者期望效應 研究者的細微行為暗示了「正確答案」
45 介入偏誤 實驗組和對照組在變因以外還受到不同對待
46 無反應偏誤 沒回應的人跟有回應的人是不同群體
47 問卷偏誤 問法換一下,答案就跟著變
48 資訊偏誤 資料的標籤本身就是錯的
49 偵測偏誤 找得越用力,找到的越多,實際發生的不一定變多
50 排除偏誤 把「異常值」刪掉,可能把最重要的信號當雜訊丟了

八、呈現與報告(5 種)

# 謬誤 一句話
51 截斷 Y 軸 Y 軸不從 0 開始,小變化看起來很大
52 雙軸圖表誤導 兩把不同的尺,無關的兩條線也能畫成同步
53 摘櫻桃 只展示成功的結果,隱藏失敗的嘗試
54 檔案抽屜問題 負面結果留在抽屜裡,公開的結果就偏向正面
55 發表偏誤 期刊偏好有顯著結果的研究

← 回系列總覽