3.3 1963年:唐納·坎貝爾與準實驗設計——社會改革的評估科學#
1. 問題:大社會計畫的「有效性」危機#
1960 年代,美國推動「大社會」(Great Society)改革:啟蒙計畫(Head Start)、職業訓練、社區行動。國會與社會科學家很快發現兩個殘酷事實:
- 不能隨機化:你無法隨機決定哪些孩子「得不到」學前教育、哪些社區「得不到」補助——政治與倫理不允許(3.2 節方法的極限)。
- 觀察比較全是陷阱:參加計畫的人本來就不同(自我選擇);政策在經濟衰退時啟動(時點混淆);受助者知道自己在被觀察(Hawthorne 效應)。
沒有隨機化,還能做因果推論嗎?這是政策科學的存亡問題。Donald Campbell 與 Julian Stanley 的《實驗與準實驗設計》(Experimental and Quasi-Experimental Designs for Research, 1963)正面回答。
2. 數學:潛在結果與設計對策#
潛在結果框架的直覺#
個體 \(i\) 的處理效應定義為兩個「潛在結果」之差:
\[ \tau_i = Y_i(1) - Y_i(0) \]
但 \(Y_i(1)\) 與 \(Y_i(0)\) 中永遠只有一個可觀測(因果推論的根本缺失資料問題)。簡單比較觀測平均值:
\[ E[Y \mid D=1] - E[Y \mid D=0] = \underbrace{E[\tau]}_{\text{想要的效果}} + \underbrace{\text{選擇偏差}}_{\text{混雜}} \]
隨機化(3.2 節)使選擇偏差為零;準實驗的任務是用設計與假設把它削掉。
Campbell 的設計清單#
Campbell 將「威脅效度的因素」(歷史事件、成熟效應、測驗效應、迴歸到平均…)系統化,並為每個威脅開出設計處方:
| 設計 | 邏輯 |
|---|---|
| 前後測對照組(nonequivalent control group) | 對照組吸收「歷史/成熟」共變 |
| 時間序列設計(interrupted time series) | 政策前後多點趨勢比較,排除長期趨勢 |
| 迴歸不連續設計(RDD) | 以門檻規則(如 60 分及格)指派:門檻附近的比較近似隨機 |
其中 RDD 的數學最優雅:若指派變數為 \(X\) 、門檻 \(c\) ,則
\[ \tau_{\text{RDD}} = \lim_{x \downarrow c} E[Y \mid X = x] - \lim_{x \uparrow c} E[Y \mid X = x] \]
只要個體無法精確操縱 \(X\) 達門檻,門檻兩側的個體「近乎同質」,因果詮釋成立——制度規則中的「一刀切」原來是免費的隨機化。
graph TD
A[政策無法隨機化] --> B{有何指派規則?}
B -->|門檻規則| C[迴歸不連續]
B -->|分階段實施| D[差異中的差異 DID]
B -->|衝擊突發| E[中斷時間序列]
B -->|工具可尋| F[工具變數]
C & D & E & F --> G[近似的因果推論]差異中的差異(DID,Snow 1855 年霍亂分析已是原型;Ashenfelter 1970 年代發揚)則用兩次差分消除固定差異:
\[ \hat\tau_{\text{DID}} = (\bar Y_{\text{處理,後}} - \bar Y_{\text{處理,前}}) - (\bar Y_{\text{對照,後}} - \bar Y_{\text{對照,前}}) \]
3. 後果#
- 政策評估成為學科:美國國會 1974 年設立評估辦公室;世界銀行的影響評估(impact evaluation)工業化;Duflo、Banerjee、Kremer 以田野 RCT 獲 2019 諾獎,其方法譜系正是 Campbell(+3.2 費雪)。
- 社會科學的認識論轉向:「因果推論」從哲學爭論變成設計工程——Rubin (1974) 的潛在結果模型將 Campbell 的設計直覺形式化,此後「因果 = 潛在結果比較」成為統一的數學語言。
- 證據位階:系統性回顧與證據等級制度(醫學、教育、發展經濟學)以設計強度排序證據。
4. 回饋#
Campbell 的設計清單原本是「技巧集」,1990 年代被 Pearl 的有向無環圖(DAG)與 do-演算法、以及 Rubin 潛在結果框架公理化:因果假設被畫成圖、可辨識性變成圖上的可判定問題。社會科學的設計智慧反哺統計學,形成今日「因果推斷」這一大顯學——並成為機器學習時代的核心課題(5.3 節:相關不是因果,演算法尤其如此)。
5. 延伸思考#
- Campbell 自己警告「通用定律的社會科學」之限,晚年轉向「演化認識論」——設計得再好,結論能外推多遠?
- 政策評估的「有效」是對誰有效?(分配問題 vs. 效率問題,通往 5.1 節社會選擇)