跳轉到

機率統計史 -- AI 偵探風格#

以「推理探案」的方式,追查機率與統計從 Pascal 的賭桌到今日機器學習的每一步: 前因是什麼?線索在哪裡?推理如何展開?後果又如何改變了整個科學與資訊世界?

案件卷宗(歷史年表)#

賭桌上的機率(1654–1718)#

年份 事件 檔案
1654 Pascal 與 Fermat 書信往來,解決「賭注分配問題」 1654-PascalFermat賭注分配.md
1657 Huygens 出版《論賭博中的計算》,第一本機率教科書 1657-Huygens賭博計算.md
1662 Graunt 出版《自然與政治觀察》,生命統計的誕生 1662-Graunt生命統計.md
1713 Jacob Bernoulli 出版《Ars Conjectandi》,證明大數法則 1713-Bernoulli大數法則.md
1718 De Moivre 出版《The Doctrine of Chances》,導出常態曲線 1718-DeMoivre常態曲線.md

分析機率論(1763–1837)#

年份 事件 檔案
1763 Bayes 遺稿由 Price 整理出版,Bayes 定理問世 1763-Bayes定理.md
1805 Legendre 發表最小平方法 1805-Legendre最小平方法.md
1809 Gauss 建立常態誤差理論,高斯分佈誕生 1809-Gauss常態誤差理論.md
1812 Laplace 出版《機率的分析理論》,機率論的集大成 1812-Laplace分析理論.md
1837 Poisson 提出蒲松分佈與大數法則的推廣 1837-Poisson分佈.md

統計學的誕生(1885–1925)#

年份 事件 檔案
1885 Galton 提出迴歸與相關 1885-Galton迴歸與相關.md
1900 Pearson 提出卡方檢定 1900-Pearson卡方檢定.md
1908 Student(Gosset)提出 t 檢定 1908-Studentt檢定.md
1922 Fisher 提出最大概似估計(MLE) 1922-Fisher最大概似估計.md
1925 Fisher 出版《Statistical Methods for Research Workers》 1925-Fisher統計方法.md

公理化與推論(1933–1946)#

年份 事件 檔案
1933 Kolmogorov 出版《機率論基礎》,以測度論公理化機率 1933-Kolmogorov公理化.md
1933 Neyman 與 Pearson 提出假設檢定理論 1933-NeymanPearson假設檢定.md
1938 Neyman 提出信心區間 1938-Neyman信心區間.md
1946 Ulam 與 Metropolis 提出 Monte Carlo 方法 1946-UlamMonteCarlo方法.md

計算統計與機器學習(1977–至今)#

年份 事件 檔案
1977 Dempster–Laird–Rubin 提出 EM 演算法 1977-EM演算法.md
1979 Efron 提出 Bootstrap 法 1979-EfronBootstrap法.md
1984 Geman 兄弟提出 Gibbs 抽樣(MCMC) 1984-Gibbs抽樣.md
1988 Pearl 出版《Probabilistic Reasoning in Intelligent Systems》,貝葉斯網路 1988-Pearl貝葉斯網路.md
2001 Breiman 出版《Random Forests》,隨機森林 2001-Breiman隨機森林.md

關鍵人物年表#

年代 人物 貢獻
1654 Pascal / Fermat 賭注分配問題
1657 Christiaan Huygens 論賭博中的計算
1662 John Graunt 生命統計
1713 Jacob Bernoulli 大數法則
1718 Abraham de Moivre 常態曲線
1763 Thomas Bayes Bayes 定理
1805 Adrien-Marie Legendre 最小平方法
1809 Carl Friedrich Gauss 常態誤差理論
1812 Pierre-Simon Laplace 分析機率論
1837 Siméon Denis Poisson 蒲松分佈
1885 Francis Galton 迴歸、相關
1900 Karl Pearson 卡方檢定
1908 William Gosset (Student) t 檢定
1922/1925 Ronald Fisher MLE、實驗設計
1933 Andrey Kolmogorov 機率公理化
1933/1938 Neyman / Pearson 假設檢定、信心區間
1946 Ulam / Metropolis Monte Carlo
1977 Dempster / Laird / Rubin EM 演算法
1979 Bradley Efron Bootstrap
1984 Geman 兄弟 Gibbs 抽樣
1988 Judea Pearl 貝葉斯網路
2001 Leo Breiman 隨機森林