看電影學統計:p值的陷阱 (3) – 「摘櫻桃」問題 – 菜市場政治學
本篇講到「摘櫻桃」問題,既然研究假設的先驗機率是如此重要,我們要如何去判定?要怎麼知道它是多少?我們必須要做文獻的分析、要建構我們的理論,在這種情況之下,會出現摘櫻桃的問題。 作者綜合閱讀文獻提出一個想法:統計學很快就會有很重大的改變,傳統的作法、用p值來作統計檢定的作法,大概再過幾年,就不容易再存在。所以大家必須要應變,這也是文章希望能夠提醒大家注意的一個問題。…
◎ 林澤民/美國德州大學奧斯汀分校政府系教授 ※本文原發表於作者 部落格 ,為演講內容。原文整理後已發表在《社會科學論叢》2016年10月第十卷第二期。全文請 點選按此 。投影片請 點選按此 。 〈系列1文章連結: p值是什麼 〉 〈系列2文章連結: p值不是什麼 〉 「摘櫻桃」問題 再來我們講到「摘櫻桃」問題,如同剛剛所提到,研究假設的先驗機率是如此重要,我們要如何去判定?要怎麼知道它是多少?我們必須要做文獻的分析、要建構我們的理論,在這種情況之下,會出現摘櫻桃的問題。這裡就是要呈現給大家看,譬如我們作20個統計檢定,從作第一個開始,本來有一個model,但是p值不顯著,我們就改一下model,加一個變數、減一個變數,或是把一個變數平方,或是把一個變數取log,或者把樣本除去一些,增加一些,這樣慢慢去試驗,最後終於得到一個顯著的結果了!但這裡告訴你,做了20個這樣的檢定,我們以為每一個檢定的Type I error 控制在0.05,可是20個裡面最少有一個顯著的或然率是多少?是 0.64。(圖八) 圖八 為了讓大家能夠進一步了解這個問題,再給大家看一部電影,這部電影是「班傑明的奇幻旅程」。 電影「班傑明的奇幻旅程」短片連結 讓大家看這部電影,我們可以注意到,這部電影所講的,跟上一部「玉蘭花」很類似,也在討論是這樣發生車禍到底是by accident還是by design。它的議論
Explore this link on the map →saved by
related reading
- Against NHST — LessWronglesswrong.com
- Berkson's paradox - Wikipediaen.wikipedia.org
- An Actually Correct Explanation of P-Valuesoutsidetheasylum.blog
- There are no statistics in the Kingdom of Godexperimental-history.com
- A Technical Explanation of Technical Explanation – Eliezer S. Yudkowskyyudkowsky.net
- E-values - Wikipediaen.wikipedia.org
- Bayesian Mindsetcold-takes.com
- 清大彭明輝的部落格: 學術文獻回顧與分析的程序與技巧mhperng.blogspot.com
- 清大彭明輝的部落格: 困境與抉擇mhperng.blogspot.com
- 清大彭明輝的部落格: 人文學科有何價值?mhperng.blogspot.com
- Privileging the Hypothesis — LessWronglesswrong.com
- What’s All the Buzz About Bayes? – Psychology in Actionpsychologyinaction.org