[問題] 統計檢定的意義？在資料分析中真的有用？

[deniel367 (dann)]

各位前輩好
有個問題藏在我心裡很久了，但是遲遲未去解開他
直到最近有機會再次遇到這個問題，想要認真去探討這個問題。


如標題所述，我想問的問題是，統計檢定在真實資料分析中真的有用嗎？或者更精確一點
來說，這問題應該是：
在真實資料分析中，真的會完全依據統計檢定的結果，來做出inference、下結論、做決
策嗎？


會有這樣的想法是這樣子的：
我最近在做一個分析，姑且令它為one-way ANOVA好了。
一如往常，我資料分析的步驟都是先畫圖，然後再做分析
以one-way ANOVA為例，就是先做box-plot觀察不同組的平均＆分布狀況，再去做檢定。
但是我認為，等做完圖後，事實上，我通常就可以依據圖，去直接做出判斷，一定要再去
做檢定嗎？


我認為可以不做檢定的理由有兩者：
1, 實務上，就算假設檢定出來的結果為不顯著，但是圖"看起來"顯著，我想，做決策的
人還是會採用最直接的，也就是圖呈現的結果吧？ 況且在工作時，通常會有時間壓力，
老闆可能沒耐心等你慢慢做檢定，再去做決策(做檢定前還需要去檢查一堆假設符不符合.
..)

2, 我認為統計檢定就像是圖一樣，只不過是提供了另一種看資料的視角，而且我懷疑它
的效力。像是，比如說t檢定好了，我其實一直很懷疑t檢定，因為t分配其實不過只是某
個人自己訂的分配嗎xD 那我自己定一個分配，假設比t分配的tail更長，然後依據那個分
配去做檢定，不也可以是一種檢定嗎xD..？如果是，那檢定的效力何在？




謝謝看完～
再請前輩們解惑

--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 111.248.197.201
※ 文章網址: https://www.ptt.cc/bbs/Statistics/M.1541434926.A.441.html
→ a22735557: 你可以自己試試看去設計出一個分配阿...而且是要大家認
→ a22735557: 可的
→ F0011010101: 你能知道你圖上看到的差異，有多少可能只是巧合嗎
→ andrew43: 1 這是決策者自己的問題，不是統計的問題。統計沒用，
→ andrew43: 那你生病吃的藥是怎麼被認定是有效的？2 不是這麼簡單
→ andrew43: 隨便自訂。
→ recorriendo: 你根本搞清楚"統計推論"的目的在從樣本觀察推論母體
→ recorriendo: 性質 兩組相同的母體各抽數樣本算平均值必然有差異
→ recorriendo: p值就是在量化這個差異量(或更大差異)在母體全然一樣
→ recorriendo: 時出現的機率 t-test也不是隨便定的 那是在對母體作
→ recorriendo: 出更多假設下推導出來的
→ maoc: 「認真的探討」源自於對數統的理解。
→ recorriendo: 一般統計檢驗給出的的是type 1 error rate上限 你的
→ recorriendo: 決策能接受多少error本來就是自己要決定的 如果更關
→ recorriendo: 心type 2 error rate的話那也有方法適用
噓 onionsteven: 這要看1的實務是在哪種領域了 醫學或科學看圖嘛....
→ hsnuyi: 如果你是在問ML 那不用懂統計 資料丟進NN就好 像是自駕系
→ hsnuyi: 統 等撞到人再修正就好
→ f496328mm: 只不過是某個人自訂的??  那是經過嚴謹的推論證明來的
→ f496328mm: 醫學上統計檢定用的更多，因為那是人體用藥
→ f496328mm: 在藥廠，實務上，你可以單看圖就去下決定??
→ Wzx66666: 你看覺得顯著，但是你確定我看也會覺得顯著嗎？
→ deniel367: 謝謝各位指教，我可以比較懂為何要做檢定了
→ jayfei2000: 基本上你對一件事情做檢定的時候，
→ jayfei2000: 其實你是懷疑這件事情的。
→ jayfei2000: 你不相信他，
→ jayfei2000: 你才會做檢定！
→ jayfei2000: 我用一個例子來說好了，
→ jayfei2000: 地球是圓的。
→ jayfei2000: 你會用統計學的方法去針對「地球是圓的」，
→ jayfei2000: 這件事情作假設檢定嗎？
→ jayfei2000: 現代的科學已經用很多方法證實地球是圓的。
→ jayfei2000: 所以要用假設檢定做的事情，
→ jayfei2000: 基本上你都在懷疑他。