[問題] 機器學習與學生測試

[saltlake (SaltLake)]

 開發機器學習法的時候常常用一組公認的數據組做測試，以提供

 不同團隊開發的學習法的執行效能。

 那麼當比較兩個學習法的效能時，如果用到學生測試，則是否因

 為使用的都是同一組數據，應該用成對的學生測試分析法?

--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 114.44.194.246 (臺灣)
※ 文章網址: https://www.ptt.cc/bbs/Statistics/M.1577651495.A.1EC.html
→ andrew43: 可能可以，不過通常會亂數拆分出訓練與驗證資料，可能沒
→ andrew43: 想像中有意義。
 可是用來建立和測試這兩個演算法的數據組，不都是一樣的?
※ 編輯: saltlake (114.44.194.246 臺灣), 01/01/2020 02:21:05
推 evilove: 用在學生也是要區分training and test 怎會是同一組數據?
   兩個演算法都用同一組數據訓練，再用同一組數據測試
※ 編輯: saltlake (114.44.195.154 臺灣), 01/10/2020 17:43:11

   請問有沒有甚麼測試方法可以測試所用的數據到底適用獨立的還是成對的學生測試?
※ 編輯: saltlake (114.44.197.88 臺灣), 01/14/2020 08:15:31
推 evilove: 你說的學生測試 t-test?
→ evilove: 如果是t-test, 不明白為什麼兩個演算法效能怎麼t-test?
→ evilove: 你要拿什麼做 t-test?