[討論] 盲測:系統硬碟品牌主觀聽感差異

[ultimatevic (龜龜龜)]

一、前言:

        本次盲測聚會是基於板友 martinlin77的引言文章 https://reurl.cc/x0vxA5
    而舉辦的。目的是探討不同的系統硬碟品牌是否會影響主觀聽感。
        我是 martinlin77的好友，提供場地和一部分器材作為測試用途。本次
    聚會就器材和人數來說算是實驗性質的嘗試，原本預計是 3~4位測試者，但聚會當
    天因各種因素只有 2位能參加。要湊合時間、器材、場地確實是一件不容易的事情
    。

二、參與人員、測試方法和設備環境:

　    參與人員: 被測試者 2人，操作者 1人
      測試方法:
           (1)盲測採單盲測試，由操作者操作電腦系統硬碟的更換，以喇叭系統播音
              。被測試者在無法得知是哪一顆系統硬碟的狀況下，依聽感用紙筆寫出
              目前的系統硬碟。
           (2)為了減少記憶力對於聽感測試的影響，只測試兩顆 SSD系統硬碟。一台
　　　　　　　電腦主機裝置多顆系統硬碟和全新的windows 10系統，並藉由重開機以
              BIOS選定系統硬碟。
           (3)同一首歌播音 2分鐘，依亂數表排定的兩顆硬碟排序，共播放16次（16
              題）。每次撥放都會重新開機（BIOS選擇硬碟）並撥放蜂鳴聲。每播放
               4次休息兩分鐘。
           (4)正式盲測前以同播音系統讓被測試者熟悉聲音，並做不盲的聲音判斷（
　　　　　　　即一般的 ABT測試）。此階段確認被測者對於聲音差異的判斷是否有信
              心。
                被測者Ａ: 不同系統碟差異明顯，可由Ｚ軸等聲音特性判斷。
                被測者Ｂ: 差異極為微小甚至無法辨別。
           (5)因為被測試者過少，曲目採用被測試者 A熟悉之曲目。

      播音系統設備:
           (1) 喇叭: The BMR Philharmonitor
           (2) 後級: QUAD Artera Stereo
           (3) DAC: RME ADI-2 DAC FS （同軸信號輸入）
           (4) 個人電腦: 由被測者Ａ提供（同軸信號輸出）
                     MB: ASUS H97M-PLUS
　　　　　　　　　　 CPU: Intel Xeon E3-1231 v3
                     RAM: 資訊未提供
                     GPU: GT1030-SL-2G-BRK（不太確定）
                     PSU: 海韻無風扇 400W
　　　　　　　　　　 系統硬碟（測試硬碟）: SAMSUNG 860 EVO
                                           Intel Optane SSD 900P
                     播音軟體: ROON
                     播放曲目: 柴田淳 billboard live 2013:道

      播音環境: 一般家用環境
　　　  　　　　無專線，無電源處理（濾波／隔變），電源有安全地

三、測試結果
      直接上圖: https://imgur.com/9gQntWb.jpg
      Ｏ代表900P系統碟，Ｘ代表 860 EVO系統碟。紅字是被修正後的正確答案。
      左邊的答案紙是被測試者 A，右邊的答案紙是被測試者 B。
        被測試者 A: 16題答對 7題，盲聽正確率約 43.8%
        被測試者 B: 16題答對 6題，盲聽正確率約 37.5%
      兩位被測試者皆沒有達到 50%的盲聽正確率。

四、討論: 寫J個沒有點數啦！有空我會回覆推文。
          希望下次能有大一點的，樣本夠多的盲測。

--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 223.138.97.146 (臺灣)
※ 文章網址: https://www.ptt.cc/bbs/Headphone/M.1601865844.A.1FF.html
※ 編輯: ultimatevic (223.138.97.146 臺灣), 10/05/2020 10:46:30
推 Daedolon: 雖然不知道會不會有影響  但應該做ABX盲測會比較好
→ Daedolon: 直播測AB 遇到的問題就是受試者不知道既有硬碟對聲音
→ Daedolon: 的影響  只能靠想像的  尤其又怕事不熟的系統
→ Daedolon: 實務上當然很難啦  換硬碟又開機花很多時間
確實是時間因素所以放棄ABX的方式，以測前一般的ABT讓被測者熟悉聲音。
但我們有確認被測者在熟悉聲音的期間，對於聲音差異的判斷是否有信心。
※ 編輯: ultimatevic (223.138.97.146 臺灣), 10/05/2020 10:52:05
推 martinlin77: 聽到後來已經完全累了啦......
推 martinlin77: 曲目是 柴田淳 billboard live 2013:道
※ 編輯: ultimatevic (223.138.97.146 臺灣), 10/05/2020 10:55:48
※ 編輯: ultimatevic (223.138.97.146 臺灣), 10/05/2020 10:57:44
※ 編輯: ultimatevic (223.138.97.146 臺灣), 10/05/2020 10:59:16
推 asdfg0612: 平常自己在測東西也不太可能ABX阿 又不是檔案點了就換
推 bh2142: CPU和主板跟我的電腦一樣欸
→ asdfg0612: 這結果其實... 滿有代表性的了 XDDD
推 icekiba: 肚子餓了。
推 banque: 推實證精神 不知道整場測下來費時多久?
加上討論交流、聊天打屁的時間，大概 3個小時左右（差不多一個下午）。
流程熟的話應該可以更短。
※ 編輯: ultimatevic (223.138.97.146 臺灣), 10/05/2020 11:07:15
推 bh2142: 雖然我本來就不信這套，不過感覺系統還有很多可以調整的
→ bh2142: 地方，不知道有沒有影響，不過既然A都說有顯著區別但做出
→ bh2142: 來這樣應該還是有點參考價值（？
推 Scintillans: 即使受測者對於聲音的差異具有信心，是否有可能受測
→ Scintillans: 者過分自信，實際上他仍無法記憶聲音的特徵？如果是
→ Scintillans: 如此，那這個測試對於「判斷並記憶聲音的不同」具有
→ Scintillans: 意義，但「判斷聲音的不同」就稍顯不足
確實，我們也覺得記憶力會影響結果，所以從 3~4顆硬碟改成只用 2顆做測試
如果要盡可能消弭記憶力的影響用ABX的方式會更好
但因為時間因素且測試者樣本過少，只能用內文的測試方式盡可能減少記憶力的影響
如果還有時間和機會舉辦一次樣本更大的板友測試，會改善實驗流程
推 kaienchou: 非常的有趣，感覺很多東西也能這樣玩
推 selnec: 兩顆硬碟都插著的話分不出來應該正常  不相信只換系統碟會
→ selnec: 有聽感差異…
我也覺得硬碟兩顆是否都插著可能會是潛在變因
但要解答的話只能下次了XD
→ w3160828: 所以結論就是你們耳朵不夠好
推 kaienchou: 哈，樓上金耳大也能辦一場證實他們耳朵真的不好
推 icekiba: 我也覺得w大應該來踢館一下證實耳朵高人一等
推 bery: 這結果代表性還滿足的，認為硬碟效果有差的看來心理作用居多
→ bery: ，看看有沒有神耳要出面挑戰推翻
推 martinlin77: 願意來參加已經很感謝了...
→ martinlin77: 柴田淳那張不錯欸
→ bery: 而且2選1用猜的理論上也是50%, 神耳應該要挑戰90%
推 dogluckyno1: 推實際測試
→ evadodoya: 不錯呀 有做就給推 我去的話我只打算聊天
→ evadodoya: 能有耳機系統比較或許有可能會比較高
→ odanaga: 真的是蠻累的
推 luwatercolor: 好慘，哈哈
推 addy7533967: 推推，我去只能坐板凳吃瓜Q
不...不會，我們超缺被測者
推 djboy: 實證給推！
推 thiy71: 推推 不管結果如何
→ djboy: 我也想過 ABX的X，但是一想到實操起來太可怕，真的只有
推 shukushoku: 推 900p下神壇了嗎
→ djboy: 把音響當工作的人才有時間精神與動力來執行。
推 daniel7894: 先推一個實測精神
推 luwatercolor: 另外請問ultimatevic你這系統的900P是一直用著來嗎
→ luwatercolor: ？還是這次測試才上的0.0
硬碟是跟測試者借的，所以這個系統算是本次測試才上
推 chibob: 推推
推 StNeverRush: 推實驗精神！！
推 lee28119: 推實測
推 whydan: cool
推 adamptt: 沒有順手找一個公認有差的東西（ex：訊號線）做對照 那就
→ adamptt: 無法知道遊戲規則合不合理 講戲謔點盲測也可以是要受試
→ adamptt: 者邊倒立屁股夾甘蔗邊受測呀 但這樣測出來結果如何想也
→ adamptt: 知道
這個也是因為時間因素所以沒做，因為一想到還要跑16次就覺得生無可戀......
但如果可以申請研究經費和發表，小弟義不容辭
另外盲測後有在同一個系統上聆聽有無前級的差異，測試者AB主觀不盲都覺得有明顯差異
但這沒有當作測試的一部分，並沒有嚴格執行16次盲測，也沒有音量校準
推 kaienchou: 我是覺得對結果跟過程不滿意的也能自己辦個一場，能讓
→ kaienchou: 更多不同想法看法得到證實
※ 編輯: ultimatevic (114.47.69.177 臺灣), 10/05/2020 12:33:29
推 icekiba: 小弟我累了。格鬥音響就去觀戰就好。
推 Daedolon: 好玩比較重要啦，別太嚴肅
→ martinlin77: 樓上有人想請你倒立夾甘蔗來測.....
→ martinlin77: 樓樓上。更正
推 takeda3234: 有實驗精神推
推 senkuen: 好文 給推
推 znew1219: 推實證，不過900P有插在PCIE-1嗎？下次可以考慮耳機與fo
→ znew1219: obar
下次有機會可以加入耳機 +1
900P我就不清楚是放在哪一種介面了
※ 編輯: ultimatevic (114.47.69.177 臺灣), 10/05/2020 12:40:30
推 yys310: 推推
※ 編輯: ultimatevic (114.47.69.177 臺灣), 10/05/2020 12:43:28
※ 編輯: ultimatevic (114.47.69.177 臺灣), 10/05/2020 12:44:32
推 ddik32: 有實驗精神給推，版友交流好玩就好，結果就不用太認真了
※ 編輯: ultimatevic (114.47.69.177 臺灣), 10/05/2020 12:55:41
→ tedcat: 表示換硬碟本來就聽不太出來?
※ 編輯: ultimatevic (114.47.69.177 臺灣), 10/05/2020 13:00:59
推 lll156k1529: 實戰厲害了
→ luwatercolor: 其實吼，要盲測應該是找一個玩家，自稱自己的系統
→ luwatercolor: 能夠表現出差異，然後把人找去他家來盲測，而不是
→ luwatercolor: 搞一個混搭系統，然後所有測試者都是第一次聽過這
→ luwatercolor: 系統，而且也沒確定這系是不是能夠表現出差異，就
→ luwatercolor: 來盲測，也許這混搭系統連電源線的敏感度都很低了
→ luwatercolor: ，那又怎能夠表現出更細微的變化呢？
推 Kowdan: 推實驗精神
→ luwatercolor: 所以要找一個自稱能判別900P的燒友，然後用他的系
→ luwatercolor: 統當平台來盲測，這樣才會有基準，而不是誰都不能
→ luwatercolor: 確認自己系統能不能表現，甚至搞一個沒人聽過的混
→ luwatercolor: 搭系統，這樣反而難以測試
以我自己的立場來說，這應該是另一個層次的問題了(涉及對音頻系統的了解程度)
但解釋要打太多字，所以改天有空再另發一篇回覆
這也是為什麼盲測過後我有請測試者聆聽同一個環境下的耳機系統的原因
這一篇文章提供的資訊，應該「在該環境和測試條件下」來詮釋結果
如果在認為有差異的燒友家中得到盲測有差異的結果，後續要探討的東西才有趣
但接下來的實驗難度會越來越高，而且需要數量足夠的測試者
(OS: 給我經費!!!)
推 uone: 實測給推! 以後要戰switch的話也用這方法好了(疑
※ 編輯: ultimatevic (114.47.69.177 臺灣), 10/05/2020 13:17:20
推 kaienchou: 下次若要再舉辦，我自願當受測樣本之一XD
※ 編輯: ultimatevic (114.47.69.177 臺灣), 10/05/2020 13:23:03
推 kodokawa0515: 可自願當＋＋
剛搬離台北Q_Q
推 iamala: 推測試
推 n796885: 猛 看起來好累
推 icekiba: 我也覺得水色大的提議比較好…不過我一開始就講了…高美
→ icekiba: 館區間車可到
推 enamelcord: 推推~好好玩~
推 SoftwareSing: 有實驗給推
推 SahoYaho: 推推
推 dapple: 系統碟盲測如果聽得出來就神了 絕對是金耳朵
→ icekiba: 完全盲測真的神，先給拜。
推 ohlong: 玄學盲測 我好興奮
※ 編輯: ultimatevic (114.47.69.177 臺灣), 10/05/2020 17:21:26
推 purplesky911: 感覺蠻好玩的 放蜂鳴器是清耳朵的意思嗎？
其實是個無聊的小細節XD 單純作為一個重開機的信號告訴被測者已經重開機準備下一題
※ 編輯: ultimatevic (114.47.69.177 臺灣), 10/05/2020 17:56:23
→ icekiba: 其實是要叫醒一下大家
推 crazyke313: 以這次的結論來說是聽不出差異的~？
推 kaienchou: 這次的實驗能觀察到兩件事
→ kaienchou: 1.在龜大家固態硬碟的差異並不明顯
→ kaienchou: 2.受測兩人並沒顯著聽感差異，兩人"耳力"接近
→ kaienchou: 而ice大在家中的聆聽經驗與龜大家差異巨大的原因，可能
→ kaienchou: 要等龜大到ice大家中受測一次才能知道
推 breadf: 正確率低於50%，也就是反著猜比較準？
推 kaienchou: 我傾向是兩個選項過於接近的結果XD
推 uone: 所以一樣聽力別人覺得有差的東西 在我家可能反著猜比較準?XD
→ purplesky911: 靠北…原來是叫起床的XD
推 floriany: 這結果戰不起來。
推 asdfg0612: 這篇最棒的是盲測前有先讓A確認他覺得有差才開始盲測:D
推 midxnqx: 推舉辦盲測 辛苦了