Re: [心得] 最近接到遠X雜誌的電話問卷調查....唉

[waynedd (加西莫多)]

民調不管是哪一份都是希望能探查到民眾的意見，只是「媒體或是其他機構
的民調」真的都幾乎用二分法嗎？顯然是沒有注意這些民調的發布。以TVBS
的民調為例，「民進黨總統初選黨員投票前四大天王民調」中，在「請問您
最支持誰代表泛綠陣營爭取2008年總統寶座？」的題目中，就有列出「謝長
廷、蘇貞昌、呂秀蓮、游錫坤跟『未決定』」的選項。如果嫌這個是調查政
治所以選項會這麼做，那看看「母親節媽媽健康行為調查」，當問「覺得你
現在的生活幸福嗎？」中，選項有「幸福、不幸福跟『不知道／沒意見』」
。在「婦女人權與婚姻暴力民意調查」中，甚至是用五等分量尺，例如「對
於目前的婚姻生活滿不滿意？」，就分「非常滿意、還算滿意、不太滿意、
非常不滿意跟『沒意見』」的選項。
而且題目設計上先問好不好的態度，下一個才問強度，這樣若是堅持回答不
知道或沒意見的樣本，在於強度問題上有跳答嗎？因為就一個「不知道或沒
意見」的樣本，他們如何體會出「強度」？問卷設計上有個習慣，盡量減少
跳答的方式，因為訪員必須隨時注意什麼題目該跳答什麼不該，之後對於建
檔要跑統計來說也是很不方便，這都會讓錯誤產生的機會增加。所以把態度
跟強度設計在一個題目上不是就很方便嗎？問一個題目，可以有「非常好、
還算好、不太好、非常不好(還算好跟不太好中間甚至可以加入普通)跟沒意
見」這些選項，態度與強度都兼備。而且這樣還可以縮減題目，電訪最忌諱
的就是題目過多，題目過多樣本調查的失敗率就會上升。
所以在一個結構化的問卷設計下，告知受訪者的只有「好跟不好」兩個選項
，又如何使受訪者得知還有第三個「不知道」的選項呢？而且一個結構化問
卷設計上已經是只有「好跟不好」的選項，當出現第三個選項時，要如何記
錄讓統計軟體知曉？而且結構化問卷必須「窮舉」出所有的可能性選項，略
去受訪者回答「不知道」的選項，這是沒有做到設計問卷該注意的地方。
當一份民調出現「不知道」的比例比較高，這不是就需要去探究「為何民眾
不知道的比例這麼高」？說問卷設計不好的可能性，是有可能的，結果因為
都只讓民眾回答兩極端的選項，卻沒有發現問卷有設計不好的地方，而一直
拿一份有設計不好的問卷詢問，不思改善問卷設計不好的地方，還拿得出來
的結果寫評論，那這樣的「精準新聞寫作」有「精準」嗎？
第二種民眾覺得問題太難的可能性，這也是有可能，如果認為這些問題很專
業，沒有人說一定得要調查普羅大眾才算，例如經濟問題，可以詢問身處在
金融圈專業人員。或許會說這樣就沒辦法推估回母體，這是當然，但是卻可
以得出「樣本母體」對於這個事情的態度看法，詢問專業人員得出專業的看
法，由這專業的看法中去做評論，不是更顯得專業性嗎？
再看看遠見所採用的調查方式是CATI，如果我印象沒記錯的話，這是訪員詢
問受訪者的時候，就會一邊問一邊鍵入受訪者回答的選項，民調中心的主管
會在後端即時看到呈現的一些百分比，而這些選項都應該會事先就已經建檔
完成，所以當受訪者回答到上頭所沒有的選項，我還真不曉得訪員該怎麼鍵
入該選項？
最後一項看到「樣本加權」，我認為這份民調的結果不用太在意，因為抽樣
的方法若是做的對，抽出來的樣本是可以反映母體的，會需要每次調查都做
樣本加權的話，表示該檢討的是抽樣方法，其實遠見的抽樣方法裡面，早有
一個顯而易見的偏差，這個偏差不修正，做出來的民調出現的誤差，永遠會
比所列出的誤差值還大。

--
※ 發信站: 批踢踢實業坊(ptt.cc) 
◆ From: 140.119.210.148
推 webonomics:問卷設計選項選擇性應做到和受訪者現實生活中完全一樣
→ waynedd:不過調查的情境永遠不同於受訪者原本的現實生活..在電訪的
→ waynedd:要求也盡量精簡題目..所以把態度跟強度分開問題目太多了..
→ waynedd:遠見題目設計只列兩極端選項的就13題..加問強度就double..
→ waynedd:這還沒加上人口變項所需要問的題目..