[討論] 現行民調方法的誤差
現行政治民調
多普遍運用於施政滿意度、重大議題態度的探詢上
到了選舉季節,則進一步成為政黨舉辦初選、對外宣傳的工具
然而,千篇一律的那句「在95%的信心水準下,誤差為3.4%」
從經驗法則來看,似乎很難讓人相信是如此
2008年選前,長昌陣營喊出黃金交叉,吳國棟於投票時間結束後在大話表示只差1%
與結果相比誤差都有16%
2011年民進黨總統初選採對比式民調,蔡跟蘇都領先馬7%(與結果誤差13%)
2012年選前,民進黨估票認為會贏15-20萬票,相比差了100萬票(與結果誤差7.5%)
這種落差並非只體現於國內的大型選舉
蓋洛普(Gallup)在去年就獨排眾議,預測美國總統大選將由羅姆尼勝出
結果出來當然是被罵到臭頭,後來被迫向密西根大學求救
改變民調的分析與加權方法
一般而言,民調的誤差可能來自
(一)受訪者誤差:主要是因為受訪者不能真實反映選區狀況造成的誤差
現行是透過區域抽樣、戶中抽樣、大量樣本、加權等方式降低
但是因為市話使用率降低、拒訪而使抽樣偏差的方法仍很難完全避免
(二)回答誤差:主要是未能探詢受訪者本意造成的誤差
例如「隨便」、選民反串、調查員過度或偏差暗示、題目唸錯或唸不清楚等
這種必須透過題目標準化、調查員訓練和大量樣本解決
特別是反串這部分,即使是透過排藍/綠民調,也是「上有政策下有對策」
(三)調查執行誤差:主要是民調機構執行民調造成的誤差
包含選用的調查方法、分析方法、機構效應,甚至是否有民調(ㄊㄧㄠˊ)問題
我覺得這是目前民調問題最大的一個部分,值得後續討論
(四)其他誤差:例如隨機誤差等
在此要討論的是上述的第三項「調查執行誤差」
其又可大致細分為:
一、調查方法:首先,現在台灣民調仍依舊普遍使用市內電話,就算有加入手機也是少數
這是因為很難從手機號碼判斷選民所在的選區
然而市內電話本身涵蓋率就有很大問題,電話簿能涵蓋全台灣所有市話嗎?
即便打進去了,能保證家人都是隨機接聽的嗎?還是媽媽接的機率比較高?
就算用了區域和戶中抽樣,還是不可否認有一大群人是調查不到的
還有些機構會為了省成本使用語音電話,我覺得完全沒有任何參考性
二、分析方法:單純以未處理過的數字當結果,自然是有誤差
但若使用了自以為是卻錯誤的分析方法,誤差只會更大
還好的是TVBS目前所用的交叉分析看起來似乎還算公開先進準確
至於其他民調中心那種不為人知的分析方法,就有點令人害怕了
三、機構效應:廣為人知的誤差來源
例如自由時報民調中心(不知道創出來了沒?)的民調
某黨推出的議題和候選人就很可能由輸變贏、由弱轉強
且不要以為不講是哪個機構就能降低,因為在來路不明的情況下
受訪者拒訪,或講到一半不耐煩直接掛掉的機率都會上升
四、民調(ㄊㄧㄠˊ):機構效應加強版,純粹把民調當做操弄的工具
例如台灣智庫,我是不知道他們有沒有在接case
但誤差大到連DPP初選都沒看過有人用
(觀察家和精湛是目前DPP初選定番)
不過DPP自己也向來都有在選前亂估票、喊票的習慣就是了
---
看過以上之後,我就想提一個例子
TVBS在2013年12月05日,公布了一個《民進黨游錫堃參選新北市長民調》
裡面以游錫堃和林志嘉為準,向國民黨三人進行對比式民調
得到的結果是朱立倫領先游31%(56%:25%),侯友宜領先游16%(45%:29%)
反倒是李鴻源落後游錫堃10%(31%:41%),若把同時調查的林志嘉算成綠票,輸得更多
這個結果滿讓人好奇,只不過把朱立倫換成李鴻源,這選票來回就能差41%
這中間約20%的移動,在新北市以七成投票率算,那是44萬票由藍轉綠啊
所以我就深入地看了一下這調查的分區抽樣結果
全體 板橋 重新 雙和 新店深坑 土樹 七星
(100%) (15%) (31%) (17%) (9%) (15%) (12%)
李鴻源 31 37 29 36 37 21 30
游錫堃 41 37 40 36 51 55 37
林志嘉的暫且就略過了
一開始板橋和重新還可接受
但看到雙和跟新店瞬間吐血
蘇貞昌選連任時,這兩地尚且噴出十萬票
要是游水牛能在雙和打平又在新店贏14%,那2016蔡該閃邊,總統讓給他選才對
更別提土樹三鶯大贏34%,是土城王發威了嗎...
七星地區有淡水跟汐止兩大票倉壓陣,KMT要輸都難,更別提要輸到7%
所以對這民調根本只能一笑了之,
同篇民調游對朱,重新地區倒輸25%,可見這反串也太厲害
不足採信
簡單做結
從上面的討論可以發現
儘管在台灣,民調方法已發展許久,但現行民調的誤差仍是過於驚人
但藍綠兩黨仍以此做為初選提名和選舉中操盤的依據
實在危險,除了政黨未必能因此推出最強、最好的候選人
對於縣市的未來發展也可能會有所影響
2005年,黃敏惠選上嘉義市長
餘下的一席立委於隔年補選,國民黨內由江義雄和蕭淑麗爭取提名
三家民調公司中,蕭在兩家小勝,卻在第三家大敗,平均下來由江義雄出線
雖然最後國民黨還是勝選,但基於民調方法有如此大的誤差
若我是蕭,想來也一定會有所不平,難怪到了今日蕭還堅持不參加初選
當今民調方法的缺陷
實在不能不令人唏噓
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 61.230.164.181
推
12/15 14:50, , 1F
12/15 14:50, 1F
推
12/15 15:04, , 2F
12/15 15:04, 2F
推
12/15 15:06, , 3F
12/15 15:06, 3F
→
12/15 15:07, , 4F
12/15 15:07, 4F
→
12/15 15:07, , 5F
12/15 15:07, 5F
→
12/15 15:07, , 6F
12/15 15:07, 6F
→
12/15 15:07, , 7F
12/15 15:07, 7F
→
12/15 15:07, , 8F
12/15 15:07, 8F
※ 編輯: gamania10000 來自: 61.230.164.181 (12/15 15:10)
推
12/15 15:15, , 9F
12/15 15:15, 9F
推
12/15 15:21, , 10F
12/15 15:21, 10F
推
12/15 17:56, , 11F
12/15 17:56, 11F
→
12/15 17:56, , 12F
12/15 17:56, 12F
→
12/15 17:57, , 13F
12/15 17:57, 13F
推
12/15 18:14, , 14F
12/15 18:14, 14F
→
12/15 18:14, , 15F
12/15 18:14, 15F
→
12/15 18:14, , 16F
12/15 18:14, 16F
→
12/15 18:49, , 17F
12/15 18:49, 17F
推
12/15 20:25, , 18F
12/15 20:25, 18F
推
12/15 22:05, , 19F
12/15 22:05, 19F
推
12/16 09:17, , 20F
12/16 09:17, 20F