[情報] 這本輕小說最厲害2012-評分計算及統計-

[kaitouGamer (木乃香備命)]

由於今年計分方式和以往不同

這篇目只是討論計分(以下只針對作品類別的評分，其他類別和過去計分方式一樣)，

首先從計分的三個來源說起。


HP是在今年9月1日～10月4日間，從它們的官網投票，今年有效票數為1434票。
投票成員為不確定多數。是接受廣泛大眾的喜好所做的調查。

協力者是從作者、評論家以及一些網站和部落格站長票選來的，今年有效票65票。
投票成員為相當程度關注輕小說的族群。是採納大量閱讀讀者們的看法。

モニター是委託其他公司調查，針對12～18歲、今年閱讀數51本以上的讀者，
有效票103票。
是想瞭解新進讀者群的口味。
---


計分方式分成過去(2011年前)和這次2012，


過去是每個協力者評選
第一名10分
第二名9分
…
第五名6分


HP和モニター是每個票選者投
第一名5分
第二名4分
…
第五名1分




---

過去(2011年前)是將這些分數累計起來計算，

總分排名就是名次。

這種計算方式過去給人詬病在於HP的樣本數過高，

導致成績名次可能被組織票左右。
(組織票就是特定族群拉抬特定作品)


這次2012有提到，改變投票方式就是為了避免變成HP人氣投票的問題，

所以在分數累計起來計算之後再除以特定母數，但沒有提到母數怎麼取。


以下統計1～60名當中，三類的分數分配，
樣本數共61，其中60名兩個同分。
X軸分數：零(0)、個(0.1~9.9)、1X(10~19.9)...依此類推
Y軸次數：█=2 ▄=1

---
                                       HP
  |    ▅
  |    █
30|    █
  |    █
  |    █
  |    █
  |    █
20|    █
  |    █
  |    █  ▅
  |    █  █
  |    █  █
10|    █  █
  |    █  █
  |    █  █      ▅
  |    █  █  ▅  █
  |    █  █  █  █  █  ▅          █
  ________________________________________________________________________
   零  個  1X  2X  3X  4X  5X  6X  7X  8X

---
                                     協力者
  |
  |
30|
  |
  |
  |
  |
20|
  |
  |
  |                ▅
  |                █
10|            █  █
  |█          █  █          █
  |█          █  █  ▅  ▅  █
  |█      ▅  █  █  █  █  █
  |█      █  █  █  █  █  █  █  ▅  ▅  █  ▅      ▅          ▅
  ________________________________________________________________________
   零  個  1X  2X  3X  4X  5X  6X  7X  8X  9X  10  11  12  13  14  15  16
                                                X   X   X   X   X   X   X
---
                                    モニター
  |
  |
30|█
  |█
  |█
  |█
  |█
20|█
  |█
  |█
  |█
  |█
10|█  █
  |█  █
  |█  █      ▅
  |█  █  █  █  ▅  █
  |█  █  █  █  █  █  █  ▅      █
  ________________________________________________________________________
   零  個  1X  2X  3X  4X  5X  6X  7X  8X

---

前60名作品的詳細各項分數可以到在下Blog看
http://blog.xuite.net/kaitougamer/yuki/54562746


可以看出至少有幾個明顯問題，
首先協力者的影響力變大，
高名次作品當中好幾個有超過9成的成績來自協力者，
某種程度上這比組織票更糟糕。



再來是モニター的0分非常多，
票數相當集中在已經動畫化播出的作品。



相較之下成績被HP左右的程度的確比較少，
但還是可以明顯看出集中在有名或動畫化作品的身上。


---

我認為這類投票都有個先天問題，
就是可投的作品太多，
但投的人太少，
導致票數分配不管怎樣都很不均勻。


再來就是會被人氣、動畫化等因素影響，
但也有不少好作品不人氣又難以動畫化，
只能說輕小說畢竟是商業作品，
這是難以擺脫的宿命。


評分計算改變，
說穿了就是為了反應三種指標族群的重要度，
那項該配多少見仁見智，
但我覺得上述兩個存在的先天問題，
就已經注定讓這類排名難以信服。

而這次又因為分配似乎不夠均勻，
今年的罵聲似乎比往年都來得高，
此外還有廢除モニター的聲浪XD

總之，看看就好。

--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 122.126.138.46
推 jujustine83:推
推 danielqwop:排名這種東西看看就好，只是有些票數真的是極端到值得
→ danielqwop:拿來研究一下就是。
推 jack0124:協力者 文學少女is 學生會全部被打0分..........
→ jack0124:圓環少女灌了160分..............
→ jack0124: 放學後的悠閒時光感覺有像學生會的小品
→ jack0124:也是被灌不少分 這樣更極端吧.............
→ danielqwop:有好幾個都是協力者灌了快90%的票
→ danielqwop:hP反而好一些，最後一個才是最極端一堆0
推 shodeah:モニター比較像是針對一般ACG迷而不是輕小說讀者做的調查
→ shodeah:集中在動畫化作品的情況從一開始就沒有改變過
文章有提到モニター讀者篩選的條件 只是表現出來的不像看超過50本輕小說的讀者
推 pipi5867:monitor跟協力者問題主要都還是母數太小了
→ pipi5867:如果放大個好幾倍,可能就不會那麼誇張
推 jack0124:這樣完全沒有意義第四名靠協力著灌160分比闢
→ jack0124:不如再分有動畫過跟沒動話的
→ jack0124:有一定人氣得再協力者部分常常都是0.......是怎樣
→ jack0124:就是要跟人家不同\?
推 shodeah:我是認為有些人當作品愈看愈多時喜好有時會轉向另一種極端
→ shodeah:就是跟一般讀者的主流喜好有差，這種情況是無法避免的
推 watanabekun:前60名三項得分總計：HP923.5  協2667.8  モ837
推 watanabekun:三項原始分數總計：  HP21510  協3575    モ1545
→ watanabekun:假定三個投票族群投的作品，落在60名內比例相同的話
→ watanabekun:可以看到的就是HP配分今年壓得極端低，比起來Monitor
→ watanabekun:給分不知道為什麼採點比例還頗高 (約等於協力者的4/5)
這裡好像該反過來說 HP是分數分配最散的
協力者和モニター更有集中的趨勢 而モニター集中的原因和動畫化高度正相關
推 shodeah:我想應該跟人數有關，HP參與投票的人比較多在這種特殊評分
→ shodeah:下變成分數很不值錢，相較之下Monitor跟協力者手上的一票
→ shodeah:宛如一票千金到能操控結果的程度
推 watanabekun:如果HP投票的分數價值是兩倍或三倍，還可能會平衡點..
→ watanabekun:現在這樣被稱作協力者無雙我看也沒辦法辯解...
推 shodeah:當然沒得辯解，HP跟Monitor分數都沒辦法衝到那麼高，而
→ shodeah:協力者分數已經快可以一項抵兩項了，要擋組織票卻變成讓
→ shodeah:少數人能掌握最後結果這也滿本末倒置
從結果看真的是本末倒置倒很大XD
※ 編輯: kaitouGamer     來自: 122.126.138.46       (11/27 19:51)
推 watanabekun:話說Monitor應該是原始1分→結果1分，協力者1→1.5375
→ watanabekun:左右，HP部分採點比例太低應該推不出來
推 watanabekun:嗯... 的確HP分數的分散程度應該是三者之冠，另外我算
→ watanabekun:了算，HP可能原始1分等價於結果的0.12~0.15左右
嗯 我猜也是這樣
推 danielqwop:有前兩年的數字嗎?想看看之前的配分是怎麼算的
以前都是原始一分＝結果一分 比總成績
2009年為例
作品          總分     總票數
文學少女      1530        379
龍虎          1025        296
笨測           993        296
禁書           703        213
狼辛           660        228
※ 編輯: kaitouGamer     來自: 122.126.138.46       (11/27 20:01)
推 shodeah:往年就是幾分就幾分，沒有除母數或做其他加權調整
→ danielqwop:現在是問題是配分比例的問題，只是都是一分的話那有的
→ shodeah:開板就有提到了，單純把三項實得分數合起來不做另外加權
→ danielqwop:作品就真的沒什麼機會出線了
→ shodeah:往年沒有配分比例問題，沒有調分讓HP部份分數不值錢跟協力
→ shodeah:者一票千金
推 watanabekun:話說，要不是我計算錯誤，剛剛說的HP的原始分數要大修
→ watanabekun:變成剛剛估的值的一半，只有約0.0679分
→ watanabekun:這樣的話，HP部分的分數有落在60名內的占63.2%
推 watanabekun:嗯...不對，這樣應該是無法估計了，只能卻定是0.1以下
→ watanabekun:起庫修！這樣我就不能去加權後重排榜單了啊！ XDrz
我是挑0.8 1.0 1.1 1.2 1.4這幾個數來判斷0.15分的
還以為不會在更低了@@
→ watanabekun:我對照到7.4為止，逼近求到0.1357~0.1359
→ watanabekun:但是這個區間的所有數值都無法滿足7.4 ...
居然對照到7.4 而且還計算到小數四位 太有心了m(_ _)m
推 jack0124:那個被灌160分其他像不拿都前5這友意義嗎
→ jack0124:我錯了他沒其他項照樣第四名這種可信太根本是垃圾
※ 編輯: kaitouGamer     來自: 122.126.138.46       (11/27 22:04)
推 satousei:協力者=大人的事情