评分与排名讨论会#1 - 2017-4-12 04:07
潮汐听雨 (少年听雨歌楼上，红烛昏罗帐。)
这两天看到p5已经在排行榜上冲到了第二名，而e17仍然雄踞第一，有点忍不住发表一下疑问:这两个游戏为什么排到游戏的第一第二？(下面一些也有争议，但时之笛应该不算意外，就先讨论讨论这一二名)。
e17在黄油圈子里虽然也算是“神作”，但无论从大部分社区比如贴吧、论坛中黄油玩家的口碑还是像厨子空间vndb的评分来看，这作都不一定能排到前五。p5亦然，虽然也确实是很优秀的作品，但让所有rpg排个座次，前几有没有p5也要打个问号。
但是游戏排行榜的结果很吊诡，这两个在各自领域内的评价都不一定排到前几的游戏，在bgm却成为了排行榜下的第一第二。为什么会有这样的差异？不知道以前有没有人提出类似问题，我觉得这个现象还是有作为范本来研究评分与排名的价值的，起码可以看出一些bgmer打分的端倪。
个人猜测的结论是:bgm归根到底还是一个动漫的评分网站，虽然这几年涌入了像我这样不怎么看动漫以打游戏为主业的人，但是看动漫的人估计还是占绝对多数，所以评分者首先就受到了很多制约，可能玩的就会比较狭窄，更偏向黄油和jrpg。而这两个游戏可能在某些方面get到了国内动漫圈的一些点，迎合了bgmer的审美，所以评分如此之高(只是个猜测，我也不知道这两个游戏get到了什么点)。或者说，这两个作品就是动漫观众的主观游戏神作，反映了动漫观众的偏好。
此外还有一个延伸思考:我点了一些打分的人的主页，发现不少给这俩游戏打高分的人都属于看动漫数量远多于打游戏数量的人(这不是废话，bgm大部分人不就是这样的)，比如看了好几百动漫却只打了二三十游戏。那么这些只打了二三十游戏的人的评分，会相对来说客观程度不如打了两三百游戏的人吗？打了两三百游戏的人是否会有更大的比较作品之间优劣来进行打分的优势？这个问题感觉也可以扩展到动漫方面。
大半夜写了一堆乱七八糟的，权当抛砖引玉吧。
-----------------------------------------------------------------------
看到一个新闻，IGN评了个史上100大最佳RPG，女神异闻录5排名只有50，而3代（47名）和4代（13名）排名都比P5高。
metacritic上P4 P5得分相同，93分，P3得分也很相近。但bgm上这三个游戏的得分排名远远不能同日而语。
那些无脑吹P5的，我真是求求你们了，能打完3代和4代横向对比再说话吗？
-----------------------------------------------------------------------
楼都歪了我也是醉了。还有人喷我“认为排名不合理”，我TM什么时候说过排名不合理，讨论“bgmE17和P5排1、2与厨子空间vndbIGNmetacritic排名有差异”，这当然是建立在双方排名都合理的基础上，要是排名本身就不合理还需要讨论吗？我拿厨子空间vndbIGNmetacritic都只是佐证，说明有不同排名存在，所以想找出差异的原因，什么“我信XXX不信bgm排行榜”都出来了，我真懒得回复。
讨论了半天也没什么突破，还是在我说的“P5e17更受bgm受众欢迎”这个结论附近打转，好歹说说为什么受欢迎啊。算法可能也有影响，但是没有实际的算法变化后排名对比，也只能说是可能吧。
e17在黄油圈子里虽然也算是“神作”，但无论从大部分社区比如贴吧、论坛中黄油玩家的口碑还是像厨子空间vndb的评分来看，这作都不一定能排到前五。p5亦然，虽然也确实是很优秀的作品，但让所有rpg排个座次，前几有没有p5也要打个问号。
但是游戏排行榜的结果很吊诡，这两个在各自领域内的评价都不一定排到前几的游戏，在bgm却成为了排行榜下的第一第二。为什么会有这样的差异？不知道以前有没有人提出类似问题，我觉得这个现象还是有作为范本来研究评分与排名的价值的，起码可以看出一些bgmer打分的端倪。
个人猜测的结论是:bgm归根到底还是一个动漫的评分网站，虽然这几年涌入了像我这样不怎么看动漫以打游戏为主业的人，但是看动漫的人估计还是占绝对多数，所以评分者首先就受到了很多制约，可能玩的就会比较狭窄，更偏向黄油和jrpg。而这两个游戏可能在某些方面get到了国内动漫圈的一些点，迎合了bgmer的审美，所以评分如此之高(只是个猜测，我也不知道这两个游戏get到了什么点)。或者说，这两个作品就是动漫观众的主观游戏神作，反映了动漫观众的偏好。
此外还有一个延伸思考:我点了一些打分的人的主页，发现不少给这俩游戏打高分的人都属于看动漫数量远多于打游戏数量的人(这不是废话，bgm大部分人不就是这样的)，比如看了好几百动漫却只打了二三十游戏。那么这些只打了二三十游戏的人的评分，会相对来说客观程度不如打了两三百游戏的人吗？打了两三百游戏的人是否会有更大的比较作品之间优劣来进行打分的优势？这个问题感觉也可以扩展到动漫方面。
大半夜写了一堆乱七八糟的，权当抛砖引玉吧。
-----------------------------------------------------------------------
看到一个新闻，IGN评了个史上100大最佳RPG，女神异闻录5排名只有50，而3代（47名）和4代（13名）排名都比P5高。
metacritic上P4 P5得分相同，93分，P3得分也很相近。但bgm上这三个游戏的得分排名远远不能同日而语。
那些无脑吹P5的，我真是求求你们了，能打完3代和4代横向对比再说话吗？
-----------------------------------------------------------------------
楼都歪了我也是醉了。还有人喷我“认为排名不合理”，我TM什么时候说过排名不合理，讨论“bgmE17和P5排1、2与厨子空间vndbIGNmetacritic排名有差异”，这当然是建立在双方排名都合理的基础上，要是排名本身就不合理还需要讨论吗？我拿厨子空间vndbIGNmetacritic都只是佐证，说明有不同排名存在，所以想找出差异的原因，什么“我信XXX不信bgm排行榜”都出来了，我真懒得回复。
讨论了半天也没什么突破，还是在我说的“P5e17更受bgm受众欢迎”这个结论附近打转，好歹说说为什么受欢迎啊。算法可能也有影响，但是没有实际的算法变化后排名对比，也只能说是可能吧。
如果采用中间值，塞尔达系列毫无疑问占据榜首，10分的比例高得可怕
其实班固米的情况还好，豆瓣那里的galgame评分才真叫人看得哭笑不得，偏它又是一个极具知名的网站，让无数人愿意以它的数据为参考。
豆瓣我觉得是所有游戏评分都虚高了。可能是因为豆瓣是五分制而且最高的五分也只是力荐，只要游戏品质不是太差，玩家都会给个4、5分，最后就变成了9分满地走。
评价gal自然多是以剧情为基准，但我从不认为e17的剧情可得满分，尽管它是我接触的第一部galgame。因此看它排班固米榜首，我便怀疑以它为代表的若干gal，它们分数虚高是否也和玩家评分习惯有三五分关系。
豆瓣的五分制使游戏界一干良作得到更胜于优作的评分，又因知名度而易被人当标尺。而班固米虽然也有令人想吐槽的地方，却也能算一个有参考价值的acg中文站。
问题应该是gal玩家会囿于厨子空间的影响，打完游戏后自己在内心会进行一个大致的打分，有不足之处的总得扣一些分。而像RPG和动画党应该没有这么仔细打分的想法，他们觉得很不错就给10分。还有一个重要的点就是十分制和百分制，十分制下9.5也是10分，但9.5在百分制下就只是95。如果能给RPG和动画打百分制的分，他们可能也不会比gal高到哪里去。
而且第一接近2K，第二才200出头，在统计上管这叫extreme data，是取样的大忌
2.extreme data是什么？你别搞我啊，英文WIKI上都没查到这东西。排行榜的排名也是根据imdb算法来的，对人数已经加权过了，你可以说这是算法有问题，说取样有问题那就是胡搅蛮缠了我这贴子难道说的不就是bgmer这个总体样本的偏向？
如果对排名统计模型这么感兴趣，我觉得LZ最好先去读一读统计学的入门书籍（这可以很容易地从图书馆里借阅），里面有足够的基础知识给你启发（这一点上维基百科没有什么大用，因为会涉及数学知识）。主楼的假设是各种空对空，没有实际的数字挖掘和分析过程去支持你的假设。如果要详细地分析一番BGM这个排名的问题，我相信这足够当作统计学主修课的期末assignment来做了。
至于你问的偏向性，我认为找个抓取软件来抓取一下投票ID的所有投票作品，应该就能一目了然了。
至于多大的取样、如何取样才能更有质量，这是统计上的一个难点，并不是说你在公式里放个权衡就有效果。至少在我这边看来，以游戏出货量/销量为参考的话，200人真的太少了。
一个人打高分你可以说反正是主观，爱看看不看滚；一群人打高分就值得分析了，而不是把锅全丢给玩家主观放弃思考，你在这指点江山并不妨碍我指点江山。
是不是谁跟你意见一致了你就要跪舔，metacritic评分靠谱你就想全世界都跟metacritic评一个分？
至于metacritic，如果你觉得90个起码比玩家有说服力的媒体评分均值，随着data增加没有比IGN、gamespot单一媒体评分更加准确的趋向，那我们还是别谈了。
我有优越感不知道你是从哪里臆断出来的，大概无脑吹就可以，我讽刺下就不行？
我想讨论的是为什么这么高，而且是在别的地方都没有这么高的情况下这么高。你回答我“就高了怎么地”，感觉跟小孩子撒泼似的。
何况美国网站一样打分极高。
至于你鬼扯的玩游戏数量远不如看动画，这不是废话么，即使是半年番，也就是十几个小时，而十几小时通关的都是轻量级游戏了。
你要讨论也是讨论为何中国的galgame玩家们将E17投成了第一名。
至于P5，只不过类似于动画区的2011年那波动画还有白箱，新作加成+新用户加成。
完全理解不了为什么某个动画排在某个位置会搞笑，你的意思是白箱和银魂在那个位置是搞笑的，其他的动画排在那则不搞笑？我完全理解不了你的意思，倒是觉得你的言论很搞笑。
至于银魂和白箱，随便举个例子罢了。你可以说攻壳EVACB都行。其他的每一个人都可以说一个他们觉得排名不对的例子。和其他的任何一个评分网站对比，bgm也一定会有不一样的地方。你喜欢的作品在bgm排名不高你的审美就有问题吗？你讨厌的作品排名很高你的审美就有问题吗？bgm的排名和其他地方不一样，bgmer的审美就有问题吗？这个排名就有问题吗？
我的意思是lz为什么不能坚持自己的审美，非要去迷信销量和那些所谓的聚聚。这样的表达我觉得很清楚了你能明白吗？
只不过对是搞笑的说法和措辞有点不同想法而已。我个人对于销量，点击数，排行平均分之类的客观结果都以客观看待，即使迷家排在第一，如果我相信那个榜单是客观的，那么也只是客观体现某种人群的结果。
我也知道你只是和任何人一样，对排行榜上的作品有自己的理解。我也一样。我相信你并不是真的认为bgm的排行榜不客观很搞笑，那么也就结束吧，其实我也是看到措辞回复一下，并没有什么可争论的。
那就当我没写过这个词b38不过国内玩家确实有更偏好神转折的情况