国内外电影评价体系,为什么器材网站的五星评分没用

图片 3

XKCD近日做了一个有趣的图,来说明你应该如何理解器材网站上的评分结果(5星=只有一个评价,4星半=优秀,4星=不错,4星以下=垃圾)。这种评分系统我们会经常在网络商城或器材评测网站上看到。看起来这些由用户打分的系统显示了真实的用户评价,对吗?

绝大部分的内容产品,都有物品详情页。详情页中,帮助用户在物品之间横向对比的一个维度,就是物品的评价体系

正如上图显示,答案是:也对也不对。

本文讨论电影的评价体系,调研对象:市场前列 / 评价体系知名的产品

曾几何时,YouTube也使用这种五星评分系统。不过在2010年中期,他们就换用了现行的“赞/踩”评价系统。为什么呢?因为星级分布呈现下列趋势:

国外:烂番茄,IMDB,Metacritic,fandango;

YouTube产品经理Shive Rajaraman写道:

国内:豆瓣,猫眼,淘票票

看起来打分系统要么非常说明问题,要么毫无意义。好的视频会促使用户做出评价,一般的东西则不受重视。因此评分系统首先成了一个标签,而非用户对产品评价的指示器。对一个视频打分只能告诉别人你喜欢它。

分析架构:评价体系定位,评分逻辑,算法逻辑,其它

看看亚马逊的相机评价,你就会看到非常类似的结果:

(为了方便在手机端阅读,我把 “烂番茄
,IMDB ,Metacritic”的分析写成本文这样的文章形式。若需要其余几个产品的评价体系调研,在评论留言自己的邮箱即可

麻省理工学院(MIT)信息与决策系统教授Devavrat
Shah表示,五星评分系统的缺陷是它们太主观和模糊。MIT新闻办公室写道:

一.总结:各类评价体系

基于评价推荐的问题之一,Shah解释道,是个体的打分标准具有波动性。“如果今天我的心情不佳,就可能会给出四星,但明天也许就会给五星,”他说道。“但如果你让我对比两部电影,很可能在一段时间内我的评价都是不变的。”

类似的,不同人之间的标准也不一样。“你打三星的东西可能在我这里是五星,反之亦然,”Shah说道。“因此,我坚定地相信对比才是得出结论的正确方法。”

此外,Shah还解释道,任何一个进入商店的人,在从货架上的三个产品中选中一个时,都做了隐含的对比。所以在多数情况下,对比数据比评分系统更适合参考。

图片 1

各种初创公司已经开始接受这个观点,用对比而非评论系统来做产品推荐。Snapsort就是这类服务之一。它会将类似的相机放在一起,基于功能和参数推荐其中一款。它们也会公开其他用户的选择,但用户行为不会影响系统的推荐。

1.定位,价值

我们很有兴趣看看那些主流的电子商城是否会用对比取代五星系统。毫无疑问这将改变人们现在在网上购物的行为习惯,使其更像在实体店中购物的过程。

(1)专业评价:给关注“影片本身的质量和艺术性”的用户,提供参考

在此之前,我们还是建议你按照XKCD的方式来理解五星评分结果。

(2)大众评价:给关注“影片的娱乐性和可看性”的用户,提供参考

(via PetaPixel)

(3)专业+大众:覆盖上述两类人群的需求

2.评分逻辑

(1)打分机制:五星,5分,10分,100分,积极/消极;

(2)打分门槛:大众,过审核的专业评审;

(3)展示:五星, 5分,10分,100分,百分比/整数/一位小数

3.算法逻辑

(1)评分数阈值:都需要有一定的评分数,才能得出一个最终评分;

(2)评分有效性:是/否需要真实出票,该评分才算入结果;有/无反垃圾策略

(3)公式:算术平均 / 加权平均

4.评论

(1)形式:主创说,专业/大众评论,短评/长评(部分长评有标题)

(2)筛选,排序:好友/非好友;最新/最热

一.烂番茄

ROTTEN TOMATOES,美国著名影评网站

图片 2

评价定位:专业评价为主,大众评价为补充

评分逻辑:选择“积极”或“消极”(好/不好)

算法逻辑:

图片 3

(1).新鲜番茄:评价积极的专业评审人>=60%

(2).认证新鲜: 评价积极的专业评审人稳定>=75%+ 评价人数条件

2.1 广泛发行电影:80个评论家,含5个顶级

2.2 限量发行电影:40个,含5个顶级

2.3 电视节目:需要有20个以上,含5个顶级

2.4 烂番茄编辑团队特许认证

(3).烂番茄:评价积极的专业评审人 <=59%

(4).观众 -爆米花(完整):

Flixster和Rotten Tomatoes用户给出3.5星以上的电影

(5).观众 – 爆米花(打翻):

Flixster和Rotten Tomatoes用户给出不到3.5星的电影

4.  专业评审门槛

(1)专业评审

1.1  简历:说明自己的影评能力

1.2 
视频不能关联到youtube这种网站,需要在网页或博客,并且评论一定要前置在视频之前

1.3  评论的能力稳定

1.4  在视频网站上,有20000以上的订阅用户