加载中...
Quality Disclosures and Disappointment: Evidence from the Academy Nominations
本研究考察质量披露的非预期后果,聚焦奥斯卡奖提名如何影响电影产业中的消费者满意度。奖项和认证通常传递高质量信号并提高消费者期望。然而,若实际体验不及预期,也可能导致失望。本文利用MovieLens的新颖数据集,分析1995至2019年奥斯卡提名前后电影的用户评分。我们首先实施双重差分策略比较被提名与未被提名影片,随后引入一种新颖的基于推荐的匹配方法,该方法利用提名前训练的用户偏好向量表示。我们的分析剔除了基于品味的自选择,分离出用户体验的变化:在电影被提名后评分的用户,其评分显著低于评分更早的相似用户。该效应占被提名与未被提名影片提名前评分差距的7%以上,且在经验较少的用户中最为明显。我们的发现通过IMDb数据得到验证,其效应更为显著,可能反映了两个平台用户基础构成的差异。对两个平台用户生成内容的进一步文本分析提供了额外证据,表明提名后的评分下降是由失望而非不感兴趣、观看条件恶化或与主流流行相关的势利效应所驱动。
Abstract
This study examines the unintended consequences of quality disclosures, focusing on how Academy Award nominations impact consumer satisfaction in the movie industry. Awards and certifications typically signal high quality and increase consumer expectations. Yet, if the experience falls short of the expectation, they may also lead to disappointment. Using a novel data set from MovieLens, we analyze user ratings for movies surrounding Academy Award nominations from 1995 to 2019. We first implement a difference-in-differences strategy comparing nominated and non-nominated films and then introduce a novel recommendation-based matching approach that leverages vector representations of user preferences trained prior to the nominations. Our analysis removes taste-based selection and isolates changes in user experience: users who rate a movie after its nomination assign significantly lower ratings than similar users who rated the same film earlier. This effect accounts for more than 7% of the prenomination rating gap between nominated and non-nominated films and is most pronounced among less experienced users. Our findings are validated with data from IMDb, where the effect is even more pronounced, likely reflecting differences in the composition of the user base across platforms. Additional textual analysis of user-generated content on both platforms provides further evidence that the postnomination decline in ratings is driven by disappointment, rather than disinterest, deteriorating viewing conditions, or snob effects associated with mainstream popularity.
被提名影片在提名后评分显著下降
双重差分估计显示,控制影片和日期固定效应后,提名后被提名影片评级相对下降0.018星(p<0.05),占提名前评级溢价的约5%。该效应在剔除提名后5至15天评分后翻倍,与观看与评分间的时滞一致。
推荐匹配法分离失望效应,降幅更大
基于推荐系统用户嵌入的倾向得分匹配显示,在控制品味后,提名后评分下降约0.047星,占提名前评级差距的7%以上。匹配估计大于OLS估计,因更严格的用户更可能在提名前观看。
失望效应主要由经验较少用户驱动
异质性分析表明,失望效应主要由在平台上评分少于400条的经验较少用户以及评分较宽松的用户驱动。用户平均评分和当年发行影片评分占比不是显著的异质性来源。
IMDb数据验证效应且幅度约为三倍
在IMDb数据上,匹配估计显示提名后评分下降约0.162星,约为MovieLens效应的三倍。IMDb用户经验较少,更易受提名引发的期望影响,反映了平台用户构成的差异。
文本分析证实失望而非替代机制
IMDb评论的语义相似度分析显示,提名后用户表达失望的概率显著上升(0.026,p<0.01),而在控制用户特征后,不感兴趣、观看条件差和逆从众效应均不显著,支持失望是主要机制。
核心解释变量
奥斯卡提名(Nominated_j × postNom_t交互项,即影片是否获得提名与评分是否在提名后的交互)
被解释变量
用户对电影的评分(MovieLens 0.5-5星,IMDb 1-10星重标度为0.5-5星)
样本与数据
MovieLens 25M数据集(1995-2019年62,423部电影、162,541名用户的2500万条评分),聚焦1995-2019年奥斯卡五大奖项及最佳动画长片提名影片(428部提名影片),分析提名日期前后80天窗口内的评分。IMDb数据用于外部验证。
识别方法 / 模型设定
首先使用双重差分(DiD)比较被提名与未被提名影片在提名前后的评分变化;然后提出基于推荐的匹配方法:仅用提名前评分训练矩阵分解推荐系统(scikit-surprise SVD,50维潜在因子),获得用户嵌入向量,再通过倾向得分匹配(嵌入50维+电影标识精确匹配+用户特征五分位)比较同一影片在提名前后的评分,从而剔除基于品味的自选择,分离失望效应。
内生性及稳健性检验
(1)事件研究检验平行趋势;(2)排除提名后5、10、15天评分以应对观看-评分时滞;(3)将控制组限定为Metacritic有专业评论、Metacritic评分>50或IMDb评分>5的影片;(4)使用LensKit的偏置矩阵分解、用户-用户和物品-物品协同过滤替代算法验证嵌入稳健性;(5)以预测评分作为因变量进行安慰剂检验,结果为零;(6)对未被提名影片进行安慰剂匹配,无显著效应;(7)排除单一会话多重评分;(8)排除评分历史稀疏的用户;(9)不同嵌入维度(10-200)结果稳健;(10)评分阈值(中位数、75、90百分位)和替代情感分类模型(roberta-base-go_emotions)验证文本结果。
更多相关数据正在补充