多模态视角下用户注意偏向与记忆的影响机制——基于电影字幕的眼动研究

作     者：喻国明 陈雪娇 修利超 Yu Guoming;Chen Xuejiao

作者机构：北京师范大学新闻传播学院 中国新闻史学会传媒经济与管理研究委员会 北京师范大学新闻传播学院认知神经传播学实验室北京100875 

出 版 物：《西南民族大学学报（人文社会科学版）》 (Journal of Southwest Minzu University(Humanities and Social Sciences Edition))

年 卷 期：2021年第42卷第6期

页      面：169-177页

核心收录：

学科分类：050302[文学-传播学] 05[文学] 0503[文学-新闻传播学] 

基　　金：北京市社会科学基金重大项目“中国特色舆论学科体系三十年发展研究”(17ZDA06) 北京师范大学博一学科交叉基金项目“认知神经科学视角下‘人机耦合’式媒介对用户体验的影响”(BNUXKJC2016) 中央高校基本科研业务费专项资金“后真相时代”的传播效果及其认知神经机制”(2020NTSS10)阶段性成果 

主　　题：多模态 注意偏向 记忆效果 电影字幕 眼动 

摘      要：从插图、字幕、弹幕再到现在的AR/VR、H5,单一模态的媒介表达形式越来越难以满足当下社会对信息传达的需求,因此媒介载体不断升级,从更高的维度来塑造表意资源的保真度。在这个过程中,注意愈发成为一种稀缺资源。本研究从字幕这个细小点切入,立足于交叉学科思维,结合眼动实验和行为实验,探究母语电影中的字幕对用户注意分配以及记忆效果的影响。结果显示,在字幕组别(有字幕组、无字幕组和安慰剂对照组)之间,用户对没有加工困难的母语字幕表现出高度关注,但是这种字幕偏好性并没有提高记忆效果;在画面和文本之间,用户会优先加工画面信息,但是记忆测试结果显示用户对文字的记忆效果更好。