韩宇阳，徐雪远，李子遇，叶龙，张勤，邬霞

（1.北京师范大学人工智能学院，北京 100875；2.中国传媒大学媒介音视频教育部重点实验室，北京 100024）

1 引言

多媒体是多种媒体的综合，包括图像、声音和视频等，研究表明，多媒体内容对情绪有很大影响[1,2]，情绪进而又会影响各种认知功能，诸如对注意力[3]，记忆[4]以及决策[5]等。，因此研究多媒体情绪诱发对认知功能的影响对商业传媒、教育教学等领域有重要的意义。

智力被认为与一系列认知任务的表现有关[6]，智力发挥就是在这些认知任务中智力的表现情况。近年来，越来越多的研究开始关注情绪对认知活动，特别是智力发挥这种综合认知活动的具体影响，例如对认知活动中决策的正确率或者决策速度的影响。许多研究表明，积极情绪会加快信息处理的速度，例如Kalanthroff等人[7]提出情绪会控制认知过程，影响人的注意力，与中性情绪相比，负性情绪会加长反应时间。相反，有理论认为，积极情绪和消极情绪都会对大脑处理信息产生负荷，降低信息处理能力[8,9]。也有一些学者，例如Forgas认为，积极情绪和消极情绪会调用不同的信息处理策略，在某些问题上，消极情绪反而有更好的效果[10]。本文将在此方面进行详细探讨。

在情绪与智力发挥的研究中，对情绪状态的衡量是十分关键的。这种衡量分为两方面，一方面是对情绪状态的量化，主要包括非生理信号和生理信号，在以往的研究中，往往采样非生理信号的方式来衡量情绪，例如通过被试的量表打分作为情绪状态量化依据的情绪反应尺度量表[11]，运用机器学习方法对人脸面部进行情绪识别[12]，或通过语音来识别情绪[13]，这些非生理信号的有效性得到了验证。……