音乐影视情绪视频素材库的编制与评定

徐志斌 邹岚卿

（宁波大学音乐学院，浙江 宁波 315000）

心理实验成为研究情绪的主要手段，情绪素材库的建设就显得尤为重要。通过心理行为实验，建立一个符合中国人审美习惯的音乐与影视人物表情视频相结合的情绪素材库，补充国内现有的情绪素材库，为情绪、音乐审美教育等心理实验研究提供实验素材和工具。

情绪离散理论认为人的各种情绪由几种基本情绪构成，其他情绪都是由不同的基本情绪组合形成。Ekman 将情感划分为7 种基本情绪，即高兴、悲伤、厌恶、轻蔑、愤怒、恐惧和惊奇，复合情绪由基本情绪进行不同的组合后产生，且具有文化特异性，但复合情绪很难全面反映人类的各种复杂情绪。

情绪维度理论认为所有情绪都可以被映射到一个连续的情绪空间模型中，Thayer 通过唤醒度和效价两个维度来量化情绪测量模型，得到国内外广泛的认可，运用正性和负性的效价和激发情绪强弱的唤醒度的二维情绪模型对情绪的情态进行评价。

离散情绪数据库在国内外有奈梅亨面孔、Nim Stim、日本女性面部表情、中国情绪影像和中国情绪面孔系统情绪库等。一般规模较小，普遍缺乏稍微复杂的情绪实验材料。

维度情绪数据库有情绪影像、中国情绪影像、国际情绪图片情绪库等。量化被试感知材料中的情绪为实数值。影像情绪数据库以及声音情绪数据库多运用情绪维度模型进行评定，为维度情绪数据库。

本研究的素材内容是音乐素材和影像人物素材的结合，依照维度情绪库建设的理论与路线图进行，建立适用于中国人审美观的音乐影视情绪视频素材库。

根据刺激通道类型，情绪素材库还可以分为视觉通道刺激、听觉通道刺激、视听双通道刺激素材库。如视觉通道刺激素材库通过图片刺激情绪而建立，根据内容分为面孔表情、微表情和图片素材库。面孔表情数据库有日本女性面部表情、卡罗林斯卡定向情绪面孔、加利福尼亚面部表情、自然可见与红外人脸表情数据库等，通过评分者对图片进行情绪类别的判定和情绪强烈程度的自我报告进行9 点量表评分。微表情素材库有中国科学院微表情、中国科学院微表情Ⅱ、中国科学院宏表情和微表情等。这三个数据库的建立都是在良好环境的实验室中获取样本，采用自我报告的方式进行实验数据收集。图片素材库有国际情绪图片库、中国情绪图片库、中国肢体情绪材料库等。

听觉通道刺激素材库是通过声音刺激情绪而建立的素材库，目前有中国情感数码声音系统和中国情绪音乐材料库。

视听觉双通道刺激素材库是通过影视素材刺激情绪而建立的素材库，目前有情绪影像、中国情绪影像材料数据库。使用自我报告的5 点量表、正性负性情绪量表及分化情绪量表进行自我评定。

综上所述，通过影视和音乐素材结合的视听双通道情绪素材库暂未建立。本研究试图通过自我报告量表对被试的情绪进行评定，建立音乐影视情绪视频素材库。

由于“西学东渐”的影响，我国当代的音乐教育主要是以西方音乐体系而建立。音乐素材选择西方古典音乐片段，均来源于互联网络，采用音乐会视频。收集195 个正性和负性的情绪视频片段。通过会声会影视频编辑软件分离原画面，保留音频素材。利用GOLDWAVE 声音处理软件编辑音乐刺激素材的声音参数，为MP4 格式，平均时长18s（范围：12～30s），皆为16BT 立体声，采样率24kHz，比特率为100—200kbps，平均响度均标准化为—7dB，同时淡出1s。

课题组成员依据音质的好坏、情绪激发强度、熟悉程度进行筛选，共选出101 个音乐演奏片段（46 条正性、55 负性）作为实验素材。

根据个体对与自己同一种族的面部表情识别更准确的表情识别的跨文化研究成果，选择东亚人脸情绪面孔的影视片段。素材来源于互联网络，选择了来自东亚地区的商业影视片，内容包括亲情、爱情、战争等，主要突出人物面部表情。为避免熟悉程度，选择冷门生僻的181 段正性和负性情绪影视视频。时间长短介于11～35秒，平均时长22.38s。利用会声会影编辑，去字幕和水印和静音处理。课题组成员依据视频的清晰程度、情绪激发是否明确以及熟悉程度进行筛选，选出95 个视频片段（47 条正性、48 条负性）作为实验素材。

征集被试50人，分成音乐音频组和无声影视两组，其中音乐视频组25 人（音乐专业10人，非音乐专业15 人），无声影视组为25 人（音乐专业11 视频，非音乐专业14 人视频）。对音乐音频和无声视频通过效价的九点评分量表进行效价和唤醒度评价，效价从消极到积极为1 到9分，唤醒度从低到高为1—9 分。剔除唤醒度小于4 分和效价小于6 分的正性音频、大于4 分的负性音频素材。共选出正性音乐音频20 条、负性音乐音频21 条、正性与负性影视视频各25 条。

以效价为依据，按照情绪一致的原则，综合素材的时间长短，将正负性音乐音频与无声视频进行搭配组合。通过会声会影剪辑成20 条正性、21 条负性音乐影视情绪视频素材。

参加本实验的有：高校音乐专业在校生18人，非音乐专业在校生20人，10 男28女，平均年龄20岁，视听正常，无疾病。右利手，矫正视力2.0 以上。采用效价和唤醒度二维情绪模型作为评价工具，被试进行自我报告。使用9×9 网格。见图1。

图1

通过E—prime3.0 软件编辑和播放，电脑屏幕随机呈现正负性音乐影视情绪视频素材，用耳机听音乐。实验前告知被试根据即时感受打分，在二维情绪模型图上用鼠标点击相应的位置，不支持长时间思考。各素材间隔2 秒钟。实验前，工作人员讲解二维情绪模型的含义，并给予被试3 个实验素材熟悉进行练习。实验结果数据通过E—Prime 软件收集。见图2。

图2

使用SPSS23 版本，对评价结果从信度、效价、唤醒度三个方面进行相关性、方差和t 检验等统计分析。计算实验数据的克隆巴赫α 系数，评定素材间情绪的一致性，确保数据真实有效。对正负性音乐影视情绪视频素材的效价、唤醒度使用方差分析。情绪类型是被试内变量，性别和专业是被试间变量。探究不同性别、专业与非专业学生对相同音乐影视情绪视频素材的情绪反应有何不同。

（一）信度（一致性）

信度是指研究中测量结果的一致性程度，判断一项心理研究是否有效的主要依据。克隆巴赫α 系数被使用最广泛。使用SPSS23 软件计算实验结果的克隆巴赫α 系数，对于负性情绪，每种情绪的20 个影像片段的一致性在0.875 以上；
对于正性情绪，每种情绪的20 个影像片段的一致性在0.898以上。实验结果表明，实验素材信度高，被试态度认真，素材之间评分一致性较高，结果可信。

（二）效价与唤醒度

效价是指情绪的类型，分为正性和负性，唤醒度指的是机体情感状态激活的程度，表示情绪程度的强弱。保留的20条正性效价平均值＞7.5，21 条负性效价平均值＜3.3，属于正负性情绪范畴。素材的唤醒强度都在4 分以上，且多数素材能激发平均值在6 分以上，说明所有素材均能唤醒足够强烈的情绪体验，有效激发个体情绪。

（三）性别差异分析

对于p 值检验设定显著性要达到p ＜0.05 的结果，才具有统计学意义。负性素材效价的性别主效应显著，t（36）=—2.19，p＜0.05。正性素材效价、唤醒度和负性素材唤醒度的性别差异都不显著。负性素材效价男性的均值要低于女性，不同于以往女性更加感性的说法，相同的负性素材男性会认为更加消极，见表1。

表1 男女生评定结果相关性及差异

（四）其他差异分析

负性素材唤醒度的专业主效应非常显著t（36）=3.25，p＜0.05，负性素材效价、正性素材效价和唤醒度的专业主效应不显著。音乐专业学生对负性刺激的唤醒度（M=6.29，SD=0.89）显著高于非专业学生（M=5.49，SD=0.56）。见表2。

表2 专业组别结果相关性及差异

除了负性唤醒度的专业效价显著，可看出素材对于专业与非专业情绪激发有不同处之外，是否经过音乐专业学习对音乐影视情绪视频的情绪感知影响总体来说不明显。

本研究目的是编制一个具有相当情绪准确性和高度一致性的音乐影视情绪视频素材库，并在保证音乐完整性的前提下尽量缩短素材所持续的时间，最终筛选出41 个满足条件的素材，持续时间在11—20 秒之间，保证音乐影视情绪视频素材库的实用性。计算本研究的正负性素材的α 系数均大于0.8，实验结果真实可靠。保留的20 条正性效价平均值＞7.5，21 条负性效价平均值＜3.3。所有素材的唤醒强度均在4 分以上，说明所有素材均能唤醒足够强烈的正负性情绪体验，对现有的情绪激发素材库起到补充作用。

正性、负性影视人物视频素材画面都以人物面部表情为主，正性画面场景中包括胜利、娱乐旅游、美丽风光、可爱儿童、聚会场景、亲情友情、爱情等；
负性画面场景中包括事故、医疗、尸体、哭泣、伤残、血淋等；
保留下来的25 条负性无声视频素材中以医疗场景为背景的最多，推测是因为医疗背景给人留下了生死离别的刻板印象，从而更加容易激发人悲伤的情绪。

素材库中效价最高/低素材的音频素材中，效价较高的正性素材音频选段速度均为快速，发音点较多且节奏型更加密集的特点，而负性素材音频相对来说速度更慢。可见，慢速而节奏感较弱的音乐素材更易于激发产生负性情绪，而快速、节奏感较强的音乐素材容易产生正性情绪。

保留的素材中正性音频均为大调式，负性音频大多为小调式。这也从某种程度上证明了大调明亮大气、和谐，而小调阴柔细腻，在音色上更加暗淡感性的认识。正性音频常出现大三和弦和属七和弦，大三和弦通常带给人积极的感觉，可以表现高兴、喜悦的情绪，表现胜利的景象。配器上，效价高的正性音频中均使用了打击乐器组的乐器，负性素材中则较少出现。推测这可能是因为打击乐器音色明亮，节奏感和韵律感欢快的特点，更能凸显音乐中表达的生命力和激情，正性素材加入打击乐器的部分，能营造出热闹的氛围感。

本实验，评分的性别差异显著，男性负性效价均值低于女性。关于情绪体验的性别差异研究结论中，有的差异显著，有的发现不存在性别差异，更有研究则得出女性的情绪体验更为强烈的结果，与本此实验结果相悖，可能与本次实验选择的素材和情绪激发方式有关，因此关于情绪的激发与性别之间的关系还需要更进一步的研究。

非专业被试的负性情绪的唤醒度总体高于非专业被试，差异显著，而其他方面差异都不显著，我们推测可能情绪的激发更多只是大脑的基础功能，激发音乐情绪过程对音乐文化经验和学习的要求较低。

本研究用音乐和影视视频结合作为情绪激发素材来建立的情绪素材库，数据上有极高的准确率，参考价值高，为情绪心理、音乐审美教育心理等科学实验研究提供研究工具与素材。该素材库建立成功后对建立情绪激发素材库的理论体系构建也有参考意义。