面部表情识别实验报告材料

1、面部表情识别实验实验报告小组成员：面部表情识别实验西南大学重庆 400715摘要：情绪认知是一种复杂的过程，它包含观察、分析、判断、 推理等，是借助于许多线索， 特别是借助面部那些活动性更大的肌肉 群的运动而实现的。所以，情绪认知的准确度受多种因素的影响。当我们与他人相互交往的时候， 不管是不是面对面。 我们都正在 不断的表达着情绪，同时又正在观察，解释着的对方做出的表情，在 人际交往过程中， 情绪的表达和认知是十分的迅速和及时， 那么人是 借助于哪些表情来认知他人的情绪的呢？情绪识别实际上并不是针 对表情本身的，而是针对这它背后的意义。例如：皱眉可能是一种情 绪的表现，我们见到这种面部表情就

2、试图解释潜在于它背后的情绪。 尖锐，短促，声音嘶哑可能是一种情绪表现，我们听到这种语言表情 就试图解释潜在于它背后的情绪捶胸，顿足可能是一种情绪的表现， 我们见到这种动作表情就是试图解释潜在于它背后的情绪。 对于这个 复杂的问题，心理学家曾经做过许多的研究。面部表情认知的研究可分为两个步骤： 第一步是面部表情刺激物 的制作或选择， 这可以用专门拍摄 （录像）或图示来描画， 也可以用完 全装扮出的活生生的表情或自发的表情等。 第二步时对表情进行识别 评定。也可以用多种方法， 如自由评定法，即让被试自由地对表情给 出情绪词汇；或限制评定法， 即向被试提供各种提供各种情绪词汇或 情绪情境，要求被试只

3、能根据所提供的情绪词汇或者情绪情境进行分 类或者匹配等；或参照自由评定法，即向被试提供参考线索 （如情境， 人格特征等），让其说出所表达的情绪的词汇等。关键词： 情绪 表情认知 线索1 前言传统心理学把情绪列为心理现象的三大方面之一。 情绪也是心理 学理论体系中一个不可缺少的研究环节。情绪( emotion )是体验， 又是反应；是冲动，又是行为；它是有机体的一种复合状态。情绪的 表现有和缓的和激动的， 细微的和强烈的， 轻松的和紧张的等诸多形 式，广泛地同其他心理过程相联系。自古以来，科学家们十分注意探 讨情绪之奥妙， 但与情绪的重要性不相适应的是， 长期以来情绪研究 一直是心理学尤其是实验

4、心理学研究中的一个薄弱环节。 造成这一现 象的最主要原因是情绪所特有的复杂性以及由此衍生出来的情绪研 究方法学上的困难。我国心理学家孟昭兰( 1987)将理论认为面部表 情是传递具体信息的外显行为面部表情是提供人们在感情上互相了 解的鲜明标记。情绪过程既包括情绪体验，也包括情绪表现，而表情 既是情绪的外部表现， 也是情绪体验的发生机制； 既是最敏锐的情绪 发生器，也是最有效的情绪显示器。 这就从机制上说明了以面部肌肉 运动模式作为情绪标志的根据。面部表情( facial expression_r )的发生是有其客观的物质基 础的：表情按面部不同部位的肌肉运动而模式化， 面部反应模式携带 着心理

5、学的意义，那就是或快乐、或悲伤等具体情绪。但是，对表情 进行测量的原则在于： 所要测量的是面孔各部位的肌肉运动本身， 而 不是面部所给予观察者的情绪信息。该实验将 14 名被试分为两组进 行表情认知的实验， 实验目的在于通过实验了解面部表情认知的基本 特征，结果分别统计两组被试对各种面部表情正确判断的百分数， 对 表情的认知符合“面部肌肉运动模式作为情绪标志的根据” 这一论断， 也符合面部动作编码系统。实验目的：通过实验了解面部表情认知的基本特征。2 实验方法2.1 被试将全体被试分为相等的2个组：A组被试发给事先编好的记录纸。 指导语：请你一张一张的看一 些与记录纸上情绪是一致的表情图片，

6、你判断是那种表情， 就在相应 的位置“"”。E组发给一张白纸，指导语：看表情图片描述为何种表情，并按 呈现顺序 （按主试的随机排列顺序 ）写在白纸上。两组被试呈现卡片的 内容相同 ,所以不允许两组之间互通信息。每个被试测试完毕后， 主试询问他们是用什么辅助方法判断表情的？1. 模仿面部表情并体验2. 想象适合面部表情的情绪3. 联想过去的经验4. 其他程序和线索2.2 仪器和材料JGW E型心理实验台，记录纸和笔（记录纸为 2种，一为白纸，另一种为事先编制好编号与描述各种表情的语词的记录纸）2.3实验设计与程序231进入实验目录界面第2页，按数字键 “21”，选中“表情认知”实验图标

7、，按Enter键进入实验。2.3.2 屏幕出现表情认知实验指导语界面，如图所示：被试阅读完毕并确定已完全理解指导语所述内容后，根据 提示按任意反应键进入实验。在实验中，主试屏幕上将按被试看到的表情顺序呈现出对 应的描述词。当被试全部看完6张表情认知图片后，主试根据提示可 以选择继续试验或退出。（被试在试验过程中可以根据自身情况选择 重新进行观看表情直到确认）实验指导语：请你注视眼前屏幕注视点过后你将看到一些表情图片，请你描述是何种表情，并按呈现的顺序记录下来3实验结果3.1根据实验结果，分别统计两组对面部表情正确判断的百分数 以及所用的判断方法。A组实验数据：实验顺序1234567正确率（%）

8、表情及辅 助线 索高兴（2）高兴（1）高兴（3）高兴（2）高兴（2）高兴（3）高兴（2）100惊讶（3）惊讶（1）惊讶（3）惊讶（3）惊讶（2）惊讶（3）惊讶（1）42.8恐惧（1）恐惧（1）恐惧（2）恐惧（1）恐惧（2）恐惧（3）恐惧（3）57.1轻蔑（2）轻蔑（2）轻蔑（2）轻蔑（3）轻蔑（2）轻蔑（3）轻蔑（2）100厌恶（1）厌恶（3）厌恶（2）厌恶（3）厌恶（3）厌恶（3）厌恶（3）100愤怒（2）愤怒（1）愤怒（2）愤怒（4）愤怒（2）愤怒（3）愤怒（3）100正确率（%10071.471.485.771.457.1100A组总体正确率：33 - 42=78.6%B组实验数据：实验

9、1234567正确率顺序(%)表情及辅 助线 索高兴（1）高兴（3）高兴（2）高兴（2）高兴（1）高兴（2）高兴（2）14.3惊讶（2）惊讶（3）惊讶（2）惊讶（1）惊讶（2）惊讶（2）惊讶（2）71.4恐惧（2）恐惧（3）恐惧（3）恐惧（1）恐惧（2）恐惧（2）恐惧（1）0轻蔑（3）轻蔑（3）轻蔑（3）轻蔑（3）轻蔑（2）轻蔑（2）轻蔑（3）42.9厌恶（2）厌恶（3）厌恶（1）厌恶（2）厌恶（2）厌恶（2）厌恶（2）0愤怒（3）愤怒（3）愤怒（3）愤怒（3）愤怒（2）愤怒（2）愤怒（3）14.3正确率（%14.314.328.628.614.342.90B组总体正确率：9-42=21.4%

10、4讨论与分析4.1本实验中两组判断的平均正确率具有差异可能有以下原因：（1）两组判断的平均正确率差异显著的原因可能是性别不同。根据临床放射学杂志对面部表情识别任务脑活动性别差异的fMRI研究：正性表情刺激时额叶激活存在偏侧化现象，男性以右侧激活为 主，女性以左侧激活为主；负性表情刺激时女性额叶及小脑激活更明 显；面部情绪处理中男性更易激活运动相关脑区。而本试验中第一组被试男生较多，因此正确率较高。（2）与2组实验的记录纸不同而引起的心理因素有关。实验时组一被试使用的记录纸是有编好表情名称的记录纸， 他们只需要看表情图片之后对应是哪种备选表情的名称打钩，因此较为简单，心理压力也较小，情绪稳定，利

11、于判断。而组二则使用的白纸，他们需要在 观察表情图片后自己写下表情名称， 这具有一定的难度， 心理压力较 大，可能引起焦躁情绪，不利于判断，同时自己写的表情名称与标准 答案也具有差异。（ 3）对不同面部表情认知用的辅助方法和认知的差异可能是导 致两组判断的平均正确率差异显著的一个微妙因素。 在实验中， 大多 都用的是方法 2 和 3 辅助识别面部表情， 这两种方法都是 “非深度知 觉”，他们将表情与经验相结合认知较准确。组 B 相对于组 A 则多用 方法 2。4.2 表情认知的线索探究在近距离的面部表情识别中 , 特征部件线索的识别则更重要。另 外, 人脸的各部件对识别的贡献也不相同 , 如眼

12、睛和嘴巴的重要程度 大于人的鼻子 , 人脸上半部分重要性大于人脸下半部分。根据对人脑 的研究表明 , 人脸的表情识别和人脸识别虽然存在联系 , 但总体说是 分开的、并行的处理过程。面部表情识别线索主要体现在表情特征提取的准确性和有效性 上。尤其是后者， 因为各种表情本身体现在各个特征点运动上的差别 就不是很大。例如：嘴巴张开并不代表就是笑，也有可能是哭和惊讶 等。以下我们所讲到的一些方法都是从人脸识别演变而来， 结合表情 识别的特点而运用。目前所用到的识别特征主要有：灰度特征、运动 特征和频率特征三种。 灰度特征是从表情图像的灰度值上来处理， 利 用不同表情有不同灰度值来得到识别的依据。 这种

13、情况下要求图象对 光照、角度等因素要进行充分的预处理， 使获得的灰度值具有归一性。 运动特征利用了不同表情情况下人脸的主要表情点的运动信息来进 行识别。频域特征主要是利用了表情图像在不同的频率分解下的差 别，速度快是其显著特点。在具体的表情识别方法上，方向主要有三 个：整体识别法和局部识别法，形变提取法和运动提取法，几何特征 法和容貌特征法。也有可能是哭和惊讶等。 以下我们所讲到的一些方法都是从人脸 识别演变而来， 结合表情识别的特点而运用。 目前所用到的识别特征 主要有：灰度特征、运动特征和频率特征三种。灰度特征是从表情图 像的灰度值上来处理，利用不同表情有不同灰度值来得到识别的依 据。这种

14、情况下要求图象对光照、角度等因素要进行充分的预处理， 使获得的灰度值具有归一性。 运动特征利用了不同表情情况下人脸的 主要表情点的运动信息来进行识别。 频域特征主要是利用了表情图像 在不同的频率分解下的差别， 速度快是其显著特点。 在具体的表情识 别方法上，方向主要有三个：整体识别法和局部识别法，形变提取法 和运动提取法，几何特征法和容貌特征法。两组被试选择最多的辅助方法 2. 想象适合面部表情的情绪，由 此根据“面部肌肉运动模式作为情绪标志的根据”这一论断。被试主 要是观察图片中人物的面部表情（眉、眼、嘴等）的细微区别，辅之 以手的动作来推断情绪。然而，面部肌肉运动模式中局部识别方法可以较精

15、确的识别表 情，局部识别方法就是将人脸的各个部位在识别时分开， 也就是说各 个部位的重要性是不一样。 比如说在表情识别时， 最典型的部位就是 眼睛、嘴、眉毛等，这些地方的不同运动表示了丰富的面部表情。相 比较而言， 鼻子的运动就较少， 这样在识别时就可以尽量少的对鼻子 进行分析，能加快速度和提高准确性。局部方法中也包括运动法，运 动法是根据人脸在表达各种特定的表情时一些特定的特征部位都会 作相应的运动这一原理来识别的。在上面提到的六种基本的表情中， 脸上一些固定的特征点（或部位）的运动方向或趋势是固定的，比如 说人在恐惧的时候， 眼睛张开的幅度应该比正常时要大， 嘴一般是张 开的等等。5. 结论1）对两组判断的平均正确率进行显著性检验，差异显著。2）对于表情认知的辅助方法组一和组二大