（基础心理学专业论文）qq面部表情图片的识别研究.pdf

摘要 本研究以流行的网络即时通讯软件q q 的面部表情图片作为研究对象。 实验调查首先采用问卷调查法获得识别率较高的一组q q 面部表情图 片，并就不同的情绪类别初步比较不同情绪辨别率的差异。 实验通过不同性别的中西方被试对q q 面部表情图片的情绪归类和九 点量表评分，考察人们对q q 面部表情图片识别的差异，并获取了一组识别率 更高的q q 面部表情图片作为下步实验的材料。 实验二通过被试对上半部脸、下半部脸及整体脸部图片的情绪归类和九 点量表评分，考察图片属性对q q 面部表情图片识别的影响。 综合实验一和实验二的结果，本文获得如下结论：( 1 ) 不同情绪q q 面部 表情图片的辨别率差异显著，悲伤的辨别率最高，其次是高兴，厌恶的辨别 率最低；不同情绪强弱程度评分差异显著，悲伤的强弱程度评分最高，厌恶 最低。( 2 ) 性别对不同情绪q q 面部表情图片的辨别率、强弱程度评分的影响 差异都不显著。中西方被试对不同情绪的辨别率、强弱程度评分的影响差异 都不显著。( 3 ) 部位对不同情绪的辨别率、强弱程度评分差异均相当显著。 整体脸部各类情绪的辨别率明显高于上半部脸和下半部脸；以眼眉为主的上 半部脸是辨认愤怒、恐惧、平静情绪的主要依据，口唇为主的下半部脸是辨 认高兴情绪的主要依据，对惊讶、悲伤、厌恶情绪来说，二者差异不显著。 这与人们辨认人的面孔情绪图片的情况并不完全一致，文中还对其进行了讨 论。 关键词：面部表情辨别率情绪强弱程度评分q q 面部表情图片 a bs t r a c t i nt h i ss t u d y , t h ep o p u l a ri n t e r n e ti n s t a n tm e s s a g i n gs o f t w a r eq qf a c i a l e x p r e s s i o n sp i c t u r ea sas t u d yo b j e c t t h ee x p e r i m e n t a li n v e s t i g a t i o nf i r s tu s i n gt h es u r v e ym e t h o dt oc a m p a r e p r e l i m i n a r yt h er e c o g n i t i o nr a t eo fd i f f e r e n tt y p e so fe m o t i o n ，a n dt oo b t a i na g r o u po fq qf a c i a le x p r e s s i o n sp i c t u r ew h i c ht h er e c o g n i t i o nr a t ei sh i g h e r t e s t1t h r o u g ht h ed i f f e r e n tg e n d e r 、t h ec h i n e s ea n df o r e i g nn a t i o n a l i t yi s t r i e dt oc l a s s i f yq qf a c i a le x p r e s s i o n sp i c t u r eo ft h ee m o t i o n a lt y p ea n dt og i v e t h e ms t r e n g t hs c o r et oi n s p e c tt h ed i f f e r e n c eo fi d e n t i f yr a t ea n ds t r e n g t hs c o r eo f d i f f e r e n tt y p eo fe m o t i o no fq qf a c i a le x p r e s s i o np i c t u r e ，a n dg a i n e dag r o u po f q qf a c i a le x p r e s s i o np i c t u r ew h i c hi d e n t i f yr a t eh i g h e ra st h e n e x ts t e p e x p e r i m e n t a lm a t e r i a l t e s t2t h r o u g hc l a s s i f y i n gt h eu p p e rh a l ff a c e ，t h eu n d e rh a l ff a c ea n dt h e o v e r a l lf a c ep i c t u r et ot h ee m o t i o n a lt y p ea n dg i v i n gt h es t r e n g t hs c o r e s ，t o i n s p e c tt h ei n f l u e n c eb yt h ep i c t u r ea t t r i b u t eo nq q f a c i a le x p r e s s i o np i c t u r e t h es y n t h e s i st e s t1a n dt e s t2 ，t h ec o n c l u s i o n so ft h i sp a p e rw e r ea sf o l l o w s ： ( 1 ) d i f f e r e n te m o t i o n a lq qf a c i a le x p r e s s i o np i c t u r ei d e n t i f yr a t ed i f f e r e n t s i g n i f i c a n t l y ，s a dr a t et h eh i g h e s t ，n e x ti sh a p p y ，d i s g u s tr a t et h el o w e s t ；d i f f e r e n t e m o t i o n a lq qf a c i a le x p r e s s i o np i c t u r es t r e n g t hs c o r ed i f f e r e n ts i g n i f i c a n t l y ，s a d s c o r et h eh i g h e s t ，d i s g u s ts c o r et h el o w e s t ( 2 ) t h eg e n d e ro ni d e n t i f y i n gt h e e m o t i o no fq qf a c i a le x p r e s s i o np i c t u r er a t ea n dt os c o r i n gt h es t r e n g t ha r e a t d i f f e r e n ts i g n i f i c a n t l y t h ec h i n e s ea n df o r e i g nb et r i e dh a v et h ei d e n t i c a lr e s u l t ( 3 ) t h el o c a t i o no fq qf a c i a le x p r e s s i o np i c t u r eo ni d e n t i f y i n gt h ee m o t i o no f q qf a c i a le x p r e s s i o np i c t u r er a t ea n dt os c o r i n gt h es t r e n g t h i sd i f f e r e n t s i g n i f i c a n t l y v a r i o u st y p e so fe m o t i o no ft h eo v e r a l lf a c e ，t h ei d e n t i f yr a t eo f e m o t i o na n ds t r e n g t hs c o r e sa r eh i g h e rt h a nt h e s eo ft h eu p p e rh a l ff a c ea n dt h e u n d e rh a l ff a c eo b v i o u s l y ；e y ea n dt h ee y e b r o ww h i c ha r em a i n l yo ft h eu p p e r h a l ff a c ei st h em a i nc l u et oi d e n t i f yt h ee m o t i o n so fa n g e r ，f e a ra n dc a l m ；m o u t h a n dl i pw h i c ha r em a i n l yo ft h eu n d e rh a l ff a c ei st h em a i nc l u et oi d e n t i f yt h e e m o t i o no fh a p p y ；a st os u r p r i s e ，s a d n e s sa n dd i s g u s t ，t h ed i f f e r e n c ei sn o t s i g n i f i c a n t t h i sr e s u l ti sn o tc o n s i s t e n tw i t ht h es i t u a t i o no fi d e n t i f i c a t i o nw i t h t h ep e o p l ef a c i a le x p r e s s i o np i c t u r e ，a n dw eh a v eg a v e ds o m ed i s c u s s i o na b o u t t h i s k e yw o r d s ：e m o t i o n a le x p r e s s i o n s ，i d e n t i f yr a t eo fe m o t i o n a l ，s t r e n g t hs c o r e ， q q f a c i a le x p r e s s i o n sp i c t u r e i i i 湖南师范大学学位论文原创性声明 本人郑重声明：所呈交的学位论文，是本人在导师的指导下，独 立进行研究工作所取得的成果。除文中已经注明引用的内容外，本论 文不含任何其他个人或集体已经发表或撰写过的作品成果。对本文的 研究做出重要贡献的个人和集体，均已在文中以明确方式标明。本人 完全意识到本声明的法律结果由本人承担。 学位论文作者签名：沙峰乌妒j 释厶月乡日 湖南师范大学学位论文版权使用授权书 本学位论文作者完全了解学校有关保留、使用学位论文的规定， 研究生在校攻读学位期间论文s - 作的知识产权单位属湖南师范大学。 同意学校保留并向国家有关部门或机构送交论文的复印件和电子版， 允许论文被查阅和借阅。本人授权湖南师范大学可以将本学位论文的 全部或部分内容编入有关数据库进行检索，可以采用影印、缩印或扫 描等复制手段保存和汇编本学位论文。 本学位论文属于 1 、保密口，在年解密后适用本授权书。 2 、不保密曰。 ( 请在以上相应方框内打“ ) 作者签名：乡、- 缸垒日期：2 。净工月；日 钟签矧弧白嗍：彬6 月夕日 i 1 q q 面部表情图片的识别研究 1 引言 1 1 情绪概述 情绪是人对客观事物的态度体验及其相应的行为反应，是以个体的愿望 和需要为中介的一种心理活动。 生活中，我们有时欣喜若狂，有时焦虑不安，有时孤独恐惧，有时满腔 怒火，有时悲痛欲绝，有时舒适愉快等等，这一切使我们的生活形成了一个 五彩缤纷的心理世界。情绪的多样性，说明它是一个极其复杂的心理现象， 它既是人的心理活动中动力机制的重要组成部分，也是个性形成的重要方 面，它由独特主观体验、外部表现和生理唤醒等三种成分组成，它最能表达 人的内心状态，是人的心理状态的晴雨计。 主观体验是指个体对不同情绪和情感状态的自我感受。外部表现是指在 情绪状态发生时身体各部分的动作量化形式，包括面部表情、姿态表情和语 调表情。面部表情是所有面部肌肉变化所组成的模式。如，高兴时额眉平展、 面颊上提、嘴角上翘。面部表情能精细地表达不同性质的情绪，是鉴别情绪 的主要标志。生理唤醒是情绪产生的生理反应。 情绪可以被简单地看作是一些身体的变化和情感的表现，也可以复杂地 包含行为、行动和社会相互作用的倾向性和习性。它能帮助我们感受事物，。 理解世界，获得对于需要满足与否的心理体验。这种心理机能是人类进化的 产物，在人类适应环境的过程中起到了重要作用。 1 2 情绪的分类 关于情绪的分类，我国古代名著礼记中提出“七情说 ，即喜、怒、 哀、惧、爱、恶和欲等，白虎通中提出了“六情”，即喜、怒、哀、乐、 爱和恶等。 我国心理学家林传鼎( 1 9 4 4 ) 从说文中，找出9 3 9 5 个正篆字，发现 其中有3 5 4 个字是描述人的情绪的，并按它们的意思分为1 8 类，即安静、喜 悦、愤怒、哀怜、悲痛、忧怒、烦闷、恐惧、惊骇、恭敬、悦爱、憎恶、贪 憩、嫉妒、畏惧、惭愧、耻辱等。 从生物进化的角度看，人的情绪可分为基本情绪和复合情绪。基本情绪 是人与动物所共有的，在发生上有着共同的原型和模式。他们是先天的，不 学而能的，每一种基本情绪都具有独立的神经生理机制、内部体验和外部表 现，并有不同的适应功能。复合情绪则是由基本情绪的不同组合派生出来的。 2 0 世纪7 0 年代，伊扎德用因素分析的方法提出人类的基本情绪有1 1 种， 即兴趣、惊奇、痛苦、厌恶、愉快、愤怒、恐惧、悲伤、害羞、轻蔑和自罪 感等。由此产生的复合情绪有三类：第一类是基本情绪的混合，如兴趣一愉 快、恐惧一害羞、恐惧一内疚一痛苦一愤怒等；第二类是基本情绪与内驱力 的结合，如性驱力一兴趣一享乐、疼痛一恐惧一怒等；第三类是基本情绪与 认知的结合，如活力一兴趣一愤怒、多疑一恐惧一内疚等。复合情绪有上百 种，而大多数复合情绪是很难命名的。有些复合情绪可以命名。如愤怒一厌 恶一轻蔑的复合情绪可以命名为敌意；恐惧一内疚一痛苦一愤怒的复合情绪 可以命名为焦虑等。 情绪分类的环形模式是罗素( r u s s e l l ，1 9 8 0 ) 提出的。他认为情绪可以 划分为两个维度：愉快度和强度。愉快度又可分为愉快与不愉快；强度又可 分为中等强度和高等强度。由此可以组合成四个类型：愉快高等强度是 高兴，愉快中等强度是轻松，不愉快中等强度是厌烦，不愉快 高等强度是惊恐。这种分类用评价情绪词或归类的方法，在英语国家和非英 语国家如中国、克罗地亚、希腊、希伯莱、日本、波兰、德国等都得到了一 致的研究结果( l a r s e n $ d i e n e r ，1 9 9 2 ：r e i s e n z e i n ，1 9 9 4 ) 1 3 表情概述 表情( 本文指面部表情) 是指通过眼部肌肉、颜面肌肉和口部肌肉的变 化来表现各种情绪状态。它可以被定义成面部肌肉的特定运动模式这些 表情肌和其它肌肉组织不同，并不负责关节运动的功能，而仅仅用来专门承 担面部表情的表达任务。表情是个体间相互交流、理解的一种最重要的非言 语交流途径。 表情是情绪的外显形式，是人际交往中传递情绪的主要媒介，它为人际 交流提供了一套快捷、有效的符号系统。面孔是人类表达情感和认知情感的 重要工具和途径，面部表情能精细地表达不同性质的情绪和情感，使得个体 情绪不需要依赖言语就能准确地被传递出来。这种机能在人类的生存活动和 种族演进中具有重要的生物适应价值和社会交际功能。美国著名心理学家阿 尔培特认为，在人进行感情表达时，往往言词的使用只占7 ，而声调占 3 8 ，剩下的5 5 全由体语来完成由此我们知道，在人的感情表达中体语 的作用是大于语言的，而表情是体语的重要组成部分。 e k m a n ( 1 9 7 5 ) 的实验证明，人脸的不同部位具有不同的表情作用。例如， 眼睛对表达忧伤最重要，口部对表达快乐与厌恶最重要，而前额能提供惊奇 的信号，眼睛、嘴和前额等对表达愤怒情绪很重要。林传鼎( 1 9 4 4 ) 的实验 研究证明：口部肌肉对表达喜悦、怨恨等少数情绪比眼部肌肉重要；而眼部 肌肉对表达其他的情绪，如忧愁、惊骇等，则比口部肌肉重要。 q q 面部衷情图j i 的识别研究 表情识别是社会交流的种系发生的古老的形式，很可能我们与其他灵长 类共同具有面部( 和表情) 识别的脑机制。个体的表情传达关于生物学方面 和社交方面的重要的特征信息，例如，身份、性别、年龄和情绪状态。如果一 个物种对在环境中出现的潜在威胁能够快速地做出反应，那么他们就具备了 明显的进化优势。神经生理学已经表明存在一个从丘脑到杏仁核的直接路径， 即在确认一个物体是危险的( 一条蛇) 或无害( 一根树枝) 之前，哺乳动物对 不明确的刺激做出防御的反应。如果动物在采取行动之前等待识别确认这一 物体，那么幸存的机会就会减少。 表情与个人因素、社会环境有很大关系，对表情的认知、加工及相应的 e r p 成分受到许多内部或外部因素的影响。情绪是伴随个人的立场观点和生 活经历为转移的，受到各种社会环境因素的影响，所以对情绪的研究比对其 他认知行为的研究更为复杂。 识别他人情绪的能力对于种族的生存也具有重要的意义。识别某些情绪 比其他一些情绪更重要，例如，知道某人在生气比知道某人愉快更有意义。汉 森兄弟( h a n s e n c h & h a n s e n r d ) 在这方面进行了研究，他们要求被试在 许多面部表情图片( 如愉快，中性或发怒) 中寻找某一种表情的图片。结果 表明，被试指出发怒的面孔比指出愉快的和中性的面孔速度要快。婴儿很早 就可以熟练地从非面孔刺激中识别面孔和识别不同的情绪表情。研究表 明，5 6 个月的婴儿能够辨别恐惧、愤怒和悲伤的面部表情，并且愤怒的面 部表情特别能引起婴儿的注意。 1 4 表情和基本情绪 表情和情绪一个是外在指标，一个是内在过程，共同构成了完整的情绪 信号产生和表达系统。面部表情是情绪的独特表现形式，并且也是情绪最容 易被直接观察到的外部反映指标。研究表情，有助于解释个体间非言语情绪 信号的传递、识别过程，也可以反推人类情绪的基本分类和内在性质。 基本情绪是指这样一些先天的共同情绪，在这些情绪的情感状态或意识 性质的界定上，各个种族( 开化和未开化) 皆表现出了本质上的一致性。在 1 9 9 9 年版的h a n d b o o ko fe m o t i o na n dc o g n i t i o n 中，e k m a n 对基本情绪 进行了回顾。他的理论框架在很大程度上受到了达尔文( 1 8 7 2 ) 和t o m k i n s ( 1 9 7 2 ) 的影响，在基本情绪的划分标准上明显带有以表情独立性为重要依 据的倾向。可以说，在其定义的基本情绪中，也界定了对应的各类基本表情。 同o r t o n y $ 1 t u r n e r - - 样，e k m a n 认为就基本情绪而言，在“基本 上包含有 三层含义：( 1 ) 存在一些独立的、相互分离的情绪，它们在各自的评定方式、 行为反应、生理机制等方面都有所不同；( 2 ) 这些情绪在应对基本生活任务 方面存在适应性价值，并各自逐渐进化；( 3 ) 各种更复杂的情绪都能用这些 情绪或这些情绪的整合来解释( 如得意就包含有快乐和轻视这两种情绪) 。 在有关基本情绪对应的基本表情问题方面，e k m a n ( 1 9 7 2 ) 指出：情绪 刺激能引发相应的情绪协调功能，并发出引起面部肌肉变化的动作指令。他 认为，至少有6 种基本情绪，并由6 种不同的独立表情予以表达一一愤怒、厌 恶、恐惧、高兴、悲伤和惊讶。比如当产生惊讶情绪时，动作指令会自动传 递至面部肌肉，使得眼睛瞪大，眉毛抬起，嘴巴张开。但这一自动发出的动 作指令未必会导致面容变化，因为人们在日常生活中通常会遵循情感“显示 规则”，即它们会根据当时情境的需要，知道是否该加强或弱化，甚至是掩 饰他们的表情。1 9 9 2 年，e k m a n 提出，人们能够识别出数百张不同的脸，却 只能分类觉察出几种表情。这说明人为地划分基本表情既是合理的，也是模 糊的。 在考察情绪和表情的关系上，我们通过情绪能够了解个体内部的心理活 动，并获知之前个体经历过的事件，以及预测之后个体将要做出的行为。这 些对于情绪的进化不是至关重要的，但对于人类交往和交流是不可或缺的。 每一种情绪的发生并非都伴随呈现特定的表情信号，因为很大程度上我们能 掩饰这个“信号”。此外，信号出现与否存在着一个阈限，阈限高低取决于 个体的认知水平。所以，表情未必伴随情绪发生。而反之亦然，人们可以伪 装出一个情绪表情。由此，我们知道尽管表情是情绪的外显指标，但两者未 必总是同时发生的。 基本情绪会在长期生活中不断得到进化，反映中枢神经系统分化的水 平。然而，特定的情绪是否与具体的生理变化相联系，詹姆斯( 1 8 9 0 ) 认为， 每一种情绪状态都有一种明显的生理模式与之相对应，而情绪只是对我们身 体内部发生的事情的感觉。现有的证据表明，出现愤怒、恐惧、悲哀和厌恶 时，自主神经系统活动伴有不同的表现模式，却还不足以确定每一种基本情 绪都有各自独立且独特的生理反应模式。但e k m a n 认为，随着科学技术的进 步，研究者肯定会得到对应不同种类情绪活动的中枢表达。d a v i d s o n 等人 ( 1 9 9 0 ) 发现了不同脑区活动对应了快乐和厌恶的面部表情，从一定程度上 支持了e k m a n 的上述观点。汤姆金斯( t o m k i n s ，1 9 7 0 ) 也假定存在八种原始 的情绪：兴趣、欢乐、惊奇、痛苦、恐惧、羞愧、轻蔑、愤怒，并假定每种 情绪都是在某种先天性的皮层下神经( 丘脑) 控制下出现的一种面部肌肉反 应，因而有相应的表情模式。 人们的文化背景和所受训练都会影响情绪的识别和表达。情绪的交流在 相同文化背景的人群中更加准确。i z a r d ( 1 9 7 1 ) 在辨认美洲人表情的研究中 q q 面部表情图片的识别研究 发现，美洲组和欧洲组能正确辨认出7 5 8 3 的面孔图片，日本人只能辨认 6 5 的照片，而非洲人的正确率只有5 0 。 e l f e n b e i n 和a m b a d y 证实情绪识别的普遍性和文化差异。对面部表情的 正确判断也取决于观察者所受的训练。大学生在接受训练前后，其辨认婴儿 在不同情绪状态下的面部表情的能力有很大的差异，其准确率在受训练后有 不同水平的提高。 高文、金辉( 1 9 9 7 ) 在“面部表情图像的分析与识别”中对表情的结构 特点进行了归纳( 如表1 - 1 ) ，并列出了表情识别的分类判别树( 如图1 - 2 ) 。 表1 - 1 表情的结构特点 表情额头、眉毛眼睛脸的下半部 眉毛抬起变高变弯眼睛睁大上眼皮抬高下眼皮下落下颁下落嘴张开唇和齿分开。但 惊奇眉毛下的皮肤被拉伸 眼白可能在瞳孔的上边和或下边露 噶部不紧张，也不拉仲 皱纹可能横跨额头出来 眉毛抬起并皱在一起嘴张嘴唇或轻微紧张向后拉l 或 恐惧额头的皱纹只集中在中部 上暇睑抬起，下眼皮拉紧 拉长，同时向后拉 而不横跨整个额头 上唇抬起 在下眼皮下部出现横纹脸颊推动其向 下唇与上唇紧闭推动上唇向 厌恶眉毛压低。并压低上眼睑上，喷角下拉，唇轻微凸起 上但并不紧张 鼻子皱起 脸颊抬起 表情额头、眉毛眼睛脸的下半部 眉毛皱在一起压低 下眼皮拉紧，抬起或不抬起 唇有两种基本位置t 譬闭唇角 愤怒 在眉宇问出现竖直皱纹 上眼皮拉紧眉毛压低 拉直或向下张开仿佛要喊 眼睛瞪大可能鼓起鼻孔可能张大 下眼睑下边可能有皱纹，可能鼓起 唇角向后拉并抬高 但并不紧张 嘴可能被张大牙齿可能露出 一道皱纹从鼻子一直沿伸到嘴高兴眉毛稍微下弯 鱼尾纹从外眼角向外扩张 角外部 脸颊被抬起 眉毛内角皱在一起抬高带嘴角下拉 悲伤眼内角的上眼皮抬高 动眉毛下的皮肤嘴角可能颤抖 惊奇、高兴、恐惧悲伤1 - 目 一 。 愤怒、厌恶，中性 。：7 一不动l 惊奇恐惧悲伤l 高兴、悲伤、蚤惧、中性厌恶，愤怒 吵弋闭可八 和闭口 恐惧悲伤 悲伤中性 高兴、恐惧愤冬 厌怒 吵眉嘴吵弋朴皱可弋 i 恐惧li 惊奇lf 悲伤ll 悲伤中性ll 高兴l i 恐惧i 图1 - 2 表情识别的分类判别树 人能轻易地从不同表情中识别出同一个人的面孔( 即面孔身份识别， f a c i a li d e n t i t y r e c o g n i t i o n ) ，也能从不同人的面孔上识别出同一种表情 ( 即面部表情识别，f a c i a l e x p r e s s i o nr e c o g n i t i o n ) ，识别得如此精确， 以至众多研究者相信，识别面孔与识别表情两者相互独立，互不干扰。那么， 这种分离识别究竟是如何实现的? 面孔身份识别与面部表情识别究竟是彼 此独立的还是相互作用的? 这已成为认知科学( 尤其是计算机视觉) 面孔识 别研究领域中亟待解决的一个重要问题。 1 5 表情的共同性 从一定意义上说，表情研究的发展是以表情是否具有共同性为主线展开 的。对于表情具有全人类的共同性还是具有文化差异这一论题的争论可以追 溯至l j l 0 0 多年前。达尔文在人与动物的情感一书中提出，由集中分离独 立的表情具有遗传性和普遍性，并表明我们应该在更宽泛的文化范围内来考 察表情。 达尔文曾给居住在8 个其他国家地区( 非洲、美国、澳大利亚、中国、 马来西亚、印度、新西兰、婆罗洲) 的英国人寄去有关表情的调查问卷，他 们寄回的答案中都表示在国外看到了与国内相同的情绪表达( 表情) 。正是 他们的回答使得达尔文得出了“表情共同性”的结论。在认与动物的情感 中，他写道：“从已获得的信息来看，全世界的人在表达同样的心理状态时 有着惊人的一致性。” 在达尔文的年代，这一研究堪称经典。e k m a n ( 1 9 9 9 ) 对此研究评价颇 高，但同时根据现代研究标准提出了该研究的3 个不足。首先，达尔文在这8 个国家中调查的人数不够多。其次，达尔文的调查范围仅限于英国人，而没 有对当地人展开调查。第三，达尔文在表达调查的问题时常常暗示了自己期 望的答案。比如，他会那样问：“在表达惊讶的表情时，人们是否会张大嘴 并挑起双眉? 达尔文的“表情一致性 观点引发了一场争论。其中，对他的理论冲击 最大的是l a n d i s ( 1 9 2 9 ) 的研究，他对特定的面部表情和特定的情绪体验的 对应关系提出了一个基本问题面部能为当前所体验到的情绪提供准确 的信息吗? 研究者在对他的数据收集的方法进行评价和重新分析后，发现他 并没有公正地揭示数据。然而，他的研究经常被引证来驳斥表情的先天性和 共同性假说，直至l j 2 0 世纪7 0 年代表情的共同性逐渐被证明为止。 尽管l a n d i s 的研究遭到了众多的批评，但他依然做出了重要的贡献。 l a n d i s 指出：( 1 ) 对于所有的承认被试，任何刺激引发相同情绪反应的概率 很低；( 2 ) 一些刺激情境中引发的情绪种类是有限的且是特征性的，至少根 q q 面部表情削片的识别研究 据自我报告的情绪体验是这样。 同l a n d is 一样，达尔文之后大部分心理学家的研究都反驳了眠隋绪是由 一组共同的面部表情来表达 这一观点。此外，探索文化相关性的人类学家 也指出，同一个表情在不同文化中有着截然不同的意义。其中，颇具影响力 的有社会心理学家k l i n e b e r g ( 1 9 4 0 ) 和人类学家b i r d w h i s t e l l ( 1 9 7 0 ) 。 k l i n e b e r g 综合前人研究后指出，诸如哭和笑这样的行为模式( 表情) 在人 类身上表现出了普遍性，但愤怒、恐惧、厌恶和悲哀表情则没有。 b i r d w h i s t e l l 曾是达尔文“表情共同性 的追随者，但他经过深入研究后则 认为不存在一致性的表情符号，并认为表情是后天习得，且不同的文化造就 了各文化下独特的表情。 尽管大部分学者驳斥了表情的共同性，但少数学者则始终坚持表情具有 一致性的观点，最具影响力的支持者是t o m k i n s 。1 9 世纪6 0 年代末，一些研 究者根据他的理论描述来选择面部刺激，开始在西方文化和其他文化种族中 进行表情识别和表情伪装的研究。 i z a r d ( 1 9 6 8 ) 在早期工作的基础上，为9 种基本情绪的表情设立了标准， 包括好奇、快乐、惊讶、悲哀、愤怒、厌恶、轻蔑、恐惧和害羞。他把这些 表情的照片编排成一组情绪测验，呈现给美国、英国、法国和希腊的被试。 总体上，被试辨别的正确率在6 0 左右。这些表情照片还被用于情绪再认测 验中，呈现给美国、英国、德国、瑞典、法国、瑞士、希腊、日本、非洲、 印度和土耳其文化背景下的被试，给被试一张基本情绪表情的列表，要求他 们把照片归入对应的种类中。对于所有文化背景中的被试，辨别表情的平均 准确率为7 8 ，这一结果有力地支持了共同性假说。 然而这些研究的结果并没有排除在不同文化背景中，人们对基本情绪表 情可能形成的相同刻板印象。e k m a n ( 1 9 7 1 ) 的研究驳斥了这种可能性。它 选用未开化的新几内亚和婆罗洲人作为被试( 因为这些种族从未接触过西方 人的表情行为) ，让他们对6 种情绪( 快乐、惊讶、悲哀、愤怒、厌恶和恐惧) 进行辨认和再认，研究结果排除了表情刻板印象存在的可能。 i z a r d 矛n e k m a n 及其他研究者的跨文化研究为至少6 种基本情绪表情的共 同性假说提供了强大的证据。e i b l - e i b e s t e l d t ( 1 9 7 9 ) 对先天盲人和无法通 过出巨额学习表情的人进行了研究，他的研究结果进一步补充了i z a r d 和 e k m a n 的工作，使之更具有说服力。 在汇总多项研究后，e k m a n 发现2 1 个国家或地区的被试，对6 种基本情绪 的辨别有着惊人的一致性。对快乐、悲哀和厌恶情绪，在2 1 个国家呈现出全 部一致惊讶在2 0 个国家中表现为一致；恐惧在1 9 个国家中一致；愤怒在1 8 个 硕十学位论文 国家是一致的。e k m a n 认为，对特定的表情而言，只有当不同国家的被试将 之辨别成不同的情绪时，才能反驳情绪的普遍性，而研究中并没有出现这种 情况。 1 6 表情研究回顾2 最早对表情研究产生兴趣的是解剖学家、画家和演员。以发现脊神经腹 背侧功能相异出名的解剖学家贝尔( 1 8 6 0 ，1 8 4 4 ) 指出，了解产生不同表情 的面部肌肉结构对于画家尤为重要，并指出表情具有“实用性”。 德国解剖学家p i d e r i t 对表情研究的初衷类似于贝尔，他希望解剖学的工 作对画家和雕塑家的工作有所帮助。p i d e r i t 发现很多绘画中所表现出的面 部表情并不和谐，因此激发了他研究面部各局部表情的兴趣，因为他相信和 谐的局部表情整合起来会得出整张脸上的和谐表情。p i d e r i t 的研究是在线 条画上进行的，简单的线条排除很多其他无关线索，使研究能在尽可能真实 的基础上进行。 最早对表情进行系统研究的是达尔文。在从动物到人的进化连续体上， 达尔文的研究提供了情绪方面的确凿证据。他曾在物种起源( 1 8 5 9 ) 一 书中提出，情绪作为一种行为模式，是对外部环境刺激的反映，根本没有起 到适应环境的作用。但在1 8 7 2 年发表的人与动物的情感一书中，他依据 对动物及原始人类的生活细节和面部表情等研究，提出表情是动物和人类进 化过程中适应性动作的遗迹，对动物和人类的生存具有重要价值，而且这种 功能在适应环境的过程中不断得到发展。他明确指出，了解人类的表情必须 同探索动物的表情相联系。达尔文的观点表明，人类的情绪以及与之对应的 各种表情，很大程度上是由进化决定的。情绪的面部表情动作，在人类身上 最初起着生物性和工具性的功能。表情因其具有沟通( 交流) 价值而作为一 种技能被保存至今。例如，愤怒时咬牙切齿、鼻孔张大的表情是人类祖先面 对行将到来的搏斗时做出的适应动作。随着人类的不断进化，面部动作原始 的传递信息功能已经部分消失，但由于其沟通( 交流) 价值具有适应性，故 这些面部动作仍被保留下来；或者说作为自然选择的结果，这些动作的不断 修正，改作表达新的信号含义的功效达尔文认为表情与人类日常习惯相关， 具有“服务性 功能。他把表情看作是实用动作的遗迹，为获得实用效果， 这些表情变成了自动性的习惯得以遗传下来。但是达尔文又认为，表情对情 绪的表达，例如，皱眉生气、挫折，笑高兴，哭悲哀，发抖一 一害怕、担心，颤栗害怕、气愤等等，“每种都是具有一种独特特征的 离散状态”。达尔文认为：人的表情和动作具有先天性和世界性这两大特点。 当然，达尔文的研究只局限在人的表情和动作的生物性的一面实际上 q q 面部表情图j i 的识别研究 人的表情与动作，与人的本性一样，既有生物性又有社会性美国著名的 社会学教授戴维埃弗龙对人类的手势作了长期的调查研究写下了手 势种族和文化一书他认为在某种程度上，决定身体动作方式的是社会 心理因素，而不是生理遗传因素生活中的现实事例证明，埃弗龙的结论 是正确的如大多数民族都以摇头表示反对、不同意，以点头表示赞同：但 保加利亚人却相反：摇头表示同意，点头表示反对埃弗龙的研究补充了 达尔文研究的不足之处。 f e m b e r g e r ( 1 9 2 8 ) 的研究得出结论，脱离刺激情境后，情绪状态无法从 抽象的面部表情中推断出，因此人们是按照情境刺激来判断情绪状态，而非 面部表情。h e b b ( 1 9 4 6 ) 的研究发现，人们在无法进行透彻分析的情况下，仍 能辨认出极其复杂的表情模式。 a n d r e w ( 1 9 6 3 ) 在研究灵长类动物啼叫和表情的起源时，发现动物的啼 叫和表情可能是起源于一种保护性的反射，这种反射由不愉快的或恐惧的刺 激所引起。同时，他也提出了与达尔文相似的观点面部表情的交流性价 值决定了它们在进化过程中的选择和延续。、 2 0 世纪7 0 年代，e k m a n 和f r i s e n 系统地研究了人脸基本表情的文化 普遍性，并从解剖学角度提出了6 种基本的面部表情。2 0 世纪8 0 年代，b r u c e 和y o u n g 系统地研究了人对面孔的识别及其影响因素，提出了经典的面孔识 别功能模型。自此，面孔识别成为认知科学研究领域中的热点问题之一。 在很长一段时间里，有关情绪和表情的研究引起了心理学和神经科学领 域研究者们的兴趣，但由于问题的复杂性和离散性，表情和情绪课题一直没 有成为心理学发展过程的主流研究趋向。但在2 0 世纪六七十年代，少数研究 者( s il v a ns t o m k i n s ，m a g d ab a r n o l d ，p a u le k m a n ，c a r r o lle ，i z a r d ，k l a u s s c h e r e r ，n i c oh f r i j d a ) 对于表情和情绪课题的热忱和孜孜不倦，使得情 绪研究在认知革命大潮中得以发展并取得了一定突破。近3 0 多年来，相关的 研究越来越多，其动因是( 1 ) 面部表情是可观察的行为，能通过面部 特征变化进行分析；( 2 ) 人们对于非言语交流的兴趣愈发浓厚；( 3 ) 科技的 进步使对表情线索的精密研究成为可能。 b a r o n c o h e n ( 1 9 9 2 ) 认为幼儿的注意跟随和盯视监控是心理理论发 展的基础，并且提出个体能否通过眼睛了解人们的心理状态。b a r o n c o h e n ( 1 9 9 6 ) 首先对通过面部表情识别基本情绪和复杂心理状态进行了跨文化和 发展的研究，结果发现8 9 1 0 1 1 岁的儿童和成人能够通过面部表情识别基 本的情绪状态和一些复杂的心理状态，而且没有发现文化差异和发展的差 异。b a r o n c o h e n ( 1 9 9 7 ) 在另一项实验研究中，给成人被试观看面部表情、 从面孔中截取的眼睛部位以及嘴部的照片，同时让他们在两个或者四个词中 选择一个描述该照片中人物心理状态的词，结果发现在对基本情绪的判断中， 通过整个面部表情线索来做出判断要比仅仅通过眼睛或嘴部线索判断显著 的好，但与眼睛部位的判断差异刚好在o 0 5 水平，而眼睛与嘴部没有差异。 但在对复杂心理状态的判断中，面部条件下的判断显著好于眼睛和嘴部条件 下的判断，而且眼睛和面部没有显著差异，但它们都显著好于嘴部条件下的 判断。这说明眼睛在传递个体的心理状态中几乎承载和面部同样多的信息。 研究面部特别是眼睛在传递情绪等心理状态中的作用有重要的意义。 研究还发现女人能较快地分辨出不具威胁性的面部表情如快乐、伤心 或厌恶。研究人员认为，这是因为进化过程中女人需要结成群体相互合作。 在这项实验中，美国麻省理工学院的马克威廉斯和澳大利亚墨尔本大学的 贾森马廷利在屏幕上放映出6 男6 女的面部表情，依次记下每个参与者 ( 男女各7 8 人) 分辨出愤怒表情所花的时间。面对不同表情的脸，男性用了 大约9 5 0 毫秒找出愤怒表情，而女性花了近12 0 0 毫秒。研究人员说，男人 能更快地分辨出充满愤怒的男性脸，原因大概是男性通常更具危险性。而且 从进化的角度来看男性比女性更有可能构成肢体威胁。发表在当代生物 学杂志上的这项研究称，该研究结果印证了如下观点，即人类的进化使男 性和女性人体内的危险识别系统得到完善并逐渐出现差别。 1 7q 0 面部表隋图片的产生和特点 2 0 世纪末互联网的诞生，促使人类生活产生了又一次深刻的革命。互 联网以前所未有的速度影响和改变着人们的生活方式，使网络生活成为继现 实生活之外的一种新生活。世界交际、沟通方式正进行着一场巨大的革命。 现代化的人们交流能够通过可视化论坛、聊天室或电子邮件来交流合作。人 们交换的信息可能包括课程、练习、理解上的困难，但是也包括当前的感觉、 情绪和心情。然而，我们可能因为脸部受损、文化障碍或胆小羞怯而不能识 别到他人脸上的面部表情。如果我们能在文本中添加入情绪，人们的交流将 会更富有人性化。在许多流行的论坛和即时通讯服务中，人们能够使用一组 图片来表达交流者的情绪。 e - m a i i 正取代着纸质信件，免费网络视频在冲击着电话消费，而以m s n 、 i c q 和腾迅q q 为代表的新型通讯工具也逐渐成为人们即时交流、信息沟通的 重要选项它们在共同引领我们进入网络交际的q 时代。q q 在人们交流中 也承担了极其重要的角色。q q ，即o i c q ，是由i c q 衍生出的中文网上工具。 由以色歹u m i r a b i l s 公司于1 9 9 6 年开发出来，短短七年内迅速风靡全球，成为 使用频率最高的网上即时通讯工具。 q q 面部表情图j i - 的识别研究 在这种生存方式中，一种由符号拼凑杂糅使用的q q 网络表情也应运而 生。现实生活中的人际沟通，表情互动是润滑剂；在互联网和手机的虚拟空 间里，“网络表情 和“手机表情”远比现实生活中人们的表情更为生动和 丰富，也更具备文化研究意义。在社会变迁的背景下，语言是富有时代特色 的社会符号。q q 表情符号作为随新媒体出现的一种特殊语言方式，体现了当 代社会生活的某种特色。青年大学生既是表情符号的创造者和传递者，又是 表情符号的受众。因此，关注大学生的这种特殊的语言行为对我们深入了解 当前青年大学生的生活状况有着重要意义。 在初始阶段，q q 表情符号与e - r e a l1 、手机短信中的情感表达在形式上并 无二致均是以a s ci i 符号为媒介，最大限度地利用计算机键盘的符号及 w o r d 内置的“插入符号 进行不同形式的组合，构造出各具特色、生动形象 的表情符号。最早的网络符号笑脸：一) 出现在1 9 8 2 年9 月9 日美国卡内基大 学网站的一个公告牌上，之后不同的表情符号陆续产生。网络表情符号开始 由表现面部表情的一些符号又衍生出表示其他事物的一些符号，内容涉及人 类活动的诸多方面，以及与其相关的事物，如动物植物，人体动作等。2 0 0 6 年3 月广发银行以一则“借钱何必看脸色”的广告列举了几十种表情，使得 表情符号以直观的表情图片在公共广告中出现。不难看出，网络表情符号正 以其超强的生命力快速繁衍，并主要通过互联网迅速传播，逐渐成为一种新 的语言辅助表现形式。 网络表情符号是一种用于交流情绪和感情的从属性符号，包括了人的基 本姿态和基本礼节动作，如握手、亲吻和拥抱、微笑等，以及面部表情符号 和体态符号，主要由年轻人群创造和使用。而网络表情符号的产生、传播和 扩散，均有其特定的社会文化意义。 1 8 国内表情研究的现状 到目前为止，关于表情分析与识别的研究工作可以分为基于心理学的和 基于计算机识别的两类。近2 0 年来，基于心理学在表情及其判别研究上也有 不少成果。面部表情作为情绪研究的一个客观指标，一直为心理学界所重视。 孟昭兰等“确定婴儿面部表情模式的初步尝试”( 1 9 8 5 ) 的研究，证实 面部表情具有先天程序化的特点和跨文化的普遍性，并得到了中国婴儿几种 较好的基本面部表情模式。 王垒、孟昭兰对“成人面部表情及其判断的初步探讨 ( 1 9 8 6 ) ，发现成 人与婴儿的面部表情之间有很大的连续性，进一步验证了面部表情具有跨文 化的先天性。 彭聃龄等关于们隋境线索和面部线索在表情判断中的作用”( 1 9 8 5 ) 的研 硕士学位论文 究，发现综合面部线索和情境线索会有助于提高判断的准确率。 乔建中关于“不同类型的表情和不同强度的表情在判断中的作用”( 1 9 8 9 ) 研究，结果表明，面部表情和身段表情的相对重要性依不同类别情绪的判别 而异。上半部脸和下半部脸都是