（基础心理学专业论文）音高模式在即时回忆中的加工方式及其表征.pdf

硕士学位论文 m a s t e r st h e s i s 中文摘要 在构建言语知觉模型的过程中 言语声音的表征问题一直受到研究者们的关注 m c c l e l l a n de ta 1 1 9 8 6 2 0 0 6 n o 耐se ta 1 1 9 9 4 2 0 0 0 2 0 0 3 p a g e n o 仃i s 1 9 9 8 国外许多研究采用系列位置回忆任务 主要以元音为听觉材料 从而获知元音表征 在言语知觉模型中的地位 为了解释言语声音在短时记忆中的表征 美国认知心理 学家c r o w d e r 提出 前分类声音存储器 p r e c a t e g o d c 出a c o u s t i cs t o m g e p a s 这 一概念 他认为p a s 是一个存储声音 容量有限的记忆缓冲器 存储在里面的声音 痕迹会被随后进入的听觉信息重写 c r o w d e r 1 9 6 9 大量研究已经证实了p a s 的 存在 由于p a s 存在的证据主要来自非声调语言 英语 而且是非声调语言中的 元音和辅音 但是却没有来自声调语言的证据 即不能确定声调是否存在于p a s 中 本研究采用系列位置回忆任务 探讨了汉语普通话中音高模式 p i t c hp a t t 锄s 在 大脑中的加工方式和表征 以获知p a s 理论是否同样适用于声调语言 以及声调语 言中一些重要的音高信息 比如 声调和情绪韵律 e m o t i o l l a lp r o s o d y 是如何表 征的 本文包括两个研究 研究的逻辑是 如果实验证实了声调 或情绪韵律 具有 听觉近因效应和后缀效应 那么就可以证明声调 或情绪韵律 确实存储于p a s 中 研究一包括实验一和实验二 实验一的目的在于探讨声调是否存在听觉近因效 应 以2 0 名大学生为被试 要求被试听完一系列声调项目后 对项目进行系列口 头报告 实验一的结果发现声调系列确实存在听觉首因效应和近因效应 实验二的 目的在于考察声调是否存在后缀效应 不同的2 0 名被试参与实验 且听觉系列末 尾附加了一个声音后缀 当后缀呈现完后 被试被要求对项目进行系列口头报告 考虑到韵母和声调的紧密关系 实验二中的后缀刺激设计有四种类型 分别是 后 缀与最后一个系列位置的项目只有声调一致 只有韵母一致 声调和韵母都一致 无任何一致性 以实验一的结果为基线水平 将实验二中的每种后缀类型结果分别 与实验一的结果作比较 结果发现 在四种后缀类型条件下 声调系列都存在后缀 效应 实验一与实验二的结果发现声调系列存在听觉近因效应和后缀效应 这一结 果支持了实验假设 声调存储于p a s 中 同时 本研究在四种后缀类型条件下都观 察到声调具有后缀效应 这说明了声调在短时记忆中的表征非常微弱 很容易受到 相似语音的干扰 而在英语中元音似乎受到后缀的影响不大 因为前人研究发现 厂b 酬d a g 和 j a i l l a g a 不存在听觉的后缀效应 c r o w d e r 1 9 7 1 d a m 曲 b a d d e l e y 1 9 7 4 1 硕士擘位论文 m a s t e r st h e s i s 研究二的目的在于获知情绪韵律是否存储于p a s 中 研究二包括实验三和实验 四 实验三的目的在于探讨情绪韵律听觉系列是否具有近因效应 以2 0 名大学生 为被试 实验要求被试听完一系列带有四种不同情绪 包括高兴 悲伤 生气 疑 惑 的双字词后 再进行书面回忆 结果发现 情绪韵律存在听觉近因效应 实验 四的目的在于考察情绪韵律听觉系列是否存在后缀效应 2 0 名不同的被试参与实 验 其任务与实验三类似 唯一不同之处在于 听觉系列的末尾附加了一个带有情 绪的双字词作为后缀 被试听到这个后缀之后再进行书面回忆 后缀类型有两种 一种是后缀与最后一个系列位置项目的情绪一致 另一种是后缀与最后一个系列位 置项目的情绪不一致 以实验三的结果为基线水平 将实验四中两种后缀类型下的 结果分别与实验三的结果作比较 结果表明 只有当后缀与最后一个系列位置项目 的情绪不一致时 情绪韵律才产生显著的后缀效应 而当后缀与最后一个系列位置 项目的情绪一致时 情绪韵律没有产生显著的后缀效应 这表明后缀效应的产生取 决于后缀与最后一个系列位置项目的关系 两个研究结果支持了汉语的声调和情绪韵律都存在于p a s 中 但本研究的某些 结果与前人研究结果不太一致 前人的研究结果表明 在英语中 当后缀与最后一 个系列位置的项目押韵时 最后一个项目的回忆成绩会提高 押韵起到一个提供回 忆线索的作用 在研究一中并没有观察到类似的结果 这有可能说明了声调在短时 记忆中加工的特殊性 关键词 音高模式 声调 情绪韵律 系列位置回忆 前分类声音存储器 听 觉近凶效应和后缀效应 硕士学位论文 m a s t e r st h e s i s a b s t r a c t t h er e p r e s e n t a t i o n so fs p e e c hs o u n d sh a v ea l v a y sa t t m c t e da t t e n t i o no fm a n y c o g n i t i v ep s y c h o i o g i s t si nt h ep r o c e s so fm o d e ld e v e l o p m e n t m c c i e l l a n de ta 1 19 8 6 2 0 0 6 n o r r i se ta 1 19 9 4 2 0 0 0 2 0 0 3 p a g e n o r s 19 9 8 t h es e 打a lr e c a l lt a s kh a s b e 饥c o m m o t l l yu s e dt 0e x p l o r et h er 0 i e so fv o w e l sp l a y e di ns p e e c hp e r c e p t j o n a p r e c a t e g o r i c a la c o u s t i cs t o r a g e p a s h a sb e e np r o p o s e d c r 0 w d e r 19 6 9 i no r d e rt o i n t e 叩r e tp e r c e p t u a lr e p r e s e n t a t i o n so fs p e e c hs o l j l l d s f a si sal i m i t e dc a p a c i t yb u 每e r s t o r ei nw 垴c ht r a c e s 羽 eo v e 硎t t e nb ys u c c e s s i v ea u d i t o f ye v e n t s m o r e o v e r m a n y s u b s e q u e n tr e s e a r c h e r sh a v ev e r i 6 e dt h ee x i s t e n c eo fp a s t 1 1 ee v i d e n c ef o rap a si s m o s t l yi l l t e 叩r e t e db yv o w e l sa n dc o n s o n a n t si nn o n t o n a ll a n g u a g e e s p e c i a l l ye n g j i s h b u tn o t 丘 o ma n yt o n a l1 a n g u a g e s 1 no t h e rw o r d s w h e t h e rm e1 e x i c a lt o n e se x i s ti 1 1p a s i ss t i l lu n k n o w n t h eg o a lo ft h j ss t u d yi st ou s e l es e a jr e c a l lt a l s kt oe x p l o r et 1 1 e p r o c e s s i n ga i l dr 印r e s e n t a t i o no fp i t c hp 甜e m ss u c ha l sl e x i c mt o n e s 锄de m o t i o n a l p r o s o d yi nc 1 1 i n e s e t h et h e s i s 洫c l u d e s v os n i d i e s a n de a c hs m d yh a s v oe x p e r 妇e 力t s t h e 0 2 i co f t h es t t l d i e si sa sf o l l o w s i fl e x i c a lt o n e sa n de m o t i o n a jp r o s o d yi n d u c ea u d i t o r yr e c e n c y e f r e c t 锄ds u m xe f l 宅c t l e nl e x i c a lt o n e sa 1 1 de m o t i o n a jp r o s o d ya r es t o r e di nf a s t h e 丘r s ts t u d yc o n t 面n se x p e 血i l e n tla 1 1 de x p e r i m e n t2 e x p e r i m e n t1w 孙 d e s i g n e dt 0i n v e s t i g a t ew h e t h e rl e x i c a lt o n e si n d u c er e c e n c ye f i e c t 2 0u n d e r g r a d 眦t e s r er e q u i r e dt ol i s t e nt oas e r i a jo fl e x i c a lt o n e sa n dt h e ni m m e d i a t e l yv e r b a l l vr e p o r t e d t l l ei t e m s r e s u l t ss h o w e dt l l a tl e x i c a jt o n e s2 a v er i s et op m a c v 卸dr e c e n c ve 艉c t s e x p e m e n t2w a sd e s i 擘m e dt os e e v h e t h e ri e x i c a lt o n e si n d u c es u f 五xe f 王b c t a 力o t h e r2 0 m l d e r 翠a d u a t e s e r et o l dt ol i s t e nt oas e r i a lo fl e x i c a l t o n e s w i t has u 衔xa tt 1 1 ee n do f e a c hs 耐a 1 p a r t i c i p a n t sw e r ea s k e dt 0v e r b a l i yr e p o r tt 1 1 es e r i a la ss o o na s 也es u 确x d i s 印p e a r e d c o n s i d e r i n gl e x i c a jt o n e sh a v ec l o s er e l a t i o n s h i p 州t l lv o w e l s f o u r 帅e so f s u m x e sw e r ep r e p a r e da tt h ee n do fe a c hs e 而甜 1 h ef i r s tt y p eo fs u 伍xs h a r e dl e x i c a l t o n e s 州t l lm ef i n a li t e m s t 1 1 es e c o n dt es h a u r e dv o w e l s v i t ht h ef i 舱l i t e m s t h e 蚵r d t y p er h y m e dw i 也t l l ef i n a l i t e m a 1 1 dt l l ef b n ht p ew 嬲i r i l e v a n tt ot h ef m a li t e m t h e f o u r 咖e so fs u 衢x e sw e r ec o m p a r e d i mt h er e s u l t so fe x p e r i m c n t1 r e s p e c t i v e l y r e s u l t ss u g g e s t e dm a tl e x i c a lt o n e sh a ds u m xe 虢c t su n d e rd i 腩r e n tc o n d i t i o n s n l e r e s u l t so ft 1 1 et oe x p e r i m e n t ss h o w e dt l l a tl e x i c a lt o n e sh a db o 恤r e c e n c ye f i e c ta 1 1 d s u 锸xe f f e c t t h er e s u l t sv e 五6 e dt h a tt l l e1 e x i c a lt o n e sa r es t o r e di np i a s m a t e v e r 也e 够p e o fs u 伍x t l l er e c a l lo ft l l ef m a li t e m s 9 0 tw o r s e w l l i c hs u g g e s t e dm a tt h e r e p r e s e n t a t j o no fl e x j c a l t o n e sa r e v e a l e rt 1 1 a no t h e rs p e e c h 咖丘t si ns h o n t e 册m e m o s i n c ep r e v i o u sr e s e a r c hd i dn o tf i n ds u 行 e 丘 e c t si n b a d 地a a n 刚 m 珧a c r o w d e r 硕士学位论文 m a s t e r st h e s i s 1 9 7 1 d 孙析n b a d d e l e v 1 9 7 4 t h es e c o n ds t l l d ya i m e da ti n v e s t i g a t i n g v h e t 1 e re m o t i o n 山p r o s o d ye x i s t si np a s t h es n j d yc o n s i s t e do fe x p e r i m e n t s3a n d4 e x p e r i m e n t3 a sd e s ig n e dt os e e v h e t l l e r e m o t i o n a lp r o s o d yh a sr e c e n c ye a e c t 2 0u n d e r g r a d u a t e s v e r ea s k e dt ol i s t e nt oas e r i a l o fe m o t i o n a lp r o s o d ya n dt h e n i m m e d i a t e l y r o t ed o w nw h a tt h e yh e a r d r e s u l t s i n d i c a t e dt h a te m o t i o n a lp r o s o d yh a dr e c e n c ye f f e c t t h ep u 叩o s eo fe x p e r i m e n t4w a st o i n v e s t i g a t ew h e t h e re m o t i o n a lp r o s o d yh a l ss u 衔xe 疗 e c t p a n i c i p a n t sd i dt h es 锄et a s ka s i ne x p e r i m e n t3 t h es u 衔xw a se i t h e rc o n s i s t e n to ri n c o n s i s t e n tw i t ht h ef i n a ji t e m s e m o t i o n a li 1 1 f o m a t i o n t h er e s u l t so fe x p e r i m e n t4w e r ec o m p a u r e dw i t l lt h o s eo f e x p e m e n t3 j t 塔f o u n dt h a te m o t j o n a lp r o s o d yh a ds u 币xe a e c tw h e nt h es u 塌xw a s i n c o n s i s t e n tw i t ht h ef i n a li t e m se m o t i o n a li n f o 砷a t i o n b u tn o tw h e nt h es u m xw 嬲 c o n s i s t e n t 析t ht 1 1 e e i n a li t e m se m o t i o n a li 州b m a t i o n t h er e l a t i o n s m pb e t e e nt l l e s u 币x 锄dt h e 矗n a li t e mc o u l db et h ek e yf a c t o rc a u s i n gt h es u 伍xe 扫融c t t h ep r e s e n t 殉j d yv e r i f i e dt h a tl e x i c a lt o n e s 锄de m o t i o n a lp r o s o d yc o u l db es t o r e d i i lp a s a c c o r d i n gt op r e v i o u sr e s e a r c h as u f f i xt h a tr h y m e s 埘t 1 1t 1 1 ef i n a ji t 锄o ft h e s e r i a l lw a sf o u l l dt 0h p r o v et l l er e c a l la c c u r a c y t h er h y m e ds u 伍xh a sb e e ns u p p o s e dt o s e r v e 嬲ac u et or e c a l lt h ef i n a li t e m h o w e v e r m es 锄ep h e n o m e n o nw a sn o tf o u n df 0 r c h i n e s e e x i c a lt o n e s w 1 1 j c hi n d i c a t e das p e c i a lp r o c e s s i n go fl e x i c a lt o n e si ns h o n t e 册 m e m o k e yw o r d s l e x i c a t o n e s e m o t i o n 出p r o s o d y p r e c a t e g o c a la c o u s t i cs t o m g e s e r i a lr e c a l l a u d i t o r yr e c e n c ye f j 陀c t sa n ds u 伍xe 脆c t s 华中师范大学学位论文原创性声明和使用授权说明 原创性声明 本人郑重声明 所呈交的学位论文 是本人在导师指导下 独立进行研究工作 所取得的研究成果 除文中已经标明引用的内容外 本论文不包含任何其他个人或 集体已经发表或撰写过的研究成果 对本文的研究做出贡献的个人和集体 均已在 文中以明确方式标明 本声明的法律结果由本人承担 作者签名 焉龇 日期 砂留年石月z 日 学位论文版权使用授权书 本学位论文作者完全了解学校有关保留 使用学位论文的规定 即 学校有权 保留并向国家有关部门或机构送交论文的复印件和电子版 允许论文被查阅和借 阅 本人授权华中师范大学可以将本学位论文的全部或部分内容编入有关数据库进 行检索 可以采用影印 缩印或扫描等复制手段保存和汇编本学位论文 同时授权 中国科学技术信息研究所将本学位论文收录到 中国学位论文全文数据库 并通 过网络向社会公众提供信息服务 作者豁舅赦救 日期 如8 年乡月 日 导师签名 日期 年月 日 本人已经认真阅读 c a l i s 高校学位论文全文数据库发布章程 同意将本人的 学位论文提交 c a l i s 高校学位论文全文数据库 中全文发布 并可按 章程 中的 规定享受相关权益 回童途塞理童卮进卮 旦堂生 旦二生 旦三生筮鱼 作者签名 日期少留年 月多日 导师签名 日期 年 月 日 硕士学位论丈 m a s t e r st h e s i s 1 1 关于音高模式加工的研究 1 前言 言语信息包括超音段信息和音段信息 音段信息包括元音和辅音 超音段信息 也称作音高模式 比如 声调 语调和情绪韵律 音高作为一种超音段信息 在声学上表现为基频 f d 的变化 音高在言语加 工和理解的过程中起着重要的作用 比如 区别声调的词汇意义 传达说话人语句 中不同的情绪方面 即情绪韵律 音高在声调方面的作用被认为具有语言学意义 但是在情绪韵律方面的作用却不具有语言学意义 认知心理学家研究大脑对音高模式加工问题 主要使用行为实验法 脑损伤病 人个案法以及脑成像研究方法 大量的研究已经证实了声调的加工主要激活了左脑 区域 而情绪韵律的加工主要激活了右脑区域 r 趾 f r o i l l d i l 1 9 7 8 v a n s i d t i s 1 9 9 2 m o e n 1 9 9 3 e n ge ta j 1 9 9 6 g 锄d o u r e ta 1 1 9 9 8 2 0 0 3 l u k se ta 1 1 9 9 8 p e l le t a 1 1 9 9 9 刘丽 彭聃龄 2 0 0 4 张林军 舒华 2 0 0 6 但是有研究者却认为 右 脑负责低层次的声学分析 左脑则负责高层次音高信息的功能表征 g a n d o 屿 2 0 0 4 情绪韵律不具有语言学意义 在心理词典中就不具有内部的音系表征 所 以它属于低层次的声学特征 尽管情绪韵律不具备语言学意义 但是人们能否正确 理解言语所包含的感情色彩对有效的交流至关重要 研究汉语中音高模式与短时记忆的加工和表征问题对于深入揭示汉语言语识 别的机制具有重要意义 1 1 1 声调加工与表征的研究 汉语是一种声调语言 它通过声调的变化来区分词义 说汉语的人可以利用一 个音节发声部分的音高来区分不同的词汇 普通话有四个不同的声调 这些声调可 以附加在同样的音段信息上 尽管不是所有的音段都伴有所有四个声调 声调的加 工和表征问题是认知神经科学和心理语言学等学科共同关注的一个领域 为了揭示汉语声调在心理词典中的表征地位 周晓林等人 z h o u q u 2 0 0 4 使用跨通道启动词汇判断任务直接考察了听觉词汇识别中声调对语义激活的制约 作用 他们发现 在汉语口语词汇识别中 言语输入与词汇表征的匹配不仅包含音 段信息还包括单独的声调信息 音段信息的输入与心理词典表征的匹配可以导致相 应语义表征的激活 而声调信息的不匹配可以削弱这种音段信息的匹配效应 于是 硕士学位论文 m a s t e r st h e s i s 他们认为声调在心理词典中的表征与音段信息的表征处在不同层次上 声调的特征表征层是否存在 早在1 9 9 9 年 y e 与c o l l n j e 在她们的研究中首 次提出了 调素 t o n e m e 这一概念 研究者让被试听一些汉字刺激 并要求被 试判断其中是否包含第二声或韵母 a 她们的研究结果表明 在单字情况下 韵母 先于声调得到加工 而在成语这种强语境中 声调加工先于韵母加工 于是她们认 为在声调语言中声调的表征是独立的 称之为 调素 y e c o n i l i e 1 9 9 9 鉴于汉语中声调与韵母的紧密关系 武宁宁和舒华 2 0 0 2 使用g a t i n g 范式探 讨汉语词汇早期识别过程中声调与韵母的加工关系 g a t i n g 范式是给被试呈现逐次 增长的语音片段 让被试听写这些片段是什么字并勾出确定性等级 通过被试听写 的正确率分析 研究者发现在词汇早期识别过程中 声调的正确率要高于韵母的正 确率 如果声调与韵母加工相互依赖 它们的正确率应该一样 因此她们提出声调 可以不依附韵母优先得到加工 声调的加工和表征极可能是独立的 另外也有研究指出 声调信息的加工过程不同于切分成分 元音和辅音 的加 工过程 一般而言 左耳和右耳相比 右耳对于言语信号的反应时比较短 辨别精 度也比较高 这种右耳优势被归因为左脑对于语言加工的优势 杨玉芳 1 9 9 1 在对汉语的辅音辨别研究中也得到了右耳优势效应 然而有趣的是 左耳和右耳对 于声调的识别精度无显著差异 为了进一步了解大脑对声调加工的认知神经机制 l i 等人 2 0 0 3 运用f m 砌 技术探讨声调和韵母的加工 被试先依次听到3 个单字 然后判断目标刺激是否与 最后呈现的一个字具有相同的声调或者韵母 结果发现在单字情况下 被试判断声 调和韵母的正确率都很高 但对声调的反应要慢于韵母的反应 f m r i 图片还发现 了重要的一点 那就是被试在判断声调时 有一个单独的脑激活区 即左脑额叶下 回与前中央沟下回交接处激活程度最强 这一研究结果似乎暗示了声调与韵母的加 工有可能依赖于不同的脑区 为声调与韵母的独立表征提供了证据 汉语语言及其表义文字系统的特殊性 使得汉语字词的表征与加工的理论发展 面临着机遇和挑战 上述的研究既展现了语言加工的普遍性 又表明了语言加工的 特殊性 大多数研究者相信 在不同语言和文字系统词汇表征和加工的内在基本机 制是相同的 但是 由于语言和文字系统的特殊性决定了字形 语音和语义之间计 算性联结的效能不同 从而导致同样的内在机制应用于不同语言和文字中可能会产 生不同的实验结果 2 硕士学位论文 m a s t e r st h e s i s 1 1 2 情绪韵律加工与表征的研究 众所周知 言语是人类所特有的表达情绪的重要手段 它与面部表情以及肢体 语言结合在一起 成为辅助言语交际的工具 例如 咆哮表示愤怒 呻吟表示痛苦 笑语表示快乐等等 可见 口语中不仅包含了文字符号信息 也包含了人们特定的 心理特征 同样一句话 往往由于说话人的处理不同 所表达的意思也会不同 其 意思给听者的印象就会不同 人们如何从声音信号中提取说话人的情绪 这是认知心理学家关心的问题之 一 而人类表达情绪的方式主要依赖言语韵律的变化 因此语言认知处理领域主要 围绕大脑如何加工言语韵律进而揭示出人们提取声音中情绪的加工机制 这时 对 言语韵律的研究不再是语言学家的专利了 2 0 0 0 年 国际言语交流联合会 i s c a i n t e m a t i o n a js p e e c hc o 咖u i l j c a t i o na s s o c i a t i o n 在法国南部举办了第一届有关韵律 研究的专业会议 这个会议以 言语韵律 为主题 情绪韵律是其中一个重要的 子议题 此后该会议在世界地每两年举行一次 对情绪韵律的研究不仅吸引了心理 学家 也吸引了其他领域的研究者 包括 语言学 声学 生物学以及计算机科学 就国内而言 在情绪韵律方面研究有显著成果的主要集中在计算机科学领域 随着信息技术的高速发展和人类对计算机的依赖性的不断增强 人与人之间通过言 语来传递情绪的方式也进一步发展到了人与计算机之间的对话方式 但是如何实现 计算机的拟人化 使其能感知周围的环境 气氛 对象的态度 情感等内容 主动 地为对话对象提供最舒适的对话环境 尽量消除操作者和机器之间的障碍呢 科学 家们研究发现 在人机交互中需要解决的问题同人和人交流中的是一致的 最关键 的就是具有 情感智能 的能力 余华等 2 0 0 0 赵力等 2 0 0 4 因此计算机如 果能够更加主动地适应操作者的需要 首先必须能够识别操作者的情绪 而后再根 据情绪的判断来调整对话的方式 美国的m i t 媒体实验室的情感计算研究小组就 在专门研究机器如何通过对外界信号的采样 如 人体的生理信号 血压 脉搏 皮肤电阻等 面部快照 语音信号来识别人的各种情感 并让机器对这些情感做 出适当的反应 余华等 2 0 0 4 目前 计算机科学领域关于情绪信息处理的研究 正处在不断的深入之中 而其中语音的情绪识别因涉及到不同语种之间的差异 发 展也不尽相同 英语 日语 德语 西班牙语的语音情感分析处理都有较多的研究 而汉语语音的情感分析还处在刚起步阶段 可以看出 研究者们对情绪韵律的研究集中在情感语音识别 计算机科学以及 人工智能等领域 周洁等 2 0 0 5 而认知心理学家对情绪韵律的研究主要涉及声 学参数和情绪韵律的关系方面 s p e e c hp r o s o d yc o n f e r e n c e 2 0 0 0i nf r a n c e 3 硕士学位论文 m a s t e r st h e s i s 情绪的表达主要依赖于言语 面部表情 肢体语言三种渠道 从声音中识别情 绪主要靠韵律的变化 f d 基频 是最主要的相关声学参数 l i e b e m 猢 1 9 6 2 等 人对八种情绪进行研究 包括 无聊 自信 怀疑 恐惧 开心 客观疑问 客观 陈述 夸夸其谈 结果发现 单单f 0 的信息不足以表达确切的情绪信息 至少要 加上声音信号的振幅 锄p l i t u d e 随后w i l l i 锄a s 1 9 7 2 发现f o 的平均值和范围与生气 悲伤 恐惧的情绪紧密 相关 s t o n e 1 9 9 1 认为在一个多人说话的群体中 不同的说话人具有不同的f o 范 围以及振幅 而且不同的人会使用不同的策略来表达同一种情感 h i r o s e 1 9 9 7 则 认为即使说话人在表达态度 情感的方式不同 韵律仍然是主要的指标 m o z z i c o n a c c i 2 0 0 0 收集了全球语速的平均值 指出韵律对表达 无聊 这种情绪 的重要性 大量的研究已经证实了大脑对于情绪韵律的加工主要依赖大脑右侧 但是情绪 韵律作为一种不具备语言学意义的韵律信息 它与其他承担语义功能的韵律信息加 工是否一致 这仍是认知心理学家亟待解决的一个问题 g a n 酣o u r 等 2 0 0 3 运用恻技术在跨语言背景下探讨汉语语调和情绪知觉 的加工 语调包括陈述和疑问 情绪韵律包括高兴 生气 悲伤 实验材料由3 6 对中文句子组成 句长约3 5 个字 其中1 6 对句子里 每对句子两两之间具有相 同语调 不同情绪 另外1 6 对句子中的每对句子两两之间具有不同语调 相同情 绪 其余的4 对句子中的每对句子两两之间具有相同语调 相同情绪 要求被试在 语调任务条件下 忽略情绪 判断语调 在情绪仟务条件下 忽略语调 判断情绪 行为数据的结果发现 母语为汉语的被试比母语是英语的被试判断语调的正确率更 高 在主观评定任务难度中 汉语被试认为语调判断更简单 在两种不同任务下 汉语被试的反应时更慢 脑电定位数据结果发现 对于汉语被试而言 语调加工激 活了左脑的项叶以及大脑两半球的前额叶 而情绪加工只激活了右脑前额叶 于是 研究者他们认为 右脑主要负责加工情绪韵律 在某种程度上 情绪韵律和具有语 言学意义的韵律的加工是分离的 g 锄g d o u r 等人的脑成像研究直接探讨了情绪韵律 和语言韵律加工的认知神经机制 他们的研究结果暗示了具有语言学意义的韵律和 情绪韵律在大脑中的表征是不同的 近年来 s c l l i m e r 等人采用s 昀o p 范式探讨了语义 句法 语境 韵律等对情 绪识别的影响 2 0 0 6 年 s c l l i 册e r 等人使用e i 冲s 技术试图揭示在汉语的情绪韵律 加工中是否存在性别差异 以及弄清到底是韵律还是语义在情绪加工中占优势 实 验材料由褒义 中性 贬义三种感情色彩的词语构成 每种感情色彩的词语用匹配 4 硕士学位论文 m a s t e r st h e s i s 或者不匹配的情绪韵律念出来 匹配的情绪韵律例如 褒义词对应于高兴的情绪 中性词对应于平静的情绪 贬义词对应于生气的情绪 要求被试听到材料时 忽略 词语本身的感情色彩 判断该词的情绪韵律 或者让被试忽略词的情绪韵律 判断 词语的感情色彩 e r p 结果显示 词的情绪韵律与词义的交互作用只在女性被试上 显著 而在男性被试上的交互作用不显著 换句话说 女性被试很难忽略情绪韵律 对词汇语义的影响 但是对于男性被试而言 他们加工情绪韵律与词义加工是分离 的 研究者于是得出结论 情绪韵律的加工存在男女性别差异 女性对情绪韵律更 加敏感 s c m 姗e re ta j 2 0 0 6 从s c h i n l l e r 等人的研究中可以得到一些启示 今后 研究者在探讨情绪韵律加工问题时 应该考虑到性别因素以及语义因素 因为这两 种因素都可能对情绪韵律的加工造成影响 1 2 关于前分类声音存储器的研究 1 2 1 前分类声音存储器的相关理论 言语是人类交流的重要工具 言语的口语产生和识别很大程度上依赖于我们对 言语信息的短期存储能力 当说话人表达言语信息之后 我们要马上对其进行分析 使大脑可以整合这些刺激和随后要进入的信息 最重要的一点 我们要记住这些信 息内容的顺序位置 否则言语的意思就会发生改变 例如以下两个句子 1 d o gb i t e sm a n 2 m a n b i t e sd o g 因此 我们理解言语的能力与我们在记忆中表征系列位置的能力是紧密联系的 从上世纪5 0 年代以来 认知领域研究的热门课题之一就是短时记忆 对短时 记忆最早进行实证研究的人可追溯到e b b i n 曲a u s 在讨论前分类声音存储器之前 明确短时记忆这一概念是很有必要的 特别是在目前 许多文献中经常出现 短时 记忆 和 工作记忆 这两个概念 在一些研究者看来 这两个概念代表着相同的 含义 而且还经常可以相互替代 而另一些研究者却不这么认为 所以两个概念的 用法在不同的研究者之间并没有形成一致的观点 因此 在什么情况下用短时记忆 什么情况下用工作记忆 界限并不十分明显 从记忆研究的历史看 短时记忆 这个概念的出现要早于 工作记忆 e b b i n 曲a u s 用无意义音节作为研究材料 发 现被试在对材料读过一遍的情况下 能够记住7 个音节数 这一结果成为后来广为 人知的短时记忆的容量 而且也被很多研究者证明 但是当时并没有明确对短时记 忆和长时记忆做出界定 二十世纪五 六十年代 研究者逐渐认识到短时记忆是与 长时记忆不同的记忆系统 其容量也有很大差距 因此 短时记忆的容量就成为很 硕士学位论文 m a s t e r st h e s i s 重要的研究课题 m i l i e r 1 9 5 6 在1 9 5 6 年发表了 神奇的数字7 2 我们信息加 工能力的限制 一文 明确地提出了短时记忆的容量为7 2 后来 b a d d e l e y 等人 1 9 7 4 提出 工作记忆 的概念 人们在进行学习 记忆 思维及问题解决等高级 认知活动时 人们需要一个暂时的信息加工与存储机制 它能够保存被激活的信息 表征 以备进一步加工之用 这个机制就是工作记忆 它包括中央执行系统 c e n t r a l e x e c u t i v e 视觉空间存储器 v i s u o s p a t i a ls k e t c hp a d v s s p 和语音环路 0 h o n o l o 舀c a l l o o p 等三部分 中央执行系统负责工作记忆中的注意控制 其功能 类似于一个能量有限的注意系统 该系统负责指挥各种次级系统的活动 视觉空间 存储器对视觉图像信息进行操作 语音环路贮存与复述言语信息 在获得语言词汇 中其起重要作用 视觉空间存储器与语音环路是两个平行的子系统 s l a v es y s t e m s 工作记忆的三个组成部分共同决定了工作记忆中信息的编码 表征 存储形式 提 取以及容量等 b a d d e l e y 1 9 8 6 后来又提出补充一个新的成分 情景缓冲器 西i s o d i cb u 疵r 情景缓冲器是中央执行系统的一个子系统 与语音环路 视觉空 间存储器并列 都受中央执行系统的控制 情景缓冲器是一个能用多种维度代码储 存信息的系统 弥补了传统模型的不足 为语音环路 视觉空间存储器和长时记忆 之间提供了一个暂时信息整合的平台 可用于解释系列回忆中位置干扰的i u j 题 言 语视觉空间相互影响问题 如 言语回忆中的视觉效应 记忆组块和统一的意识 经验问题等 比较这两个概念可以看出 工作记忆从过程的角度而不是从结构的角度来看待 短时记忆 工作记忆概念较好地描述了短时记忆的非静态性质 此外 工作记忆概 念比短时记忆概念更加明确地提出了注意在存储功能中的作用 把注意包含在记忆 研究的框架之内 而传统的短时记忆概念似乎只关注存储功能的部分 注意 在 短时记忆中的作用是内隐的 两者另一个主要的区别还在于工作记忆模型对短时记 忆的工作机制提出了更具体的解释 换句话说 工作记忆 的说法代表人们对短 时记忆的一种解释 这种解释已受到绝大多数研究者的认可 以至于用 工作记忆 来代替 短时记忆 因而在很多研究文献中 工作记忆和短时记忆这两个概念几 乎是等同的 例如 短时记忆广度任务和工作记忆广度任务 工作记忆任务涉及外 显的加工成分 而短时记忆的加工成分往往是内隐的 但实际上 短时记忆任务也 有注意的参与 也有加工成分 所以从心理结构上说 二者是相同 这可能也是一 些研究者对这两个名词不作区分的原因 但是 有些情况下倾向于用 短时记忆 而在另一些情况下则倾向于用 工作记忆 正是这种状况造成了对这两个概念的 疑问 在大量的短时记忆或工作记忆的文献查阅中可以发现 在范围较为广泛的心 6 硕士学位论文 m a s t e r st h e s i s 理结构的意义上 两者常常可以互相替代 当涉及到研究范式时 两个名词的用法 就会有所差异 仅涉及静态的存储任务时 一般用 短时记忆 涉及双重任务 且具有明显的动态功能时 一般用 工作记忆 在记忆的发展研究中 解释工作 记忆广度发展的理论也能够解释短时记忆广度的发展 工作记忆广度和短时记忆广 度 其发展的机制实质是相同的 基于本研究中采用的是短时记忆中系列回忆任务 因此本文的研究和讨论中均使用 短时记忆 这个概念 b a d d l e ye ta j 1 9 8 6 2 0 0 0 李庆昱 2 0 0 6 在心理学家们研究言语的短时记忆过程中发现了一些重要现象 即系列位置效 应 t h es e r i a lp o s i t i o ne 脏c t 当人们学习一系列内容后 学习者对记忆材料的掌握 情况与材料呈现时所在的位置有关 一般先学的和后学的容易回忆 而中间的学习 材料不容易回忆 这种效应就叫系列位置效应 系列位置效应中包括两种效应 首 因效应 研m a c ye 疵c t 和近因效应 r e c e n c ye 虢c t 最先呈现的材料较容易回忆 遗忘较少 称为首因效应 最后呈现的材料最容易回忆 遗忘最少 称为近因效应 系列回忆任务就是研究系列位置效应常用的方法 先给被试呈现一系列刺激项目 再让被试按顺序将事先知觉的刺激项目报告出来 在系列位置回忆任务中 不仅是视觉刺激存在近因效应 听觉刺激也有近因效 应 在c o r b a j l i s 1 9 6 6 的实验中 他比较视觉刺激和听觉刺激的近因效应 结果发 现被试听觉的近因效应要显著优于视觉的近因效应 这个效应后来被称为 感觉通 道效应 m o d a l i t ye 艉c t 同样在系列回忆任务中 在被试听完一系列数字后 这 时加一个 s 切n 的听觉刺激 再让被试开始进行对数字的系列回忆 结果发现被 试回忆系列中最后一个项目以及倒数2 3 个项目的成绩变差了 换句话说 此时 被试的听觉近因效应减弱了 s t a n 这个词加在数字系列之后的作用如同一个后缀 这种现象被叫做 后缀效应 s u m xe 舵c t 如果把 s 切n 换成是一个纯音或者 是 嘟嘟声 被试的听觉近因效应不受影响 声音的系列回忆成绩为什么会优于 图像的系列回忆 怎么解释以上这些现象呢 19 6 9 年 c r o v d e r 首次提出了 前分类声音存储器 p r e c a t e g o r i c a la c o u s t i c s t o r a g e p a s 的概念并回答了以上的问题 c r o d e r 认为p a s 是一个独立的声音 记忆缓冲器 它只负责存储声音信息 非声音信息不能进入p a s 中 并且p a s 的 存储容量有限 输入的声音信息痕迹很快就会被随后进入的声音信息重写 o v e m l r i t t e n 在p a s 中 声音是以位置为编码方式储存的 p a s 理论的优点显而 易见 因为它简单明了 并且可以同时解释系列回忆任务中的三种现象 7 硕士学位论文 m a s t e r st h e s i s 1 2 2 来自言语声音的实验证据 自c r o w d e r 提出p a s 理论以来 许多研究者的研究证实了它的存在 b e a m a n 和m o r t o n 2 0 0 0 采用系列回忆任务比较了v c 结构 aj a 州 a 和c v 结构 b a d a v a 的听觉近因效应和后缀效应 结果发现 v c 结构的听觉近因效应 大于c v 结构的听觉近因效应 如果p a s