区分言语和非言语声音的脑区
– 大脑两半球（主要是左半球）颞上沟的中部起重要作 用，它位于上颞横回的腹侧面。
• Jeffrey Binder及其同事（2000）的fMRI研究比较 了非言语声音的不同类型。
– 非言语的声音包含了没有系统的频率和振幅的噪音或 者频率范围在50到2400Hz之间的声音。言语的声音包 含反向的单词发音，伪单词声音（如“sked”是“desk” 的伪单词）和真正单词的声音。 – 相对于噪音，调频的声音能激活位于两侧上颞横回的 尾部区域。而对言语声音敏感的区域则更靠前，在颞 上沟里面或附近。 – 同时，Blinder发现这些区域不参与对单词进行语义的 处理，因为反向单词、伪单词和真单词都能同等程度 的激活这些区域。
互 动 激 活 模 型
• 词的水平
字母水平
（James McCelland 和David Rumelhart）
特征水平
• 该模型建立在三个假设的基础之上。
– 感知过程发生在三个水平之上 – 加工同时发生在这三个水平之上。 – 三种水平之间存在着交互作用，该交互作用也可能起 激活作用，也可能其抑制作用。
决策鬼
（“listen” for loudest shout in pandemonium to identify input）
• 这个模型是以特征分析为基础，将模式识别过程 分为四个层次，每个层次都有一些“鬼”来执行 某个特定的任务，这些层次顺序地进行工作，最 后达到对模式的识别。
– 映象鬼——对外部刺激进行编码，形成刺激的映象。 – 特征鬼——对刺激的映象进行分析，即将它分解为各 种特征。 – 认知鬼——监视各种特征鬼的反应，每个认知鬼各负 责一个模式。 – 决策鬼——根据认知鬼的喊叫，选择喊叫声最大的那 个认知鬼所负责的模式，作为所要识别的模式。
• 这些病人听不懂口语，但是却能正常加工其它声音。 因为这种病人可以进行语言加工的其他过程，所以 他们的问题看起来只限于听力或者语音缺陷。
• 语音进入耳中，首先对其进行加工的是海 希耳氏回 。海希耳氏位于大脑两半球的颞 上平面，上颞横回的上部和中部，它是原 发听觉区。 • PET和fMRI的研究发现大脑两半球的海希 耳氏回和上颞横回能够被言语和非言语声 音激活，这也就是说，上颞横回对于声音 知觉很重要，但并不只限于语言加工。
书面语言的知觉
• 三种主要的书写系统
– 字符文字：汉语 – 音节文字：日语 – 字母文字：英语
• dog狗いぬ
字母识别模型
泛魔识别模型（O.G.Selfridge，1959）
映像鬼
特征鬼
（decode specific featrues）
认知鬼
（“shout”when receive certain combinations of features）
– 例如，语音会随着语境的变化而变化，所以即使以同样的音位开 头，音节“bo”的发音就和音节“bi”的发音也还是很不一样。 “bi”的发音和音节“di”的发音很相似，虽然它们两者开头的音 位是不一样。这也就是说，当音位后面带有“i”和“o”时它们的 发音会有变化，但是即使如此听者还是能分辨出“b”和“d”。
英语元音
前 i（beet） 高 l（bit） o（bode） e（baby） 中 ε（bБайду номын сангаасt） ^（but） 中 后 u（boot） U（book）
低
a（palm）
英语辅音
发音方 式
闭塞音 清 浊 摩擦音 清 浊 塞擦音 清 浊 鼻音 流音 滑音
W（win） m（mat） n（nat） l（late） r（rate） y（yet）
主要内容
→口语的知觉 →书面语言的知觉
→字母识别 →词汇通达 →句子加工
→言语的产生
语音成分
• 音位——能够区分意义的最小语音单位。
–例如，在英语中，/b//p/是两个不同的音位，因为可 以通过它们区分“big”“pig”两个不同意义的词。
• 音位规则 • 韵律——在说话过程中语调、重音、停顿、 速度和持续时间的变化。
语音产生方式
• 所有语言的发音都是通过言语器官的运动产生的。 气流从肺部发出，通过声道进入口腔或鼻腔。 • 语音主要因气流是否受阻以及受阻的部位和方式 不同而各异。
• 元音：让气流以不受阻的方式从肺部发出的。 – 根据发音部位（口腔前部、口腔中部，空腔后部）或舌的 位置高低来做区分。 • 辅音：通过让气流在某个部位受阻而发出。 – 发音部位 – 发音方式 – 发声：如果声带是闭合的，气流必须从声门处强行通过， 致使声带颤动，产生浊音；如果声带是分开的，气流通过 时不会受到丝毫的阻碍，产生清音。
• 低水平影响高一级水平上的激活，高一级水平也 同样影响着低水平上的激活。 • 词优势效应——使用速示仪向被试呈现一个词 （word），一个非词（owrd）或者一个字母（d 或者k）。刺激被撤除后，让被试回答是否d或者k。
– 真词＞非词；真词＞单个字母
• 向被试呈现字母或者类似字母的符号，对 这些符号的初级知觉分析会激活负责视觉 加工的双侧脑区，例如纹状皮质和纹状外 视觉皮层的邻近区。 • 但是这些区域的激活并不只限于类似字母 的符号。
• 对音位的知觉依赖于语言－音位的语境。 也就是说，音位识别随语境的不同而变化。
界限模糊
• Captain What do you mean？
语音表征
• 语音表征存在离散单位
– 声谱特征 – 音位、音节、发音方式
• 其他反对的理论
口语中词汇加工的神经机制
• 从动物实验、脑损伤病人的研究及以人类 为研究对象的PET和fMRI的研究中发现， 声音感知的重要部位是大脑颞叶皮质上部。 • 从上世纪开始，已经发现颞上回两侧受损 的病人会出现“纯词聋”症状。
发音部位
双唇音
p（pat） b（bat） f（fat） V（vat） θ（thin） （then）
唇齿音 齿音
齿龈音 腭音
t（tack） d（dig） s（sat） z（zap）
软腭音 喉音
k（cat） g（get） h（hat）
受语境制约的变化
• 音位没有恒定性特征，我们可以用变异性 来描述一个音位的声学特征随语境的变化 而变化的现象。