神经振荡影响快速言语识别的时间瓶颈.pdf
《神经振荡影响快速言语识别的时间瓶颈.pdf》由会员分享,可在线阅读,更多相关《神经振荡影响快速言语识别的时间瓶颈.pdf(7页珍藏版)》请在咨信网上搜索。
1、心理科学进展 2023,Vol.31,No.9,15531559 2023 中国科学院心理研究所 Advances in Psychological Science https:/doi.org/10.3724/SP.J.1042.2023.01553 1553 研究构想(Conceptual Framework)神经振荡影响快速言语识别的时间瓶颈*高雅玥1 范家宁1 王 茜2 邓丽芳1(1北京航空航天大学人文社会科学学院心理学系,北京 100191)(2北京大学心理与认知科学学院,行为与心理健康北京市重点实验室,麦戈文脑科学研究所,北京 100871)摘 要 大脑可以快速地加工信息以应对不断
2、变化的环境,其典型范例之一是快速言语识别。自然言语的瓶颈速率约为 812 音节/秒,与神经振荡的 alpha 速率相近。此外,已有研究表明 alpha 振荡可以调控知觉过程的时间分辨率。那么,alpha 振荡速率是否影响快速言语识别的时间瓶颈?其作用机制是什么?本研究利用心理物理学方法和认知神经科学方法,从现象和机制两个方面考察 alpha 振荡如何影响快速言语识别的时间瓶颈。在现象方面,本研究将验证快速言语识别的时间瓶颈与 alpha 振荡速率的一致性。在机制方面,本研究将研究 alpha 振荡速率如何影响快速言语识别的行为表现,又如何调控大脑对言语信号的神经加工过程。本研究希望找到快速言语
3、识别的神经机制,从而更深入地理解大脑的快速加工过程,并进一步探讨神经振荡调控大脑时间分辨率的相关机制。关键词 听知觉,言语识别,快速言语,时间分辨率,alpha 波 分类号 B842.2 1 问题提出 在日常生活中,大脑需要在短时间内快速处理大量信息,如驾驶汽车在车流中穿梭,如快速浏览音视频并实时获取信息。这种快速信息处理的能力让我们能够适应不断变化的环境。大脑如何快速地处理信息?其速率瓶颈来自于何处?这是心理学与神经科学的前沿热点问题,至今尚未被完全破解。快速言语的识别是快速信息处理的一个典型例子。人类的自然语速大约为每秒 25 个音节(Reynolds&Givens,2001;Greenb
4、erg et al.,2003;Hyafil et al.,2015;Ding et al.,2017;Molinaro et al.,2021)。即使将语速提高到原来的 3 倍,即每秒812 个音节左右,人们仍然可以理解言语含义。收稿日期:2023-03-19*国家自然科学基金(32200862)资助,中国科学院心理研究所经费资助(GJ202005),北京航空航天大学人文社科青年骨干支持项目。通信作者:高雅玥,E-mail:gao_ 但如果语速提高到原来的 3 倍以上,对言语的识别将显著下降(Dupoux&Green,1997;Peelle et al.,2004;Nourski et al
5、.,2009)。这一时间瓶颈与神经振荡 alpha 振荡速率相一致。那么,快速言语识别的时间瓶颈与大脑的 alpha 振荡频率有何关联?这一关联如何解释了大脑实时加工的基本机制?本研究拟使用脑电图、脑磁图和经颅电刺激,考察快速言语识别的时间瓶颈是否取决于大脑的alpha 振荡频率,并进一步揭示大脑处理信息的时间分辨率及其背后的神经机制。本研究将从三个方面考察 alpha 振荡影响快速言语识别的机制:(1)Alpha 振荡的速率是否与快速言语识别的时间瓶颈相一致?(2)Alpha 振荡的速率如何调控快速言语的识别行为?(3)Alpha 振荡的速率如何影响快速言语的神经加工过程?2 国内外研究现状
6、 2.1 Alpha 振荡调控大脑的时间分辨率 近年来的研究表明,alpha 振荡的速率影响大脑处理过程的时间分辨率(Mathewson et al.,2009;in 1554 心 理 科 学 进 展 第 31 卷 Dugu et al.,2011;Cecere et al.,2015;Keitel et al.,2019;Grabot&Kayser,2020)。例如,前人研究表明,两个相邻的视觉光点有时会被感知为分隔的两个光点,有时则会被感知为连续的一个光点。这种双光点知觉融合的临界间隔约为 90130 ms左右,换算到频域约为 812 Hz,与 alpha 频率范围一致。并且,对于每个被试
7、来说,其知觉融合的临界间隔与自身 alpha 振荡的频率一致。即被试自身 alpha 振荡频率越高,或者说一个 alpha 振荡周期时间越短,双光点知觉融合的临界间隔就越小;反之,若被试自身 alpha 振荡频率越低,即一个alpha 振荡周期时间越长,则双光点知觉融合的临界间隔就越大(Samaha&Postle,2015;Ronconi&Melcher,2017)。同时,通过经颅电刺激调整 alpha振荡的速率,也可以改变知觉融合的临界间隔。对于两个相同时间间隔的刺激,当 alpha 振荡较快时,两个相邻刺激的间隔会超过一个 alpha 周期,则被试可以分辨其为两个刺激;反之,如果alpha
8、 振荡较慢,两个刺激都落在同一个 alpha 周期内,被试便难以分辨这两个刺激。此外,alpha 振荡的频率同样影响了其他瞬时知觉的时间分辨率。例如,时间相近的视觉和听觉信号可能会被知觉为前后独立或同时发生的信号,这取决于视觉和听觉两信号呈现的间隔时间。研究表明这一间隔时间的阈限也与 alpha 振荡的速率有关,即间隔短于一个 alpha 周期的视觉和听觉信号,得以在同一周期内被加工,更容易被知觉为同时发生(Cecere et al.,2015)。又例如两点的闪烁可能被知觉为不同的运动模式,也取决于闪烁前后帧的间隔时间是否长于一个 alpha 周期,从而导致前后两帧是否在同周期内被整合(She
9、n et al.,2019)。这意味着,alpha 振荡的频率会影响大脑如何处理时间相近的信息,即落在一个alpha 周期内的多个刺激难以被分辨。特别要说明的是,alpha 振荡速率对时间分辨率的影响不仅限于视觉过程。如上所述,视听整合的阈限时间也与 alpha 振荡的周期时间有关(Cecere et al.,2015)。这意味着,alpha 振荡的影响可能不仅限于知觉过程,而是涉及到更高级的识别整合过程。那么,各感觉通道,包括听觉通道,其时间分辨率都会受到 alpha 振荡的调控。此外,已有研究也表明,听觉通道的识别过程也会受到alpha 振荡的影响。比如,alpha 振荡的相位会影响听者在
10、噪音下的声音识别(Neuling et al.,2012),或影响听者对不同声音信号的差异辨别(Hansen et al.,2019)。又比如,alpha 振荡会帮助连续言语信号的分割过程(Shahin&Pitt,2012),从而为言语识别打好基础。因此,言语识别的时间瓶颈很可能也取决于 alpha 振荡的速率。2.2 Alpha 振荡影响快速言语识别的机制 Alpha 振荡影响快速言语识别的机制是一个复杂过程。上述研究已经表明,alpha 振荡影响大脑时间分辨率的关键在于不同刺激是否落在同一个 alpha 振荡周期内。也就是说,大脑可以充分加工间隔超过一个 alpha 周期的相邻两刺激,而难
11、以同时加工落在一个 alpha 周期的两个刺激。这意味着大脑知觉识别的时间瓶颈与 alpha 振荡的频率有关(Samaha&Postle,2015;Ronconi&Melcher,2017)。因此,在快速言语识别领域,相邻音节是否落在同一个 alpha 振荡周期内,很可能是识别行为的关键。此外,另一个需要解决的重要问题是,alpha振荡主要调控快速言语识别的哪个过程,是初级的感觉过程,还是更高级的知觉组织过程。现有的研究证据大多支持 alpha 振荡的调控并不基于初级感觉过程。原因有如下两点。其一,有研究发现,在言语加速到难以理解的 4 倍速情形下,听皮层的神经振荡与言语包络仍然有很高的相关性
12、。换言之,即使言语速度加快到不可理解的程度,初级听皮层仍可以很好地追随语音包络。这说明初级感觉皮层可以很好地追随快速言语信号的 波 动(Nourski et al.,2009;Mukamel et al.,2011)。这种简单的言语-神经追随不受语速的影响,并不是快速言语识别的时间瓶颈。因此,alpha 振荡对快速言语识别的调控更可能是一种高层的、后期的调控,会影响信息的后期整合。其二,根据认知神经方向的现有研究,并不只有初级感觉皮层能够表征言语信号的时间信息。在其他皮层,例如听觉皮层和运动皮层都能捕捉到对言语包络的追随(Wilson et al.,2004;Du et al.,2014;Ch
13、eung et al.,2016;Assaneo&Poeppel,2018;Park et al.,2018)。而左侧额下回广泛参与言语加工过程,也可能是快速言语处理的关键脑区之一(Adank&Devlin,2010;Peelle et al.,2010;Vagharchakian et al.,2012)。这些研究结果都说明 alpha 振荡影响快速言语识别的调控机制应当是涉及高级认知脑区的in 第 9 期 高雅玥 等:神经振荡影响快速言语识别的时间瓶颈 1555 复杂过程。最后要说明的是,当前对 alpha 振荡调控刺激分辨的神经机制的研究中存在一定不足。由于现有研究其刺激都是光点或短音,
14、持续时间过短,因此无法得知 alpha 振荡如何影响对刺激本身的神经表征(Cecere et al.,2015;Samaha&Postle,2015;Ronconi&Melcher,2017;Shen et al.,2019;Grabot&Kayser,2020)。即是说,在研究过程中首先需要描绘刺激本身的神经表征,之后才能探究alpha 振荡怎样对此神经表征产生影响。那么,对于言语这种长时程信号,可以很方便地记录并解码其相应的神经表征。此外,已有研究表明,言语的神经表征可受调节并体现言语可懂度(Ding&Simon,2012;Mesgarani&Chang,2012;Brodbeck et
15、al.,2018;Zou et al.,2019)。因此,后续研究应当利用长时程言语信号及其神经表征,可以进一步阐释 alpha 振荡如何调控刺激自身的神经表达,从而影响知觉过程的时间分辨率。3 研究构想 为了深入研究 alpha 振荡影响快速言语识别的神经机制,我们提出了以下三个相互关联且层层深入的研究内容:(1)研究 1 验证大脑 alpha 振荡是否影响快速言语识别的时间瓶颈,即两者是否一致。(2)若研究 1 已经证实 alpha 振荡影响了言语识别的时间瓶颈,研究 2 将详细阐述 alpha 振荡如何调控快速语言识别的行为表现,并重点考察这种调控是否基于高级认知过程。(3)在研究 1、
16、研究 2 的基础上,研究 3 将进一步在脑活动层面上考察,alpha 振荡的调控作用如何反映在言语的神经表征中。3.1 研究 1:快速言语识别的时间瓶颈与 alpha振荡频率的一致性 已有研究表明,自然语速约 25 字/秒,而大脑最快可以识别约 3 倍语速的快速言语(Dupoux&Green,1997;Ghitza&Greenberg,2009;Vagharchakian et al.,2012;Borges et al.,2018)。即是说,言语识别的时间瓶颈约为每秒 812 个音节(字),恰好与alpha 振荡的频率区间相重合。如果个体快速言语识别的时间瓶颈与其固有的 alpha 振荡的频
17、率相一致,则这一结论能够为 alpha 振荡是否可以调控言语识别行为提供核心证据。因此,研究 1 设计了两个实验来验证快速言语识别的时间瓶颈是否与 alpha 振荡的频率相一致。研究 1 的子实验 1 假设快速言语识别的时间瓶颈与大脑 alpha 振荡的频率相一致,且具有相关关系。研究 1 预计招募较大规模被试,分别测量被试对快速言语识别行为的时间瓶颈(即言语识别的阈限速率)和被试自身固有的 alpha 振荡频率,并考察这两个变量是否具有相关性。即个体固有的 alpha 振荡频率越快,是否其言语识别的阈限速率就越快。研究 1 使用不同语速(812 Hz)的言语材料,记录被试在不同语速下的识别率
18、,并计算 50%识别率对应的阈限语速。同时,将使用脑电图记录并提取每个被试的 alpha 振荡峰值频率。将行为与电生理数据相结合,子实验 1 考察被试的行为阈限与 alpha 振荡频率是否相一致。研究 1 的子实验 2考察大脑 alpha 振荡的频率是否能实时预测言语识别的时间瓶颈。即是说,在每个被试内,试次前的 alpha 振荡频率应可以预测该试次的行为结果。对于每个被试,使用10Hz 的快速言语进行多次实验,并记录其言语识别正确率。根据行为结果,不同试次分为不同正确率的几组,分别计算并比较各组试次前的 alpha振荡频率。子实验 2 想考察,是否行为成绩越好的试次,其 alpha 振荡的频
19、率就越快。研究 1 的两个实验都希望证实 alpha 振荡的速率与被试快速言语识别的时间瓶颈一致。3.2 研究 2:Alpha 振荡调控快速言语识别的行为表现 研究2旨在具体考察alpha振荡如何调控快速言语识别的行为表现。具体而言,研究 2 将使用较慢(8 Hz)和较快(12 Hz)的 alpha 振荡频率,记录快速言语识别的行为成绩,考察更快的 alpha 振荡是否带来更好的快速言语识别表现。同时,研究2也将考察alpha振荡对时间瓶颈的调控是否基于高层认知过程。如前所述,alpha 振荡对快速言语识别的影响,更可能是一种不基于感觉皮层的、高层的、后期的调控。为了验证这种高层调控的假设,研
20、究 2 设计了两个实验来考察 alpha 振荡是否不需要基于听皮层就可以调控快速言语的识别过程。研究 2 的子实验 1 想探究,操控被试的 alpha振荡频率,是否可以调控快速言语识别的行为表现。具体来讲,子实验 1 在 10 Hz 的快速言语前,使用听觉纯音操控被试的 alpha 振荡频率,呈现in 1556 心 理 科 学 进 展 第 31 卷 更快(12 Hz)或更慢(8 Hz)频率的纯音,并测试被试对快速言语的识别成绩。子实验 1 想考察更快的 alpha 振荡(12 Hz)是否帮助言语识别,使其行为表现更好?子实验 1 希望证实,改变 alpha 振荡频率的确可以调控快速言语识别的行
21、为表现。在子实验 1 的基础上,研究 2 的子实验 2 进一步考察 alpha 振荡频率如何从高层级调控快速言语识别的行为表现。子实验 2 使用经颅电刺激来诱发 alpha 振荡,考察不同脑区,即听皮层与非听皮层,其 alpha 振荡调控言语识别的效果。具体而言,在 10 Hz 的快速语音前,使用更快(12 Hz)或更慢(8 Hz)的 alpha 振荡来电刺激被试。刺激脑区选择 4 个脑区,中心电极根据脑电系统放置于左听皮层(T7)、右听皮层(T8)、中央运动区(Cz)、前额叶(FPz)4 个位置。子实验 2 想探索:1)同子实验 1,更快的 alpha 振荡(12 Hz)是否带来更好的言语识
22、别成绩?2)不同脑区的 alpha 振荡是否都可以达到此调控效果,如前额叶的 alpha 振荡是否也可以调控言语识别行为?子实验 2 希望证明alpha 振荡的速度调控了大脑快速言语识别的行为表现,且这种调控基于高级的认知过程。3.3 研究 3:Alpha 振荡调控大脑对言语加工的神经过程 前两个研究证实 alpha 振荡调控快速言语识别的行为表现,接下来,研究 3 将在神经层面讨论 alpha 振荡如何影响大脑对快速言语的加工过程。如前所述,即使加快到不可理解的言语,初级听皮层仍可以很好地追随其语音包络(Nourski et al.,2009;Mukamel et al.,2011)。因此,
23、alpha 振荡对言语神经表征的调控应基于高级认知过程而影响信息的后期整合,更可能体现在言语神经表征上。解码言语的神经表征,可以体现言语可懂度、言语理解等高级过程(Zion Golumbic et al.,2013;Leonard et al.,2016;Brodbeck et al.,2018;Zou et al.,2019)。在此基础上,研究 3 将从两方面进行分别考察:1)对于快速言语识别的神经过程,alpha振荡是影响对语音信号的简单时间追随,还是影响更高级的认知过程,以更复杂的方式体现在言语神经表征上?2)Alpha 振荡对快速言语神经表征的调控在初级听觉皮层,还是在更高级功能的脑区
24、如运动皮层和前额叶皮层?研究3将在神经层面探讨alpha振荡如何影响大脑对快速言语的加工过程。同之前的研究,研究 3 同样使用 10 Hz 的快速言语刺激,记录被试对言语的识别成绩。同时,研究 3 使用脑磁图记录被试对言语信号的神经响应,并使用时间响应函数解码言语信号的神经表征。将所有试次随机分为两集合,作为训练集和测试集。对于训练集的各试次,根据试次前 alpha 振荡的快慢,分为高频组和低频组,并训练分类器对不同组别的神经表征进行分类。接下来,用训练好的分类器将测试集试次根据其神经表征进行再分组,考察两组的言语识别成绩是否有差异。研究 3 想探寻:1)神经表征过程如何受 alpha 振荡调
25、控,即 alpha 振荡频率分类的神经表征在波形、峰值、潜伏期等指标上有哪些差异。2)这种调控是否与快速言语识别相关,即高频 alpha 组对应的神经表征特征,是否可以预测更好的识别成绩。3)考察这种 alpha振荡对言语神经表征的调控,在不同脑区是否有所差别。研究 3 希望说明,alpha 振荡如何影响言语信号的神经编码方式,从而帮助快速言语的识别。4 理论建构 本研究提出 alpha 振荡影响快速言语识别时间瓶颈的模型假设(图 1)。在一个 alpha 振荡周期内,大脑难以同时加工两个刺激(Samaha&Postle,2015;Ronconi&Melcher,2017)。因此,当语速慢于
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 神经 振荡 影响 快速 言语 识别 时间 瓶颈
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,个别因单元格分列造成显示页码不一将协商解决,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【自信****多点】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【自信****多点】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。