CN109907762A - 一种测量听觉神经表征精准性的系统 - Google Patents
一种测量听觉神经表征精准性的系统 Download PDFInfo
- Publication number
- CN109907762A CN109907762A CN201910078958.5A CN201910078958A CN109907762A CN 109907762 A CN109907762 A CN 109907762A CN 201910078958 A CN201910078958 A CN 201910078958A CN 109907762 A CN109907762 A CN 109907762A
- Authority
- CN
- China
- Prior art keywords
- signal
- sound
- ffrs
- components
- fine structure
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
Abstract
本发明公开了一种测量听觉神经表征精准性的系统,其特征在于,包括交互平台、信号转换模块、信号播放模块及数据采集分析模块;其中,所述交互平台,用于声音信号的处理与呈现,并将声音数字信号发送给所述信号转换模块;所述信号转换模块,用于将收到的声音数字信号转换为模拟信号发送给所述信号播放模块;所述信号播放单元,用于对收到的声音模拟信号进行播放;所述数据采集分析模块,用于采集被测试者的头皮EEG活动数据,并将采集的EEG活动数据根据每次声音信号呈现的时间点进行分段并对齐叠加,获得最终的FFRs;然后,然后从FFRs中分离出精细结构成分与包络成分,并根据得到的精细结构成分与包络成分得到刺激‑反应相关性值。
Description
技术领域
本发明属于认知学领域,涉及频率追随反应(frequency following responses,FFRs),具体涉及一种利用窄带噪声刺激诱发频率追随反应测量听觉神经表征精准性的系统,用于测量声音信号精细结构在中枢的神经表达精准性。
背景技术
频率追随反应是一种听觉中枢神经元群体对中低频声音信号周期性成分的锁相反应。FFRs主要起源于听觉中脑下丘,近年也有证据表明存在来自听皮层的贡献。总体而言,FFRs体现了大脑对声音信号的早期加工特性。
采用人类头皮电记录、动物体表的听觉稳态反应记录与侵入式的电生理记录手段,均能方便地获取FFRs数据。FFRs能被多种声音信号诱发,既包括较为简单的纯音和谐波刺激,也包括在时间和频域上携带丰富信息的自然语音及音乐等。FFRs本身的潜伏期、幅值及锁相精准性等指标与受试者诸多听觉感知行为表现密切相关。已有相当一部分研究利用FFRs对听觉加工过程中的一些经典现象进行了神经基础的解读,例如双耳加工去掩蔽效应、基于经验与学习的可塑性现象、注意等认知活动的调节作用、听觉损伤与老龄化带来的影响等。尤其值得注意的是,近年已有相当多的实验证据表明FFRs异常与轻度认知障碍、自闭症、注意缺陷多动障碍等认知功能疾病相关。一种观点认为,FFRs异常对应的声音信号表征精准性异常体现了一种弥散性的神经功能障碍,可能涉及中脑下丘及听皮层等多个脑区内及脑区间连接的病变。这种病变的出现早于行为学上的认知功能改变,因此FFRs可以作为一种认知功能障碍的早期诊断标准。但是,目前依旧缺乏一种系统且稳定的测量范式。
当声音信号抵达外周听觉系统时,会首先被耳蜗基底膜上的一系列滤波器分解为窄带信号,后者又可被进一步分解为随时间快速震荡的时间精细结构(temporal finestructure,TFS)成分与反映声音信号波幅变化的包络(envelope)成分。通常认为,TFS的加工与声音信号的空间定位及噪声环境下的语音感知相关,而包络成分则主要负责承载语音内容。TFS和包络成分所携信息的成功编码均依赖听觉中枢系统加工早期阶段对这两个成分的精准表达。因此,通过对中枢听觉系统对声音信号精细结构成分和包络成分分别进行的神经表达的精准性进行探究,有利于更全面地理解中枢听觉系统的功能状态。
但是,在前人研究当中,FFRs的分析往往使用特定频率段的幅值作为信号质量的考察指标,对FFRs表征精准性的衡量缺乏体现;且所使用的纯音谐波等简单的声音刺激无法很好地在实验室环境模拟自然环境中常见声音信号精细结构及包络成分的复杂性。另一方面,若使用语音等复杂声音信号作为FFRs的诱发刺激,由于不可避免地会引起被试对语音内容等进行更为高级的认知加工过程,所诱发的FFRs也将受高级认知活动的影响,无法单纯地用于衡量中枢听觉系统对声音信号的表征精准性。因此,本发明旨在寻找一种复杂度适中、且在数据分析时能有效提取精细结构成分和包络成分的FFRs诱发范式,以形成一套客观地测量中枢听觉系统对声音信号不同成分表征精准性的系统。
发明内容
针对现有技术中存在的问题,本发明的目的在于利用窄带噪声诱发FFRs的方法,建立一套测量听觉神经表征精准性的系统。
发明人的研究表明,窄带噪声能稳定地在人类及动物被试中诱发FFRs,且窄带噪声的精细结构和包络成分引起的FFRs能被分开,具体表现为不同频段的能量分布。FFRs的精细结构和包络成分与声音信号的对应成分高度相关,并表现出了不同的双耳特性和抗噪能力,与听觉行为学结果有很好的对应。因此,在衡量声音信号在听觉中枢早期加工阶段的精准表达方面,窄带噪声引起的FFRs是一个稳健且应用广泛的指标。
本发明的技术方案为:
一种测量听觉神经表征精准性的系统,其特征在于,包括交互平台、信号转换模块、信号播放模块及数据采集分析模块;其中,
所述交互平台,用于声音信号的处理与呈现,并将声音数字信号发送给所述信号转换模块;
所述信号转换模块,用于将收到的声音数字信号转换为模拟信号发送给所述信号播放模块;
所述信号播放单元,用于对收到的声音模拟信号进行播放;
所述数据采集分析模块,用于采集被测试者的头皮EEG活动数据,并将采集的EEG活动数据根据每次声音信号呈现的时间点进行分段并对齐叠加,获得最终的FFRs;然后,然后从FFRs中分离出精细结构成分与包络成分,并根据得到的精细结构成分与包络成分得到刺激-反应相关性值。
进一步的,所述交互平台以三种形式完成对声音信号的处理及呈现:a)首先随机生成一段白噪声,然后使用数字滤波器根据所需滤波参数生成一定时长的窄带噪声作为目标信号;b)首先随机生成一段白噪声,然后使用数字滤波器根据所需滤波参数生成一定时长的窄带噪声作为目标信号;在该目标信号呈现的同时,持续播放一随机生成的白噪声作为背景信号;c)在单声道声音信号起始时间点中加入不同长度的空白信号;然后生成目标信号和背景信号,并设置目标信号与背景信号的双耳时间差。
进一步的,所述交互平台设置目标信号与背景信号的双耳时间差的方法为:设置左耳领先t毫秒且刺激主观空间位置在左边90°,设置右耳领先t毫秒且刺激主观空间位置在右边90°,以及设置双耳时间差为0的目标信号与背景信号。
进一步的,所述交互平台按照形式a)生成声音信号并转换为声音数字信号发送给所述信号转换模块,所述信号播放单元对收到的声音模拟信号进行重复播放多次,所述数据采集分析模块对采集的EEG活动数据根据每次声音信号呈现的时间点进行分段并对齐叠加,获得形式a)对应的FFRs;所述交互平台按照形式b)生成声音信号并转换为声音数字信号发送给所述信号转换模块,所述信号播放单元对收到的声音模拟信号进行重复播放多次,所述数据采集分析模块对采集的EEG活动数据根据每次声音信号呈现的时间点进行分段并对齐叠加,获得形式b)对应的FFRs;所述交互平台按照形式c)生成声音信号并转换为声音数字信号发送给所述信号转换模块,所述信号播放单元对收到的声音模拟信号进行重复播放多次;所述数据采集分析模块对采集的EEG活动数据根据每次声音信号呈现的时间点进行分段并对齐叠加,获得形式c)对应的FFRs;然后从上述得到的三项FFRs中分别分离出高频的精细结构成分与低频的包络成分,并根据得到的精细结构成分与包络成分计算得到刺激-反应相关性值。
进一步的,所述目标信号的中心频率500Hz、带宽1/3倍频程、时长200ms、单耳声强75dB SPL;所述背景信号为宽带噪声,单耳声强75dB SPL。
进一步的,利用希尔伯特变换提取所述包络成分和所述精细结构成分。
进一步的,对所述包络成分和所述精细结构成分进行滤波提纯,分离出高频的精细结构成分与低频的包络成分;然后根据高频的精细结构成分与低频的包络成分计算得到刺激-反应相关性值。
本系统包括交互平台、信号转换模块、信号播放模块及数据采集分析模块。其中,所述交互平台,用于声音信号的处理与呈现,并将声音数字信号发送给所述信号转换模块;所述信号转换模块,用于对收到的声音数字信号转换为模拟信号发送给所述信号播放模块;所述信号播放单元,用于对收到的声音模拟信号进行播放;所述数据采集分析模块,用于采集被测试者的头皮EEG活动数据,并将采集的EEG活动数据根据每次声音信号呈现的时间点进行分段并对齐叠加,获得不同声音刺激条件下引发的FFRs。然后从FFRs中分离出高频的精细结构成分与低频的包络成分,并根据得到的精细结构成分与包络成分得到刺激-反应相关性值。
所述系统将以以下三种形式完成对声音信号的处理及呈现:
(1)安静条件FFRs测量:利用交互模块随机生成一段白噪声,随后使用数字滤波器根据所需滤波参数生成一定时长的目标窄带噪声,通过信号转换模块处理、经由播放单元中的气导耳机向被试者的双耳呈现,声强固定为75dB SPL,重复播放4000次。
(2)测量噪声环境下的FFRs:在目标窄带噪声呈现的同时,背景持续播放一个由交互模块随机生成的白噪声,声强根据实际研究的信噪比参数确定,重复播放4000次。
(3)双耳听觉去掩蔽范式下的FFRs:通过交互平台对声音信号进行修饰,具体为在单声道声音信号起始时间点中加入不同长度的空白信号,从而在信号播放单元进行声音播放时,被试者双耳听到的声音信号将存在时间差;分别改变目标窄带噪声与背景噪声的双耳时间差,造成被试者在知觉上的空间分离或重合效应。其中,左耳领先3ms的声音刺激主观空间位置在左边90°,右耳领先3ms的声音刺激主观空间位置在右边90°。目标窄带噪声与背景噪声双耳时间差不一致时,二者被知觉为空间分离;双耳时间差一致时,二者被知觉为空间重合。
与现有技术相比,本发明的积极效果:
窄带噪生诱发的频率追随反应能够有效衡量中枢听觉系统在不同听觉环境下对声音信号精细结构及包络成分的表征精准性。本发明的早期研究表明,该方法操作简单,信号稳定,可重复性强,且不需要被试者进行行为任务。通过本发明对范式进行系统性优化后,有望在临床诊断领域发挥重要作用。
附图说明
图1为测量方法流程图;
(a)人类头皮频率追随反应(FFR)记录示意图;(b)窄带噪音物理信号(中心频率=500Hz,带宽=1/3倍频程)示意图,(c)物理信号经过快速傅里叶变换(fast Fouriertransform,FFT)的长时程频谱图,灰色表示经由希尔伯特变换提取的声音信号包络成分,(d)人类头皮频率追随反应波形示意图,(e)频率追随反应的频谱图,体现了频率追随反应的包络成分及精细结构成分在频谱上的分离。
图2刺激-反应相关性计算流程图。
图3原始信号、精细结构成分以及包络成分的刺激-反应相关性示例;图中黑线为声音信号对应成分,灰线为频率追随反应(FFRs)对应成分;
(a)原始信号、(b)精细结构成分、(c)包络成分的刺激-反应相关性示例。
具体实施方式
下面结合具体实施实例对本发明进行进一步描述。
1.声音刺激
窄带噪声信号:中心频率500Hz,带宽1/3倍频程,时长200ms,单耳声强75dB SPL。背景噪声:宽带噪声(0–10kHz),持续播放,单耳声强75dB SPL(信噪比为0)。见图1(b)(c)。
实验包含三个测试阶段:(1)安静环境下的窄带噪声FFRs;(2)背景噪声环境下的窄带噪声FFRs;(3)窄带噪声FFRs的双耳去掩蔽(知觉空间重合条件,知觉空间分离条件)。每个测试阶段中的每个条件各重复4000次。试次间隔约300ms,每个条件约持续30min。
2.实验流程
操作流程分为两个阶段:准备阶段和测试阶段。在准备阶段,被试坐在安静的环境中(消声电磁屏蔽室最理想),为被试安装电极。所用电极为银氯电极,直径4mm,填充导电膏后用医用胶带固定(采集电极:颅顶;参考电极:左侧乳突;接地电极:脑门中央)。见图1(a)。
3.数据采集与分析
记录声音刺激起始前50ms到声音刺激结束后50ms间的EEG信号。对每种条件下所得4000次信号进行叠加平均、基线校正等预处理后,获得声音信号诱发的FFRs。
为了测量神经反应对声音刺激物理属性的保真性(fidelity),本发明引入了刺激-反应相关性(stimulus-to-response correlation)指标分别计算频率追随反应中精细结构成分与包络成分对声音刺激的保真性。利用希尔伯特变换提取声音刺激的包络成分和精细结构成分,而FFRs的精细结构与包络成分经过滤波方式提纯,分离出高频(400–600Hz)的精细结构成分与低频(0–200Hz)的包络成分(见图1.d、e)。在理想延迟范围内,通过互相关函数计算得到的最大相关系数被定义为一段神经反应与其对应物理成分的刺激-反应相关性。对声音信号和对应FFRs的精细结构成分及包络成分分别计算刺激—反应相关性,刺激-反应相关性值用于衡量FFRs的精细结构成分和包络成分对声音信号对应成分的表征精准性(见图2,图3)。
4.质量控制
剔除无效试次:波形观察中出现明显眼动等干扰的试次。
尽管为说明目的公开了本发明的具体实施例和附图,其目的在于帮助理解本发明的内容并据以实施,但是本领域的技术人员可以理解:在不脱离本发明及所附的权利要求的精神和范围内,各种替换、变化和修改都是可能的。因此,本发明不应局限于最佳实施例和附图所公开的内容。
Claims (7)
1.一种测量听觉神经表征精准性的系统,其特征在于,包括交互平台、信号转换模块、信号播放模块及数据采集分析模块;其中,
所述交互平台,用于声音信号的处理与呈现,并将声音数字信号发送给所述信号转换模块;
所述信号转换模块,用于将收到的声音数字信号转换为模拟信号发送给所述信号播放模块;
所述信号播放单元,用于对收到的声音模拟信号进行播放;
所述数据采集分析模块,用于采集被测试者的头皮EEG活动数据,并将采集的EEG活动数据根据每次声音信号呈现的时间点进行分段并对齐叠加,获得最终的FFRs;然后,然后从FFRs中分离出精细结构成分与包络成分,并根据得到的精细结构成分与包络成分得到刺激-反应相关性值。
2.如权利要求1所述的系统,其特征在于,所述交互平台以三种形式完成对声音信号的处理及呈现:a)首先随机生成一段白噪声,然后使用数字滤波器根据所需滤波参数生成一定时长的窄带噪声作为目标信号;b)首先随机生成一段白噪声,然后使用数字滤波器根据所需滤波参数生成一定时长的窄带噪声作为目标信号;在该目标信号呈现的同时,持续播放一随机生成的白噪声作为背景信号;c)在单声道声音信号起始时间点中加入不同长度的空白信号;然后生成目标信号和背景信号,并设置目标信号与背景信号的双耳时间差。
3.如权利要求2所述的系统,其特征在于,所述交互平台设置目标信号与背景信号的双耳时间差的方法为:设置左耳领先t毫秒且刺激主观空间位置在左边90°,设置右耳领先t毫秒且刺激主观空间位置在右边90°,以及设置双耳时间差为0的目标信号与背景信号。
4.如权利要求2或3所述的系统,其特征在于,所述交互平台按照形式a)生成声音信号并转换为声音数字信号发送给所述信号转换模块,所述信号播放单元对收到的声音模拟信号进行重复播放多次,所述数据采集分析模块对采集的EEG活动数据根据每次声音信号呈现的时间点进行分段并对齐叠加,获得形式a)对应的FFRs;所述交互平台按照形式b)生成声音信号并转换为声音数字信号发送给所述信号转换模块,所述信号播放单元对收到的声音模拟信号进行重复播放多次,所述数据采集分析模块对采集的EEG活动数据根据每次声音信号呈现的时间点进行分段并对齐叠加,获得形式b)对应的FFRs;所述交互平台按照形式c)生成声音信号并转换为声音数字信号发送给所述信号转换模块,所述信号播放单元对收到的声音模拟信号进行重复播放多次;所述数据采集分析模块对采集的EEG活动数据根据每次声音信号呈现的时间点进行分段并对齐叠加,获得形式c)对应的FFRs;然后从上述得到的三项FFRs中分别分离出高频的精细结构成分与低频的包络成分,并根据得到的精细结构成分与包络成分计算得到刺激-反应相关性值。
5.如权利要求2所述的系统,其特征在于,所述目标信号的中心频率500Hz、带宽1/3倍频程、时长200ms、单耳声强75dB SPL;所述背景信号为宽带噪声,单耳声强75dB SPL。
6.如权利要求1所述的系统,其特征在于,利用希尔伯特变换提取所述包络成分和所述精细结构成分。
7.如权利要求1或6所述的系统,其特征在于,对所述包络成分和所述精细结构成分进行滤波提纯,分离出高频的精细结构成分与低频的包络成分;然后根据高频的精细结构成分与低频的包络成分计算得到刺激-反应相关性值。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910078958.5A CN109907762A (zh) | 2019-01-28 | 2019-01-28 | 一种测量听觉神经表征精准性的系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910078958.5A CN109907762A (zh) | 2019-01-28 | 2019-01-28 | 一种测量听觉神经表征精准性的系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109907762A true CN109907762A (zh) | 2019-06-21 |
Family
ID=66960855
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910078958.5A Pending CN109907762A (zh) | 2019-01-28 | 2019-01-28 | 一种测量听觉神经表征精准性的系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109907762A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113143293A (zh) * | 2021-04-12 | 2021-07-23 | 天津大学 | 一种基于脑电源成像的连续语音包络神经夹带提取方法 |
| CN113274000A (zh) * | 2021-07-19 | 2021-08-20 | 首都医科大学宣武医院 | 认知障碍患者双耳信息整合功能的声学测量方法及装置 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107007919A (zh) * | 2017-04-11 | 2017-08-04 | 北京大学 | 一种听觉注意ppi调节系统 |
| CN107510451A (zh) * | 2017-08-07 | 2017-12-26 | 清华大学深圳研究生院 | 一种基于脑干听觉诱发电位的音高感知能力客观评估方法 |
-
2019
- 2019-01-28 CN CN201910078958.5A patent/CN109907762A/zh active Pending
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107007919A (zh) * | 2017-04-11 | 2017-08-04 | 北京大学 | 一种听觉注意ppi调节系统 |
| CN107510451A (zh) * | 2017-08-07 | 2017-12-26 | 清华大学深圳研究生院 | 一种基于脑干听觉诱发电位的音高感知能力客观评估方法 |
Non-Patent Citations (2)
| Title |
|---|
| WANG QIAN等: ""Auditory midbrain representation of a break in interaural correlation"", 《J NEUROPHYSIOL》 * |
| WANG QIAN等: "Modelling envelope and temporal fine structure components of frequency-following responses in rat inferior colliculus", 《TECHNOLOGICAL SCIENCES》 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113143293A (zh) * | 2021-04-12 | 2021-07-23 | 天津大学 | 一种基于脑电源成像的连续语音包络神经夹带提取方法 |
| CN113274000A (zh) * | 2021-07-19 | 2021-08-20 | 首都医科大学宣武医院 | 认知障碍患者双耳信息整合功能的声学测量方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Etard et al. | Decoding of selective attention to continuous speech from the human auditory brainstem response | |
| Purcell et al. | Human temporal auditory acuity as assessed by envelope following responses | |
| US8313441B2 (en) | Neuroaudiological central auditory test apparatus and method of differentiation of the neural correlates in PTSD, TBI, autism, ADHD, et al | |
| CN110947076B (zh) | 一种可进行精神状态调节的智能脑波音乐可穿戴设备 | |
| Clinard et al. | Neural representation of dynamic frequency is degraded in older adults | |
| CN103054587B (zh) | 基于听觉稳态响应的言语测听方法 | |
| CN110947075A (zh) | 基于脑波音乐的个性化精神状态调节系统及调节方法 | |
| Palmer et al. | N1-P2 recordings to gaps in broadband noise | |
| Won et al. | Relationship between behavioral and physiological spectral-ripple discrimination | |
| Bertoli et al. | Novel sounds as a psychophysiological measure of listening effort in older listeners with and without hearing loss | |
| Roman et al. | Relationship between auditory perception skills and mismatch negativity recorded in free field in cochlear-implant users | |
| CN107510451B (zh) | 一种基于脑干听觉诱发电位的音高感知能力客观评估方法 | |
| CN109907762A (zh) | 一种测量听觉神经表征精准性的系统 | |
| Dajani et al. | Human auditory steady-state responses to changes in interaural correlation | |
| Ignatious et al. | Study of correlation between EEG electrodes for the analysis of cortical responses related to binaural hearing | |
| Gohari et al. | Neural correlates of concurrent sound perception: A review and guidelines for future research | |
| Xu et al. | Different binaural processing of the envelope component and the temporal fine structure component of a narrowband noise in rat inferior colliculus | |
| Attina et al. | A new method to test the efficiency of cochlear implant artifacts removal from auditory evoked potentials | |
| Jeng et al. | Relative power of harmonics in human frequency-following responses associated with voice pitch in American and Chinese adults | |
| Horne et al. | Importance of Vowel Harmonic Phase and Fundamental Frequency for Envelope Following Responses | |
| Stoody et al. | 2 Basic Instrumentation, Acquisition, and Recording Considerations | |
| Ahzan | Multi-frequency Electrophysiological Estimates of Auditory Temporal Acuity | |
| Schebsdat | Neural Correlates of Binaural Interaction Using Aggregate-System Stimulation in Cochlear Implantees | |
| WO2025245922A1 (zh) | 一种基于eeg信号评估声源定位能力的方法 | |
| Strahm | The maturation of the acoustic change complex in response to iterated ripple noise in normal-hearing toddlers |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190621 |
|
| RJ01 | Rejection of invention patent application after publication |