基于脑电信号的音色合成装置制造方法及图纸

本发明专利技术提供一种基于脑电信号的音色合成装置。该装置包括：刺激设备，配置为生成针对用户的、预定频率的刺激信号；脑电采集设备，配置为采集所述用户接收所述刺激信号后所生成的脑电信号并将所采集的脑电信号进行模数转换；处理器，配置为获得经模数转换的脑电信号中稳态诱发响应的基频和谐波幅度，并根据所述基频和所述谐波幅度计算基频和谐波幅度比；以及合成设备，配置为根据所述基频和谐波幅度比来合成音色。本装置所提供的音色可以用来播放任意声音，如果播放音乐，基本不会破坏原有作品的音乐性。因此，显著提升了用户体验。

【技术实现步骤摘要】
基于脑电信号的音色合成装置
本专利技术涉及生物医学工程领域，具体地，涉及一种基于脑电信号的音色合成装置。
技术介绍
现有的生物反馈系统通常进行以下操作：1、测量某种生理信号，例如心电、脑电、肌电等，并提取其中与某些特定生理心理活动有关的特征；2、将这些特征或者它们的变动性映射为某种视觉、听觉或者触觉刺激；3、用户接受刺激后通常会做出反应，将自己的心理和生理状态调整到某个状态。在这类系统中，生理信号特征提取和映射算法是十分关键的技术。对于将脑电(EEG)信号转换为特定声音的方案主要有以下一些。将脑电信号直接音频翻译。具体地，将脑电信号的波形视为声波进行播放。但是，因为脑电信号的主要频率在30Hz以下，十分接近或低于人耳的听阈(20-20KHz)，因此需要在频域乘上合适的系数，将其频率提高到人类可以听到的范围。将脑电信号的参数映射为声音的参数。这种方法利用脑电信号的原始值或者特征参数来控制声音或音乐合成的参数。一些方法中，首先利用单道脑波信号参数与音乐参数的映射，得到单道音乐，然后通过节拍滤波、调式滤波等步骤得到多声部合奏音乐。一些方法中，将脑电特定参数映射为声音的音高。一些方法中，用不同通道、不同频段的脑电信号能量调制出来不同的音符的能量，以产生音乐。例如，采用三个通道的脑电信号(CzC3C4)，每个通道的脑电信号采用数字滤波器滤成多个频段。对于低频段的成分，首先计算波形的峰值，然后计算每一个峰值与之前的谷值的差值。两个相邻峰值的时间间隔的倒数被定义为“实时频率”。对于高频段的成分，求其实时功率。该例中所使用的MIDI序列器包含11种声音。其中声音1对应最低频段的成分，其幅度调制音高。声音2到7对应左右两边电极(C3、C4)的中频段的成分，实时频率调制音高，峰值调制速度。声音8到11对应左右两边电极(C3、C4)高频段成分，实时功率调制音高。一些方法中，提出了根据自发脑电信号的幅度、相位等变化调节音乐的和弦等，以调节音乐的风格(flavor)。通过脑电信号调制声音出现频率。一些方法中，采用重复视觉刺激，根据诱发产生的脑电电位调节啪嗒声出现的频率，此频率在4到20次每秒间变化。一些方法中，根据某一频段脑电信号的特征生成等时间间隔的信号作为反馈。现有的上述基于脑电信号的声音合成方法和装置都试图将包含某些特定生理信息的脑电信号转化为声音，作为反馈信息向用户播放。但是，其所生成的声音非常不悦耳，甚至更接近杂乱的噪声。用户如果长期倾听这样的声音，容易感到疲劳和烦躁。
技术实现思路
为了至少部分地解决上述技术问题，根据本专利技术的一个方面，提供一种基于脑电信号的音色合成装置，包括：刺激设备，配置为生成针对用户的、预定频率的刺激信号；脑电采集设备，配置为采集所述用户接收所述刺激信号后所生成的脑电信号并将所采集的脑电信号进行模数转换；处理器，配置为获得经模数转换的脑电信号中稳态诱发响应的基频和谐波的幅度，并根据所述基频和所述谐波的幅度计算基频和谐波幅度比；以及合成设备，配置为根据所述基频和谐波幅度比来合成音色。可选地，所述刺激设备是视觉刺激设备、听觉刺激设备和/或触觉刺激设备。可选地，所述处理器进一步包括数字滤波器，其配置为对所述经模数转换的脑电信号进行滤波。可选地，所述数字滤波器进一步配置为利用典型相关分析方法对所述经模数转换的脑电信号进行空间滤波。可选地，所述处理器进一步配置为利用直接频谱分析方法获得所述经模数转换的脑电信号中稳态诱发响应的基频和谐波的幅度。其中，所述直接频谱分析方法可以包括快速傅里叶变换方法。可选地，所述处理器进一步配置为利用间接频谱分析方法获得所述经模数转换的脑电信号中稳态诱发响应的基频和谐波的幅度。其中，所述间接频谱分析方法可以包括利用回声状态网络的方法。可选地，所述脑电采集设备进一步包括滤波电路，其配置为对所采集的脑电信号进行滤波。可选地，所述脑电采集设备进一步包括放大器，其配置为对所采集的脑电信号进行放大。可选地，上述基于脑电信号的音色合成装置还包括：播放器，配置为根据所述音色播放声音。本专利技术提出的上述基于脑电信号的音色合成装置可以播放任意声音，例如用户自己喜欢的音乐。相对于现有的装置，该装置不会破坏原有声音的音乐性，总之，有效提升了用户体验。在
技术实现思路
中引入了一系列简化形式的概念，这将在具体实施方式部分中进一步详细说明。本
技术实现思路
部分并不意味着要试图限定出所要求保护的技术方案的关键特征和必要技术特征，更不意味着试图确定所要求保护的技术方案的保护范围。以下结合附图，详细说明本专利技术的优点和特征。附图说明本专利技术的下列附图在此作为本专利技术的一部分用于理解本专利技术。附图中示出了本专利技术的实施方式及其描述，用来解释本专利技术的原理。在附图中，图1是根据本专利技术一个具体实施例的基于脑电信号的音色合成装置的示意性框图。具体实施方式在下文的描述中，提供了大量的细节以便能够彻底地理解本专利技术。然而，本领域技术人员可以了解，如下描述仅涉及本专利技术的较佳实施例，本专利技术可以无需一个或多个这样的细节而得以实施。此外，为了避免与本专利技术发生混淆，对于本领域公知的一些技术特征未进行描述。脑电信号是通过放置在人头皮表面的电极采集到的生物电位，该信号通常十分微弱。脑电信号能够反映大脑的电活动情况。脑电信号包含许多成分。根据频率的不同，可将脑电信号分为alpha频段(8-15Hz)，beta频段(16-31Hz)，Gamma频段(32Hz以上)等几个成分。根据脑电诱发方式的不同，可将其分为自发脑电信号、事件相关电位、稳态诱发电位等。其中稳态诱发电位通常由指定频率的刺激诱发。稳态诱发电位通常具有较为稳定的频率特征，如稳态视觉诱发电位(SSVEP)响应通常会包含与刺激频率相同频率的基频信号和若干次谐波信号。每个个体的稳态视觉诱发响应的基频和谐波的能量比一般都不同，且它们的能量会受到不同生理或心理状态的调制。音色(timbre)是指声音的感觉特性。不同乐器或者人具有不同音色。音色的不同取决于不同的泛音，每一种乐器、不同的人以及所有能发声的物体发出的声音，除了一个基音外，还有许多不同频率(振动的速度)的泛音伴随，正是这些泛音决定了其不同的音色。泛音是基音的整数倍频的谐波。通过调节谐波的能量及其比例，就可以产生各种不同的音色。现代电子技术的发展，使得人们几乎可以任意生成各种不同音色。许多专门的音乐合成器或软件都可以合成音色，并且利用特定音色演奏音乐。本专利技术所提供的装置主要根据脑电信号合成期望的音色。用户可以根据自己的喜好选择声音，例如音乐。电子乐器或专门的软件可以用该音色播放任意乐曲。图1示出了根据本专利技术一个具体实施例的基于脑电信号的音色合成装置100。如图1所示，该基于脑电信号的音色合成装置100包括刺激设备110、脑电采集设备120、处理器130和合成设备140。刺激设备110配置为生成针对用户的、预定频率的刺激信号。预定频率的刺激信号可以使接收该刺激信号的用户的脑电中产生稳态诱发响应。其中，刺激信号的频率可以是提前任意指定的。该刺激设备110可以是视觉刺激设备，例如显示器或者LED灯。可以用计算机控制显示器按照某一特定频率闪烁。或者，可以用单片机或嵌入式系统控制LED灯按照某一特定频率闪烁。该刺激设备110也可以是听觉刺激装置，例如扬声器。可以本文档来自技高网...

【技术保护点】
一种基于脑电信号的音色合成装置，包括：刺激设备，配置为生成针对用户的、预定频率的刺激信号；脑电采集设备，配置为采集所述用户接收所述刺激信号后所生成的脑电信号并将所采集的脑电信号进行模数转换；处理器，配置为获得经模数转换的脑电信号中稳态诱发响应的基频和谐波幅度，并根据所述基频和所述谐波幅度计算基频和谐波幅度比；以及合成设备，配置为根据所述基频和谐波幅度比来合成音色。

【技术特征摘要】
1.一种基于脑电信号的音色合成装置，包括：刺激设备，配置为生成针对用户的、预定频率的刺激信号；脑电采集设备，配置为采集所述用户接收所述刺激信号后所生成的脑电信号并将所采集的脑电信号进行模数转换；处理器，配置为获得经模数转换的脑电信号中稳态诱发响应的基频和谐波的幅度，并根据所述基频和所述谐波的幅度计算基频和谐波幅度比；以及合成设备，配置为根据所述基频和谐波幅度比来合成音色。2.如权利要求1所述的装置，其特征在于，所述刺激设备是视觉刺激设备、听觉刺激设备和/或触觉刺激设备。3.如权利要求1所述的装置，其特征在于，所述处理器进一步包括数字滤波器，其配置为对所述经模数转换的脑电信号进行滤波。4.如权利要求3所述的装置，其特征在于，所述数字滤波器进一步配置为利用典型相关分析方法对所述经模数转换的脑电信号进行空间滤波。5.如权利要求1至...

【专利技术属性】
技术研发人员：吴超华，高小榕，王东兵，
申请(专利权)人：清华大学，
类型：发明
国别省市：北京;11