耳机的降噪方法、装置、电子设备及存储介质制造方法及图纸

本公开提供了一种耳机的降噪方法、装置、电子设备及存储介质，涉及音频处理技术领域，具体涉及语音处理技术领域、语音识别等技术领域。具体实施方案为：获取耳机中两个麦克风所采集声音信号之间的相关性，其中，两个麦克风包括前馈麦克风和通话麦克风；获取前馈麦克风所采集的声音信号的第一能量；根据声音信号，确定声音频谱的谱质心；根据相关性、第一能量和谱质心，对耳机进行风噪检测；响应检测到存在风噪，对耳机进行主动降噪。由此，综合考虑相关性、能量和谱质心对噪声检测的影响，通过引入谱质心，可以提升耳机对低频噪声的检测，防止由于低频信号的相关性较低，对低频噪声产生误判，从而影响主动降噪的效果。从而影响主动降噪的效果。从而影响主动降噪的效果。

【技术实现步骤摘要】
耳机的降噪方法、装置、电子设备及存储介质


[0001]本公开涉及音频处理
，具体涉及语音处理
、语音识别等
，尤其涉及一种耳机的降噪方法、装置和电子设备及存储介质。

技术介绍

[0002]主动降噪(Active Noise Cancellation，ANC)是目前蓝牙耳机大力发展的一种关键性技术，它能够让用户在嘈杂的环境里，更容易的听清耳机播放内容，提升耳机用户的使用感受，一定程度上保护用户听力。
[0003]然而在众多噪声中，风噪是比较常遇到的噪声类型，会严重影响用户使用耳机时的感官体验，很多耳机甚至会放大风噪。

技术实现思路

[0004]本公开提供了一种用于耳机的降噪方法、装置、电子设备及存储介质。
[0005]根据本公开的第一方面，提供了一种耳机的降噪方法，包括：获取样本语音，并获取待训练的耳机的降噪；将所述样本语音划分为多个样本语音片段；根据语音翻译模型对所述多个样本语音片段进行翻译，以生成多个样本文本片段；根据所述多个样本文本片段和预设条件，生成所述多个样本语音片段的标签值；以及根据所述多个样本语音片段的标签值和所述多个样本语音片段对所述耳机的降噪进行训练，以生成训练之后的所述耳机的降噪。
[0006]根据本公开的第二方面，提供了一种耳机的降噪装置，包括：获取模块，用于获取样本语音，并获取待训练的耳机的降噪；划分模块，用于将所述样本语音划分为多个样本语音片段；第一生成模块，用于根据语音翻译模型对所述多个样本语音片段进行翻译，以生成多个样本文本片段；第二生成模块，用于根据所述多个样本文本片段和预设条件，生成所述多个样本语音片段的标签值；以及训练模块，用于根据所述多个样本语音片段的标签值和所述多个样本语音片段对所述耳机的降噪进行训练，以生成训练之后的所述耳机的降噪。
[0007]根据本公开的第三方面，提供了一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行上述一方面实施例所述的耳机的降噪方法。
[0008]根据本公开第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其上存储有计算机程序/指令，所述计算机指令用于使所述计算机执行上述一方面实施例所述的耳机的降噪方法。
[0009]根据本公开的第五方面，提供了一种计算机程序产品，包括计算机程序/指令，所述计算机程序/指令被处理器执行时实现上述一方面实施例所述的耳机的降噪方法。
[0010]应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
forwordmicrophone，ffmic)和通话麦克风(talk microphone，talkmic)，其中ffmic位于耳机头部，而talkmic位于耳机杆的末端，受结构影响，talkmic的风噪小于ffmic。
[0029]进一步地，可通过两个麦克风所采集声音信号，确定声音信号之间的相关性，可选地，可基于两个麦克风所采集声音信号的频域信息进行相关性计算，以获取两个麦克风所采集声音信号的相关性。
[0030]需要说明的是，相关性可用于协助判断麦克风所采集声音信号是否存在噪声，并可协助判断噪声的类型。
[0031]S102，获取前馈麦克风所采集的声音信号的第一能量。
[0032]需要说明的是，声能是介质中存在机械波时，使媒介附加的能量，本公开实施例中的第一能量为前馈麦克风接收到的声音信号的附加能量。
[0033]在获取到麦克风所采集的声音信号后，可通过对声音信号进行处理，以获取声音信号的第一能量。
[0034]可选地，可对声音信号进行傅里叶变换，将获取频域信号，然后从频域信号中提取声音信号的第一能量。
[0035]S103，根据两个麦克风所采集的声音信号，确定声音频谱的谱质心。
[0036]需要说明的是，谱质心对于平稳噪声样本，听觉感知特征中的谱特征具有突出的优越性,其中基于Mel倒谱系数(Mel Frequency Cepstrum Coefficient，MFCC)、谱下降值、分段谱质心、分段谱质心带宽和分段谱通量能够识别目标，且具有较高的识别率和稳健性。
[0037]在本公开实施例中，可根据两个麦克风所采集的声音信号计算各自的的谱质心，并根据两个麦克风的谱质心，确定出声音频谱的谱质心，可选地，可以选取其中一个麦克风的谱质心，确定为声音频谱的谱质心。需要说明的是，该其中一个麦克风可为前置麦克风，也可为通话麦克风。可选地，可以由于前置麦克风受风噪影响较大，可以选取前置麦克风的谱质心进行风噪检测，作为声音频谱的谱质心，进而可以提高检测的准确度。可选地，也可以综合考虑两个麦克风的谱质心，对两者的谱质心进行加权，得到声音频谱的谱质心。可选地，可以比较两个麦克风的谱质心，从中选取最大值作为声音频谱的谱质心。此处不作任何限定，具体根据实际情况进行设定。
[0038]S104，根据相关性、第一能量和谱质心，对耳机进行风噪检测。
[0039]本公开实施例中，通过对相关性和第一能量分析，可以判断耳机是否存在风噪。举例来说，可将相关性和第一能量与判定阈值进行比较，响应于相关性和第一能量同时小于第一阈值，可判断耳机存在风噪。需要说明的是，风噪是由于耳机和空气撞击产生的。风噪一般集中在低频状态，而在低频状态下，相关性准确性较低。在低频状态下，无法只通过相关性来区别风噪和其他噪声，会大大影响风噪检测的准确性。由于声音频谱的谱质心可在低频状态下，准确的展示噪声的状态，因此，可以通过加入谱质心，对噪声进行辅助检测，增加噪声检测的准确性。
[0040]在本公开实施例中，在判断噪声为风噪后，还可通过第一能量来判断风噪的等级。举例来说，风噪的等级可为小风噪、中风噪和大风噪等。
[0041]S105，响应于检测到存在风噪，对耳机进行主动降噪。
[0042]在检测到风噪后，为了去除声音信号中的风噪部分，可以对耳机进行主动降噪，以降低风噪对使用者使用体验的影响。可选地，可以根据风噪的等级对耳机进行主动降噪。也
就是说，可以基于不同的风噪等级，确定不同的降噪策略，进而可以提高降噪的精准性和自适应性。
[0043]在本公开实施例中，获取耳机中两个麦克风所采集声音信号之间的相关性，前馈麦克风所采集的声音信号的第一能量，以及根据两个麦克风所采集的声音信号，确定声音频谱的谱质心，并根据相关性、第一能量和谱质心，对耳机进行风噪检测，在检测到存在耳机存在风噪时，对耳机进行主动降噪。由此，综合考虑相关性、能量和谱质心，对噪声进行检测，可以提升检测的准确性，通过引入谱质心，可以提升耳机对低频噪声的检测，防止由于低频的相关性较低，对低频噪声产生误判，从而影响主动降噪的效果。
[0044]进一步地，可将将相关性、第一能量和谱质心本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种耳机的降噪方法，包括：获取耳机中两个麦克风所采集声音信号之间的相关性，其中，所述两个麦克风包括前馈麦克风和通话麦克风；获取所述前馈麦克风所采集的声音信号的第一能量；根据所述两个麦克风所采集的声音信号，确定声音频谱的谱质心；根据所述相关性、所述第一能量和所述谱质心，对所述耳机进行风噪检测；响应于检测到存在所述风噪，对所述耳机进行主动降噪。2.根据权利要求1所述的方法，其中，所述对所述耳机进行主动降噪，包括：在降噪过程中维持所述前馈麦克风处于工作状态；将所述前馈麦克风所采集的声音信号与所述通话麦克风所采集的声音信号进行融合，生成目标声音信号。3.根据权利要求2所述的方法，其中，所述将所述前馈麦克风所采集的声音信号与所述通话麦克风所采集的声音信号进行融合，生成目标声音信号，包括：根据所述第一能量，确定风噪等级；根据所述风噪等级确定所述前馈麦克风的第一信号权重和所述通话麦克风的第二信号权重；根据所述第一信号权重和所述第二信号权重，对所述前馈麦克风所采集的声音信号和所述通话麦克风所采集的声音信号进行加权融合，生成所述目标声音信号。4.根据权利要求2所述的方法，其中，所述方法还包括：持续采集所述第一能量，以监控所述风噪等级的变化趋势；根据所述风噪等级的变化趋势，对所述第一信号权重和所述第二信号权重进行更新。5.根据权利要求3或4所述的方法，其中，所述第二信号权重与所述风噪大小成正相关。6.根据权利要求1－4任一项所述的方法，其中，所述根据所述两个麦克风所采集的声音信号，确定声音频谱的谱质心，包括：根据所述前馈麦克风所采集的声音信号，确定所述前馈麦克风对应的第一谱质心；根据所述通话麦克风所采集的声音信号，确定所述通话麦克风对应的第二谱质心；从所述第一谱质心和所述第二谱质心中选取最大值，确定为所述声音频谱的谱质心。7.根据权利要求6所述的方法，其中，所述方法还包括：针对所述前馈麦克风和所述通话麦克风中的任一麦克风，获取所述任一麦克风所采集的声音信号在目标频带各采样频点上的第二能量；获取所述目标频带的各采样频点的频点索引；根据各采样频点的所述频点索引和所述第二能量，确定所述任一麦克风对应的谱质心。8.根据权利要求1－4任一项所述方法，其中，所述根据所述相关性、所述第一能量和所述谱质心，对所述耳机进行风噪检测，包括：将所述相关性、所述第一能量和所述谱质心与各自的风噪识别条件进行比较；响应所述相关性、所述第一能量和所述谱质心分别满足各自的所述风噪识别条件，确定所述耳机存在风噪。9.一种耳机的降噪装置，包括：
第一获取模块，用于获取耳机中两个麦克风所采集声音信号之间的相关性，其中，所述两个麦克风包括前馈麦克风和通话麦克风；第二获取模块，用于获取所述前馈麦克风所采集的声音信号的第一能量；确定模块，用于根据所述两个麦克风所采集的声音信号，确定声音频谱的谱质心；检测模块，用于根...

【专利技术属性】
技术研发人员：苏梦娜，
申请(专利权)人：上海小度技术有限公司，
类型：发明
国别省市：