System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本公开涉及音频设备和操作音频设备的方法的领域,并且具体地涉及利用基于编解码器信息的处理的音频设备及相关方法。
技术介绍
1、在音频通信中,越来越多的音频设备(诸如无线音频设备)竞争以共享相同的可用“通话时间”和可用的有效带宽,这使得在可用带宽中容纳所有音频设备成为一项挑战。这可能导致延迟、掉线,并且通常更高可能性具有糟糕的音频通信体验。为了在可用带宽中同时容纳更多音频设备,可以降低音频的比特率。例如,音频信号的编码和解码是用于通过降低音频的比特率来减小音频信号大小的技术。然而,编码和解码处理可能降低音频信号的质量,例如,由于有损压缩和/或不良特征,诸如伪影。在保持音频信号的质量的同时对音频信号进行编码和解码是具有挑战性的。对于整个工作日都在使用和/或佩戴他们的音频设备的通信部门的音频设备用户(诸如在呼叫中心工作的用户)来说,这可能尤其是一个问题。通过提供低质量的通信和终端用户体验,会导致用户注意力不集中,并且因此降低工作效率。然而,在使用低或非常低比特率的同时还能保持高音频质量是具有挑战性的。
技术实现思路
1、因此,需要利用基于编解码器信息的处理的音频设备和用于操作音频设备的方法,音频设备和操作音频设备的方法可以减轻、缓解或解决现有缺点,并且可以提供改进的信号处理。
2、公开了一种音频设备。音频设备可以被配置为用作接收器设备。音频设备包括接口、音频扬声器和麦克风。音频设备包括一个或多个处理器和存储器。一个或多个处理器包括解码器和第一信号处理器。第一信号处理器被配置为根
3、公开了一种操作被配置为用作接收器设备(诸如音频设备)的音频设备的方法。该方法包括从发送器设备获得音频输入信号,其中,音频输入信号是基于一个或多个编码器参数编码的编码后的音频输入信号。例如,该方法包括使用解码器和一个或多个解码器参数对音频输入信号进行解码以用于提供解码器输出信号。该方法包括获得指示一个或多个编码器参数和/或一个或多个解码器参数的编解码器信息。例如,该方法包括使用第一信号处理器并且基于编解码器信息处理解码器输出信号以用于提供第一信号处理器输出信号,其中,例如,使用第一信号处理器处理解码器输出信号包括:例如通过应用基于编解码器信息的处理的生成式模型,使用第一信号处理器处理解码器输出信号。
4、公开了一种用于训练基于生成式信号的处理的生成式模型的计算机实现的方法。该方法可以基于诸如u-net、多分辨率层、和/或编码器-解码器架构的基于扩散模型的训练。该方法包括获得包括一个或多个音频信号的音频数据集。该方法包括通过对例如基于一个或多个编码器参数编码的一个或多个音频信号进行编码以用于提供一个或多个编码后的音频信号,生成编解码器失真音频数据集。例如,该方法包括通过使用解码器和一个或多个解码器参数对一个或多个编码后的音频信号进行解码以用于提供一个或多个编解码器失真音频信号,生成编解码器失真音频数据集。该方法包括组合一个或多个音频信号与一个或多个白噪声信号以用于提供包括一个或多个白噪声音频信号的白噪声音频数据集。例如,该方法包括通过将生成式模型应用于一个或多个白噪声音频信号和一个或多个编解码器失真音频信号,来确定一个或多个估计白噪声信号和一个或多个估计音频信号。该方法包括基于一个或多个音频信号、一个或多个估计音频信号、一个或多个估计白噪声信号以及一个或多个白噪声信号中的一个或多个,来训练生成式模型。
5、公开的系统、音频设备、和相关方法提供了包括音频的输入信号的改进的信号处理。换句话说,本公开可以提供对包括音频的输入信号的改进的基于编解码器信息的处理。可以理解的是,本公开提供了包括音频的输入信号的通知信号处理。例如,本公开可以例如基于编解码器信息,提供对语音信号的通知增强。可以理解的是,本公开可以提供对包括音频的输入信号的语音增强。本公开在使用低或非常低比特率的同时还能保持高音频信号质量。这继而可以允许大量音频设备在有限的带宽上,同时保持高音频通信质量。
6、本公开的优点在于生成式方法(诸如生成式模型)的使用,避免了如在基于掩模的方法中那样仅调整原始信号的限制。相反,生成式方法允许生成新的信号。
7、有利的是,所公开的方法可以使解码后的音频信号的质量能够得到改进,诸如通过减少音频信号的不期望特征(诸如在编码和/或解码期间可能已经生成的伪影)。
8、可以理解的是,本公开可以提供改进的信号处理,诸如对信号处理管线的改进调谐。可以基于一个或多个编码器参数和/或一个或多个解码器参数改进信号处理。继而,本公开可以诸如为接收器端用户提供改进的输出信号,诸如在接收器端的改进的音频输出质量。换句话说,例如,本公开可以在呼叫或会议期间在接收器端提供改进的音频质量。
9、本公开的优点在于在发送器侧(诸如发送器音频设备)和接收器侧(诸如接收器音频设备)之间实现了改进的通信体验,诸如语音通信。例如,本公开可以为例如使用耳机、扬声器电话、和/或音视频一体机(video bar)的电话和/或电话会议提供改进的通信体验。
本文档来自技高网...【技术保护点】
1.一种被配置为用作接收器设备的音频设备,所述音频设备包括接口、音频扬声器、和麦克风,所述音频设备包括一个或多个处理器和存储器,所述一个或多个处理器包括解码器和第一信号处理器,其中,所述第一信号处理器被配置为根据基于生成式信号的处理的生成式模型进行操作,其中,所述音频设备被配置为:
2.根据权利要求1所述的音频设备,其中,所述一个或多个处理器包括音频调节器,所述音频调节器被配置为处理所述解码器输出信号以用于提供一个或多个音频特征,并且其中,使用所述第一信号处理器处理所述解码器输出信号包括:基于所述一个或多个音频特征处理所述解码器输出信号。
3.根据前述权利要求中任一项所述的音频设备,其中,所述一个或多个处理器包括被配置为确定所述编解码器信息的编解码器调节器,并且其中,获得所述编解码器信息包括:使用所述编解码器调节器确定所述编解码器信息,并且向所述第一信号处理器提供所述编解码器信息。
4.根据前述权利要求中任一项所述的音频设备,其中,获得所述编解码器信息包括:从所述发送器设备获得所述编解码器信息。
5.根据前述权利要求中任一项所述的音
6.根据前述权利要求中任一项所述的音频设备,其中,所述一个或多个处理器包括第二信号处理器,所述第二信号处理器被配置为根据基于非生成式信号的处理的非生成式模型进行操作,所述第二信号处理器被配置为处理第二信号处理器输入信号以用于提供第二信号处理器输出信号,其中,所述第二信号处理器输入信号是基于所述解码器输出信号,并且其中,所述音频设备被配置为使用所述第二信号处理器处理所述解码器输出信号。
7.根据前述权利要求中任一项所述的音频设备,其中,所述音频设备被配置为基于所述解码器输出信号确定信噪比信息,并且其中,处理所述解码器输出信号包括:基于所述信噪比信息,处理所述解码器输出信号。
8.根据权利要求6和7中任一项所述的音频设备,其中,所述音频设备包括混音器,所述混音器被配置为组合所述第一信号处理器输出信号和第二信号处理器输出信号以用于提供音频输出信号,其中,组合所述第一信号处理器输出信号和第二信号处理器输出信号是基于信噪比信息。
9.根据前述权利要求中任一项所述的音频设备,其中,所述音频设备被配置为确定用于处理所述解码器输出信号的处理方案,其中,所述处理方案包括处理的迭代次数和/或与处理的每次迭代相关联的降噪参数,并且其中,使用所述第一信号处理器处理所述解码器输出信号包括:基于所述处理方案处理所述解码器输出信号。
10.根据前述权利要求中任一项所述的音频设备,其中,所述第一信号处理器包括作为多分辨率网络的神经网络,其中,所述第一信号处理器包括信号处理编码器和信号处理解码器,其中,处理所述解码器输出信号包括:使用所述信号处理编码器扩展信道数量并降低所述解码器输出信号的时间分辨率,并且使用所述信号处理解码器降低所述信道数量并扩展所述解码器输出信号的所述时间分辨率。
11.一种操作被配置为用作接收器设备的音频设备的方法(100),所述方法包括:
12.一种计算机实现的方法(200),用于训练基于生成式信号的处理的生成式模型,其中,所述方法包括:
13.根据权利要求12所述的方法,其中,所述方法包括:
...【技术特征摘要】
1.一种被配置为用作接收器设备的音频设备,所述音频设备包括接口、音频扬声器、和麦克风,所述音频设备包括一个或多个处理器和存储器,所述一个或多个处理器包括解码器和第一信号处理器,其中,所述第一信号处理器被配置为根据基于生成式信号的处理的生成式模型进行操作,其中,所述音频设备被配置为:
2.根据权利要求1所述的音频设备,其中,所述一个或多个处理器包括音频调节器,所述音频调节器被配置为处理所述解码器输出信号以用于提供一个或多个音频特征,并且其中,使用所述第一信号处理器处理所述解码器输出信号包括:基于所述一个或多个音频特征处理所述解码器输出信号。
3.根据前述权利要求中任一项所述的音频设备,其中,所述一个或多个处理器包括被配置为确定所述编解码器信息的编解码器调节器,并且其中,获得所述编解码器信息包括:使用所述编解码器调节器确定所述编解码器信息,并且向所述第一信号处理器提供所述编解码器信息。
4.根据前述权利要求中任一项所述的音频设备,其中,获得所述编解码器信息包括:从所述发送器设备获得所述编解码器信息。
5.根据前述权利要求中任一项所述的音频设备,其中,所述编解码器信息包括编解码器类型、采样率、和比特率中的一个或多个,并且其中,使用所述第一信号处理器处理所述解码器输出信号包括:基于所述编解码器类型、所述采样率、和所述比特率中的一个或多个处理所述解码器输出信号。
6.根据前述权利要求中任一项所述的音频设备,其中,所述一个或多个处理器包括第二信号处理器,所述第二信号处理器被配置为根据基于非生成式信号的处理的非生成式模型进行操作,所述第二信号处理器被配置为处理第二信号处理器输入信号以用于提供第二信号处理器输出信号,其中,所述第二信号处理器输入信...
【专利技术属性】
技术研发人员:佩曼·莫莱,迭戈·卡维德斯·诺扎尔,
申请(专利权)人:GN奥迪欧有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。