用于渲染的对象和环境相对水平控制制造技术

技术编号:37722698 阅读:15 留言:0更新日期:2023-06-02 00:23
一种装置,包括被配置为执行以下操作的部件:获得对象轨道和环境轨道;获得控制值,该控制值被配置为控制对象轨道和环境轨道的相对水平;估计对象轨道与环境轨道之间的泄漏;基于控制值和泄漏,确定至少一个泄漏水平增益控制值;以及将至少一个泄漏水平增益值应用于对象轨道和环境轨道中的至少一项,至少一个泄漏水平增益值的应用使得经渲染的音频信号是基于将至少一个泄漏水平增益控制值应用于对象轨道和环境轨道中的至少一项。轨道和环境轨道中的至少一项。轨道和环境轨道中的至少一项。

【技术实现步骤摘要】
用于渲染的对象和环境相对水平控制


[0001]本申请涉及用于渲染的对象和环境相对水平控制的装置和方法。

技术介绍

[0002]预计3GPP IVAS为移动通信带来对象和环境音频表示。对象音频信号通常能够表示用户的语音分量和在捕获设备周围的音频场景内的任何环境分量两者。这与其目标是衰减任何环境分量并只关注语音分量的上一代设备和标准显著不同。
[0003]可意识到,为了产生音频场景的逼真表示,环境分量应能够被再现。此外,一些用户更喜欢能够听到通话中的环境分量以便体验对方的周围环境。然而,一些用户可能更喜欢先前的衰减环境音频分量的方法。
[0004]因此,希望用户被给予进行这两者的机会,通常作为设置默认对象和环境水平差异的用户可选预设置。

技术实现思路

[0005]根据第一方面,提供了一种装置,其包括被配置为执行以下操作的部件:获得对象轨道和环境轨道;获得控制值,该控制值被配置为控制对象轨道和环境轨道的相对水平;估计对象轨道与环境轨道之间的泄漏(leakage);基于控制值和泄漏,确定至少一个泄漏水平增益控制值;以及将至少一个泄漏水平增益值应用于对象轨道和环境轨道中的至少一项,至少一个泄漏水平增益值的应用使得经渲染的音频信号是基于将至少一个泄漏水平增益控制值应用于对象轨道和环境轨道中的至少一项。
[0006]控制值可以被配置为控制以下中的一项:对象轨道和环境轨道的相对水平;相对于环境轨道的水平的对象轨道的水平;以及相对于对象轨道的水平的环境轨道的水平。
[0007]对象轨道可以包括对象音频信号,环境轨道可以包括环境音频信号。
[0008]该部件可以被配置为:生成经渲染的音频信号,所生成的经渲染的音频信号包括以下中的至少一项:基于环境音频信号和被应用于对象音频信号的至少一个泄漏水平增益的音频信号;基于对象音频信号和被应用于环境音频信号的至少一个泄漏水平增益的音频信号;或者基于被应用于对象音频信号的至少一个第一泄漏水平增益和被应用于环境音频信号的至少一个第二泄漏水平增益的音频信号。
[0009]被配置为生成经渲染的音频信号的部件可以被配置为:输出经渲染的音频信号。
[0010]被配置为获得被配置为控制对象轨道和环境轨道的相对水平的控制值的部件可以被配置为:接收用户输入,该用户输入包括以下中的至少一项:对象轨道增益值;环境轨道增益值;环境轨道到对象轨道增益值(ambience track to object track gain value)或对象轨道到环境轨道增益值(object track to ambience track gain value);确定用于音频信号再现的相对水平值,该相对水平值包括以下中的一项或多项:对象轨道增益值;环境轨道增益值;环境轨道到对象轨道增益值或对象轨道到环境轨道增益值。
[0011]被配置为估计对象轨道与环境轨道之间的泄漏的部件可以被配置为确定以下中
的一项:对象轨道的能量的量在环境轨道内;环境轨道的能量的量在对象轨道内;对象轨道与环境轨道之间的相关性;以及环境轨道与对象轨道之间的相关性。
[0012]对象轨道可以包括定义至少一个空间参数的对象元数据部分,环境轨道可以包括也定义至少一个空间参数的环境元数据部分,其中,被配置为估计对象轨道与环境轨道之间的泄漏的部件可以被配置为:确定环境元数据部分的至少一个空间参数与对象元数据部分的至少一个空间参数之间的相关性。
[0013]被配置为基于控制值和泄漏,确定至少一个泄漏水平增益控制值的部件可以被配置为:确定至少一个泄漏水平增益控制值与控制值之间的映射函数,该映射函数是基于泄漏而选择的;以及将映射应用于控制值以确定至少一个泄漏水平增益控制值。
[0014]被配置为基于控制值和泄漏,确定至少一个泄漏水平增益控制值的部件可以被配置为:确定与对象轨道相关联的第一泄漏水平增益值和与环境轨道相关联的第二泄漏增益值,并且被配置为将至少一个泄漏水平增益值应用于对象轨道和环境轨道中的至少一项的部件可以被配置为:将第一泄漏水平增益值应用于对象轨道以生成经修改的对象轨道;以及将第二泄漏水平增益值应用于环境轨道以生成经修改的环境轨道。
[0015]该部件可以进一步被配置为:组合经修改的对象轨道和经修改的环境轨道。
[0016]根据第二方面,提供了一种方法,其包括:获得对象轨道和环境轨道;获得控制值,该控制值被配置为控制对象轨道和环境轨道的相对水平;估计对象轨道与环境轨道之间的泄漏;基于控制值和泄漏,确定至少一个泄漏水平增益控制值;以及将至少一个泄漏水平增益值应用于对象轨道和环境轨道中的至少一项,至少一个泄漏水平增益值的应用使得经渲染的音频信号是基于将至少一个泄漏水平增益控制值应用于对象轨道和环境轨道中的至少一项。
[0017]控制值可以被配置为控制以下中的一项:对象轨道和环境轨道的相对水平;相对于环境轨道的水平的对象轨道的水平;以及相对于对象轨道的水平的环境轨道的水平。
[0018]对象轨道可以包括对象音频信号,环境轨道可以包括环境音频信号。
[0019]该方法可以包括:生成经渲染的音频信号,所生成的经渲染的音频信号包括以下中的至少一项:基于环境音频信号和被应用于对象音频信号的至少一个泄漏水平增益的音频信号;基于对象音频信号和被应用于环境音频信号的至少一个泄漏水平增益的音频信号;或者基于被应用于对象音频信号的至少一个第一泄漏水平增益和被应用于环境音频信号的至少一个第二泄漏水平增益的音频信号。
[0020]生成经渲染的音频信号可以包括:输出经渲染的音频信号。
[0021]获得控制对象轨道和环境轨道的相对水平的控制值可以包括:接收用户输入,该用户输入包括以下中的至少一项:对象轨道增益值;环境轨道增益值;环境轨道到对象轨道增益值或对象轨道到环境轨道增益值;确定用于音频信号再现的相对水平值,该相对水平值包括以下中的一项:对象轨道增益值;环境轨道增益值;环境轨道到对象轨道增益值或对象轨道到环境轨道增益值。
[0022]估计对象轨道与环境轨道之间的泄漏可以包括确定以下中的一项:对象轨道的能量的量在环境轨道内;环境轨道的能量的量在对象轨道内;对象轨道与环境轨道之间的相关性;以及环境轨道与对象轨道之间的相关性。
[0023]对象轨道可以包括定义至少一个空间参数的对象元数据部分,环境轨道可以包括
也定义至少一个空间参数的环境元数据部分,其中,估计对象轨道与环境轨道之间的泄漏可以包括:确定环境元数据部分的至少一个空间参数与对象元数据部分的至少一个空间参数之间的相关性。
[0024]基于控制值和泄漏,确定至少一个泄漏水平增益控制值可以包括:确定至少一个泄漏水平增益控制值与控制值之间的映射函数,该映射函数是基于泄漏而选择的;以及将映射应用于控制值以确定至少一个泄漏水平增益控制值。
[0025]基于控制值和泄漏,确定至少一个泄漏水平增益控制值可以包括:确定与对象轨道相关联的第一泄漏水平增益值和与环境轨道相关联的第二泄漏增益值,本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种装置,包括至少一个处理器和包括计算机程序代码的至少一个存储器,所述至少一个存储器和所述计算机程序代码被配置为与所述至少一个处理器一起使所述装置至少:获得对象轨道和环境轨道;获得控制值,所述控制值被配置为控制所述对象轨道和所述环境轨道的相对水平;估计所述对象轨道与所述环境轨道之间的泄漏;基于所述控制值和所述泄漏,确定至少一个泄漏水平增益控制值;以及将所述至少一个泄漏水平增益值应用于所述对象轨道和所述环境轨道中的至少一项,所述至少一个泄漏水平增益值的所述应用使得经渲染的音频信号是基于将所述至少一个泄漏水平增益控制值应用于所述对象轨道和所述环境轨道中的至少一项。2.根据权利要求1所述的装置,其中,所述控制值被配置为控制所述对象轨道和所述环境轨道的相对水平包括以下中的一项:相对于所述环境轨道的水平的所述对象轨道的水平;以及相对于所述对象轨道的水平的所述环境轨道的水平。3.根据权利要求1所述的装置,其中,所述对象轨道包括对象音频信号,所述环境轨道包括环境音频信号。4.根据权利要求3所述的装置,其中,所述装置被使得:生成所述经渲染的音频信号,所生成的经渲染的音频信号包括以下中的至少一项:基于所述环境音频信号和被应用于所述对象音频信号的至少一个泄漏水平增益的音频信号;基于所述对象音频信号和被应用于所述环境音频信号的至少一个泄漏水平增益的音频信号;或者基于被应用于所述对象音频信号的至少一个第一泄漏水平增益和被应用于所述环境音频信号的至少一个第二泄漏水平增益的音频信号。5.根据权利要求4所述的装置,其中,所述装置被使得:输出所述经渲染的音频信号。6.根据权利要求1所述的装置,其中,所述装置被使得控制所述对象轨道和所述环境轨道的相对水平使得所述装置:接收用户输入,所述用户输入包括以下中的至少一项:对象轨道增益值;环境轨道增益值;环境轨道到对象轨道增益值;或者对象轨道到环境轨道增益值;以及确定用于音频信号再现的相对水平值,所述相对水平值包括以下中的一项或多项:对象轨道增益值;环境轨道增益值;环境轨道到对象轨道增益值;或者对象轨道到环境轨道增益值。7.根据权利要求1所述的装置,其中,所述装置被使得估计所述对象轨道与所述环境轨道之间的所述泄漏使得所述装置确定以下中的一项:所述对象轨道的能量的量在所述环境轨道内;所述环境轨道的能量的量在所述对象轨道内;所述对象轨道与所述环境轨道之间的相关性;以及所述环境轨道与所述对象轨道之间的相关性。8.根据权利要求1所述的装置,其中,所述对象轨道包括定义至少一个空间参数的对象
元数据部分,所述环境轨道包括定义至少一个空间参数的环境元数据部分,其中,所述装置被使得估计所述对象轨道与所述环境轨道之间的所述泄漏使得所述装置:确定所述环境元数据部分的所述至少一个空间参数与所述对象元数据部分的所述至少一个空间参数之间的相关性。9.根据权利要求1所述的装置,其中,所述装置被使得确定所述至少一个泄漏水平增益控制值使得所述装置:确定所述至少一个泄漏水平增益控制值与所述控制值之间的映射函数,所述映射函数是基于所述泄漏而选择的;以及将所述映射应用于所述控制值以确定所述至少一个泄漏水平增益控制值。10.根据权利要求1所述的装置,其中,所述装置被使得确定所述至少一个泄漏水平增益控制值使得所述装置:确定与所述对象轨道相关联的第一泄漏水平增益值和与所述环境轨道相关联的第二泄漏增益值,并且所述装置被使得将所述至少一个泄漏水平增益值应用于所述对象轨道和所述环境轨道中的至少一项进一步使得所述装置:将所述第一泄漏水平增益值应用于所述对...

【专利技术属性】
技术研发人员:M
申请(专利权)人:诺基亚技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1