编码设备和方法、解码设备和方法、以及程序技术

技术编号:34167615 阅读:52 留言:0更新日期:2022-07-17 09:58
本技术涉及能够基于内容创建者的意图实现距离感测控制的编码设备和方法、解码设备和方法、以及程序。该编码设备包括:对象编码单元,对对象的音频数据进行编码;元数据编码单元,对包括对象的位置信息的元数据进行编码;距离感测控制信息确定单元,确定用于音频数据的距离感测控制的距离感测控制信息;距离感测控制信息编码单元,对距离感测控制信息进行编码;多路复用单元,多路复用编码的音频数据、编码的元数据和编码的距离感测控制信息并生成编码数据。本技术可应用于内容再现系统。本技术可应用于内容再现系统。本技术可应用于内容再现系统。

【技术实现步骤摘要】
【国外来华专利技术】编码设备和方法、解码设备和方法、以及程序


[0001]本技术涉及编码设备和方法、解码设备和方法、以及程序,并且更具体地,涉及能够基于内容创建者的意图实现距离感测控制的编码设备和方法、解码设备和方法、以及程序。

技术介绍

[0002]近年来,基于对象的音频技术已经引起关注。
[0003]在基于对象的音频中,对象音频的数据由关于音频对象的波形信号和指示由与用作预定参考的收听位置的相对位置表示的音频对象的定位信息的元数据配置。
[0004]然后,基于元数据通过例如基于矢量的振幅平移(VBAP)将音频对象的波形信号渲染成期望数量的声道的信号并且再现(参见,例如,非专利文献1和非专利文献2)。
[0005]此外,作为与基于对象的音频相关的技术,例如,还提出了用于以用户可以指定任意收听位置的更高自由度实现音频再现的技术(例如,参见专利文献1)。
[0006]在该技术中,根据收听位置校正音频对象的位置信息,并且根据从收听位置到音频对象的距离的改变执行增益控制或滤波处理,使得伴随用户的收听位置的改变的频率特性或音量的改变(即,到音频对象的距离的感觉)被再现。
[0007]引用列表
[0008]非专利文献
[0009]非专利文献1:ISO/IEC 23008

3Information technology

High efficiency coding and media delivery in heterogeneous environments

Part 3:3D audio
[0010]非专利文献2:Ville Pulkki,“Virtual Sound Source Positioning Using Vector Base Amplitude Panning”,Journal of AES,vol.45,no.6,pp.456

466,1997
[0011]专利文献
[0012]专利文献1:WO 2015107926 A

技术实现思路

[0013]本专利技术要解决的问题
[0014]然而,在上述技术中,用于再现对应于从收听位置到音频对象的距离的频率特性和音量的变化的增益控制和滤波处理是预定的。
[0015]因此,当内容创建者期望基于与频率特性和音量的变化不同的方式再现距离感时,不能再现这种距离感。即,不可能实现基于内容创建者的意图的距离感测控制。
[0016]鉴于这种情况做出了本技术,并且其目的是基于内容创建者的意图实现距离感控制。
[0017]问题的解决方案
[0018]根据本技术的第一方面的编码装置包括:对象编码单元,对对象的音频数据进行编码;元数据编码单元,对包括对象的位置信息的元数据进行编码;距离感测控制信息确定
单元,确定用于对音频数据执行的距离感测控制处理的距离感测控制信息;距离感测控制信息编码单元,对距离感测控制信息进行编码;以及多路复用器,其多路复用编码的音频数据、编码的元数据和编码的距离感测控制信息以生成编码数据。
[0019]根据本技术的第一方面的编码方法或程序包括以下步骤:对对象的音频数据进行编码;对包括对象的位置信息的元数据进行编码;确定用于对所述音频数据执行的距离感测控制处理的距离感测控制信息;对所述距离感测控制信息进行编码;并且
[0020]将所述编码的音频数据、所述编码的元数据和所述编码的距离感测控制信息进行复用以生成编码数据。
[0021]在本技术的第一方面中,对对象的音频数据进行编码,对包括对象的位置信息的元数据进行编码,确定用于对音频数据执行的距离感测控制处理的距离感测控制信息,对距离感测控制信息进行编码,将编码的音频数据、编码的元数据和编码的距离感测控制信息进行复用以生成编码数据。
[0022]根据本技术的第二方面的解码设备包括:解复用器,解复用编码数据以提取对象的编码音频数据、包括对象的位置信息的编码元数据、以及用于对音频数据执行的距离感测控制处理的编码距离感测控制信息;对象解码单元,解码编码的音频数据;元数据解码单元,解码编码的元数据;距离感测控制信息解码单元,解码编码的距离感测控制信息;距离感测控制处理单元,基于所述距离感测控制信息对所述对象的所述音频数据执行所述距离感测控制处理;以及渲染处理单元,基于通过距离感测控制处理获得的音频数据和元数据执行再现处理,以生成用于再现对象的声音的再现音频数据。
[0023]根据本技术的第二方面的解码方法或程序包括以下步骤:解复用编码数据以提取对象的编码音频数据、包括对象的位置信息的编码元数据、以及用于对音频数据执行的距离感测控制处理的编码距离感测控制信息;解码所述编码的音频数据;解码所述编码的元数据;解码所述编码的距离感测控制信息;基于所述距离感测控制信息对所述对象的所述音频数据执行所述距离感测控制处理;以及基于通过距离感测控制处理获得的音频数据和元数据执行呈现处理,以生成用于再现对象的声音的再现音频数据。
[0024]在本技术的第二方面中,将编码数据解复用以提取对象的编码的音频数据,编码的元数据包括对象的位置信息,以及用于对音频数据执行的距离感测控制处理的编码的距离感测控制信息,对编码的音频数据进行解码,对编码的元数据进行解码,解码编码的所述距离感测控制信息,基于所述距离感测控制信息对所述对象的所述音频数据执行所述距离感测控制处理,并且基于通过距离感测控制处理获得的音频数据和元数据执行渲染处理,以生成用于再现对象的声音的再现音频数据。
附图说明
[0025]图1为示出编码设备的配置实例的示图。
[0026]图2为示出解码设备的配置实例的示图。
[0027]图3是示出了距离感测控制处理单元的配置实例的示图。
[0028]图4是示出了混响处理单元的配置实例的示图。
[0029]图5是用于描述增益控制处理的控制规则的实例的示图。
[0030]图6是用于描述通过高架滤波器的滤波器处理的控制规则的实例的示图。
[0031]图7是用于描述通过低架滤波器的滤波器处理的控制规则的实例的示图。
[0032]图8是用于描述混响处理的控制规则的实例的示图。
[0033]图9是用于描述湿分量的生成的图。
[0034]图10是用于描述湿分量的生成的示图。
[0035]图11是示出距离感测控制信息的实例的示图。
[0036]图12是示出增益控制的参数配置信息的实例的示图。
[0037]图13是示出滤波处理的参数配置信息的实例的示图。
[0038]图14是示出混响处理的参数配置信息的实例的示图。
[0039]图15是用于描述编码处理的流程图。
[0040]图16是用于描述解码处理的流程图。
[0041]图17是示出用于获得增益值的表和函数的实例的示图。
[0042]图18是示出增益控制的参数配本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种编码设备,包括:对象编码单元,对对象的音频数据进行编码;元数据编码单元,对包括所述对象的位置信息的元数据进行编码;距离感测控制信息确定单元,确定用于对音频数据执行的距离感测控制处理的距离感测控制信息;距离感测控制信息编码单元,对所述距离感测控制信息进行编码;以及多路复用器,多路复用编码的音频数据、编码的元数据和编码的距离感测控制信息以生成编码数据。2.根据权利要求1所述的编码设备,其中,所述距离感测控制信息包括用于获得在所述距离感测控制处理中使用的参数的控制规则信息。3.根据权利要求2所述的编码设备,其中,所述参数根据从收听位置到所述对象的距离而改变。4.根据权利要求2所述的编码设备,其中,所述控制规则信息是指示用于获得所述参数的函数或表格的索引。5.根据权利要求2所述的编码设备,其中,所述距离感测控制信息包括指示组合执行以实现所述距离感测控制处理的一个或多个处理步骤的配置信息。6.根据权利要求5所述的编码设备,其中,所述配置信息是指示所述一个或多个处理步骤和执行所述一个或多个处理步骤的顺序的信息。7.根据权利要求5所述的编码设备,其中,所述处理是增益控制处理、滤波处理或混响处理。8.根据权利要求1所述的编码设备,其中,所述距离感测控制信息编码单元为多个所述对象中的每个对象对所述距离感测控制信息进行编码。9.根据权利要求1所述的编码设备,其中,所述距离感测控制信息编码单元对包括一个或多个所述对象的每个对象组的所述距离感测控制信息进行编码。10.一种由编码设备执行的编码方法,所述方法包括:对对象的音频数据进行编码;对包括所述对象的位置信息的元数据进行编码;确定用于对所述音频数据执行的距离感测控制处理的距离感测控制信息;对所述距离感测控制信息进行编码;以及多路复用编码的音频数据、编码的元数据和编码的距离感测控制信息以生成编码数据。11.一种用于使计算机执行处理的程序,所述处理包括以下步骤:对对象的音频数据进行编码;对包括所述对象的位置信息的元数据进行编码;
确定用于对所述音频数据执行的距离感测控制处理的距离感测控制信息;对所述距离感测控制信息进行编码;以及多路复用编码的音频数据、编码的元数据和编码的距离感测控制信息以生成编码数据。12.一种解码设备,包括:解复用器,解复用编码数据以提取对象的编码的音频数据、包括所述对象的位置信息的编码的元数据、以及用于对所述音频数据执行的距离感测控制处理的编码的距离感测控制信息;对象解码单元,对编码的音频数...

【专利技术属性】
技术研发人员:辻实知念徹
申请(专利权)人:索尼集团公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1