【技术实现步骤摘要】
以计算机为中介的现实系统的混阶立体混响(MOA)音频数据本申请是申请日为2018年05月23日,专利技术名称为“以计算机为中介的现实系统的混阶立体混响(MOA)音频数据”,申请号为201880042853.8的专利申请的分案申请。本申请案主张2017年6月30日申请的美国临时申请案第62/527,769号的权益,所述申请案的全部内容在此以引用的方式并入本文中。
本公开涉及例如音频数据等媒体数据的处理。
技术介绍
高阶立体混响(HOA)信号(常常由多个球面谐波系数(SHC)或其它分层元素表示)是声场的三维表示。所述HOA或SHC表示可以与用以播放从SHC信号呈现的多通道音频信号的局部扬声器几何布置无关的方式来表示声场。SHC信号还可有助于向后兼容性,这是因为SHC信号可呈现为众所周知的且被高度采用的多通道格式(例如,5.1音频通道格式或7.1音频通道格式)。因此,SHC表示可实现也适应向后兼容性的对声场的更好表示。
技术实现思路
本公开大体上涉及以计算机为中介的现实系统的用户体验的听觉方面,所述以计算机为中介的现实系统包含虚拟现实(VR)、混合现实(MR)、扩增现实(AR)、计算机视觉和图形系统。在一些特定实例中,本公开的各方面是针对伴随以计算机为中介的现实系统的以计算机为中介的感测输入数据的对应视频内容的音频内容的选择、流式传输和重放。在一个实例中,一种装置包含被配置成存储声场的多个表示的存储器装置。在此实例中,所述装置还包含耦合到所述存储器装置的处理器。所述处理器被配置成 ...
【技术保护点】
1.一种装置,包括:/n存储器,其被配置成存储声场的多个表示,所述声场的每个表示包括表示同一声场在同一时间段的不同立体混响系数集;以及/n处理器,其耦合到所述存储器,所述处理器被配置成:基于视场并且基于来自所述多个表示的所述声场的特定表示,执行音频重放。/n
【技术特征摘要】
20170630 US 62/527769;20170808 US 15/6720581.一种装置,包括:
存储器,其被配置成存储声场的多个表示,所述声场的每个表示包括表示同一声场在同一时间段的不同立体混响系数集;以及
处理器,其耦合到所述存储器,所述处理器被配置成:基于视场并且基于来自所述多个表示的所述声场的特定表示,执行音频重放。
2.根据权利要求1所述的装置,其中,所述视场是基于注视角度的。
3.根据权利要求2所述的装置,还包括相机,所述相机被配置为捕获包括所述注视角度的图像。
4.根据权利要求3所述的装置,其中,所述处理器耦接到所述相机,并且其中,所述处理器被配置为确定所述注视角度并基于所述注视角度来跟踪导引角度。
5.根据权利要求1所述的装置,其中,所述视场是基于导引角度的。
6.根据权利要求5所述的装置,其中,所述处理器被配置为:
跟踪由与注视角度相关联的一个或多个角度所提供的所述导引角度;以及
基于所述导引角度,来从所述多个表示中选择所述声场的所述特定表示。
7.根据权利要求5所述的装置,还包括显示器,所述显示器被配置为表示基于所述导引角度的观看角度处的图像序列。
8.根据权利要求5所述的装置,其中,存储到所述存储器的所述声场的所述多个表示中的一个或多个表示包括至少一个高分辨率区和至少一个较低分辨率区,并且其中,基于所述导引角度而选择的所述特定表示提供了关于所述至少一个高分辨率区的较大空间精确度和关于所述较低分辨率区的较小空间精确度。
9.根据权利要求5所述的装置,其中,所述装置被配置为:随着所述装置从向下注视转变为直视,选择所述装置的所述导引角度,其中,与所述向下注视相关联的竖直区相比,所述直视是与在水平区中具有更大空间精确度的立体混响表示相关联的。
10.根据权利要求5所述的装置,其中,所述装置被配置为:随着所述装置从直视转变为向上注视,所述装置被配置为选择所述装置的所述导引角度,其中,与所述直视相关联的水平区相比,所述向上注视是与在竖直区中具有更大空间精确度的立体混响表示相关联的。
11.根据权利要求1所述的装置,还包括耦合到所述处理器的一个或多个扩音器,所述一个或多个扩音器被配置成基于从所述多个表示所选择的所述声场的所述特定表示来再现所述声场。
12.根据权利要求1所述的装置,还包括耦合到所述存储器的网络接口,所述网络接口被配置成将交...
【专利技术属性】
技术研发人员:尼尔斯·京特·彼得斯,迪帕简·森,托马斯·斯托克哈默,
申请(专利权)人:高通股份有限公司,
类型:发明
国别省市:美国;US
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。