【技术实现步骤摘要】
本申请涉及音视频，具体涉及一种触觉媒体的数据处理方法、一种触觉媒体的数据处理装置、一种计算机设备、一种计算机可读存储介质以及一种计算机程序产品。
技术介绍
1、随着沉浸媒体的不断发展，在沉浸媒体在呈现方式上，除了传统的视觉和听觉方面的呈现外，还包含触觉这种新的呈现方式，例如振动触觉、电触觉等等。实践发现，目前针对触觉媒体的编解码技术尚存在一些亟待解决的技术问题，例如，触觉媒体的呈现可能和其他媒体类型的媒体(比如音频媒体、视频媒体等)的呈现存在一些关联，比如在播放音频的同时触发振动；这种情况下目前针对触觉媒体的编解码技术会出现无法正确呈现触觉媒体的技术问题，从而使得触觉媒体的呈现效果较差。
技术实现思路
1、本申请实施例提供了一种触觉媒体的数据处理方法，可提高触觉媒体的呈现准确性，提升触觉媒体的呈现效果。
2、一方面，本申请实施例提供了一种触觉媒体的数据处理方法，该方法包括：
3、获取触觉媒体的媒体文件，媒体文件包括触觉媒体的码流及关系指示信息，关系指示信息用于指示触觉媒体与其他媒体之间的关联关系；其他媒体包括媒体类型为非触觉类型的媒体；
4、按照关系指示信息对码流进行解码处理以呈现触觉媒体。
5、一方面，本申请实施例提供了一种触觉媒体的数据处理方法，该方法包括：
6、对触觉媒体进行编码处理，得到触觉媒体的码流；
7、根据触觉媒体的呈现条件，确定触觉媒体与其他媒体之间的关联关系；其他媒体包括媒体类型为非触觉类型的
8、基于触觉媒体与其他媒体之间的关联关系生成关系指示信息；
9、对关系指示信息和码流进行封装，得到触觉媒体的媒体文件。
10、一方面，本申请实施例提供了一种触觉媒体的数据处理装置，该装置包括：
11、获取单元，用于获取触觉媒体的媒体文件，媒体文件包括触觉媒体的码流及关系指示信息，关系指示信息用于指示触觉媒体与其他媒体之间的关联关系；其他媒体包括媒体类型为非触觉类型的媒体；
12、处理单元，用于按照关系指示信息对码流进行解码处理以呈现触觉媒体。
13、一方面，本申请实施例提供了一种触觉媒体的媒体处理装置，该装置包括：
14、编码单元，用于对触觉媒体进行编码处理，得到触觉媒体的码流；
15、处理单元，用于根据触觉媒体的呈现条件，确定触觉媒体与其他媒体之间的关联关系；其他媒体包括媒体类型为非触觉类型的媒体；
16、处理单元，还用于基于触觉媒体与其他媒体之间的关联关系生成关系指示信息；
17、处理单元，还用于对关系指示信息和码流进行封装，得到触觉媒体的媒体文件。
18、一方面，本申请实施例提供一种计算机设备，该计算机设备包括：
19、处理器，适用于执行计算机程序；
20、计算机可读存储介质，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时，实现如上述触觉媒体的数据处理方法。
21、一方面，本申请实施例提供一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序，该计算机程序被处理器加载并执行如上述触觉媒体的数据处理方法。
22、一方面，本申请实施例提供了一种计算机程序产品，该计算机程序产品包括计算机程序或计算机指令，该计算机程序或计算机指令被处理器执行时实现上述触觉媒体的数据处理方法。
23、在本申请实施例中，触觉媒体的解码端可获取触觉媒体的媒体文件，该媒体文件包括触觉媒体的码流及关系指示信息，该关系指示信息用于指示触觉媒体与其他媒体(包括媒体类型为非触觉类型的媒体)之间的关联关系；按照关系指示信息对码流进行解码处理以呈现触觉媒体。由上述方案可知，本申请实施例可以在触觉媒体的编码过程中，在触觉媒体的媒体文件中添加关系指示信息，这样就可以通过关系指示信息所指示的触觉媒体与其他媒体之间的关联关系，来有效指导解码端准确地呈现触觉媒体，从而提升触觉媒体的呈现准确性，提升触觉媒体的呈现效果。
本文档来自技高网...【技术保护点】
1.一种触觉媒体的数据处理方法，其特征在于，包括：
2.如权利要求1所述的方法，其特征在于，所述触觉媒体包括时序触觉媒体；所述时序触觉媒体在所述媒体文件中被封装为触觉媒体轨道，所述触觉媒体轨道中包含一个或多个样本，所述触觉媒体轨道中的任一个样本包含所述时序触觉媒体的一个或多个触觉信号；所述关系指示信息设置于所述触觉媒体轨道的样本入口；所述关联关系包括依赖关系；所述关系指示信息包括独立呈现标识符，所述独立呈现标识符用于指示所述触觉媒体轨道内的样本是否能够独立呈现；
3.如权利要求2所述的方法，其特征在于，所述参考指示信息表示为轨道参考数据盒，所述轨道参考数据盒设置于所述触觉媒体轨道中，所述轨道参考数据盒用于索引至所述触觉媒体轨道内的样本在呈现时所依赖的其他媒体所属的轨道或者轨道组；
4.如权利要求1所述的方法，其特征在于，所述触觉媒体包括时序触觉媒体；所述时序触觉媒体在所述媒体文件中被封装为触觉媒体轨道，所述触觉媒体轨道中包含一个或多个样本，所述触觉媒体轨道中的任一个样本包含所述时序触觉媒体的一个或多个触觉信号；所述关联关系包括依赖关系；所述关系
5.如权利要求2所述的方法，其特征在于，所述触觉媒体轨道的样本入口还包括解码器配置记录；所述解码器配置记录用于指示所述触觉媒体轨道内的样本对于解码器的限制信息；
6.如权利要求2所述的方法，其特征在于，所述触觉媒体轨道的样本入口还包括扩展信息；所述扩展信息包括静态依赖信息字段、依赖信息结构数量字段、依赖信息结构字段；
7.如权利要求1所述的方法，其特征在于，所述触觉媒体包括时序触觉媒体；所述时序触觉媒体在所述媒体文件中被封装为触觉媒体轨道，所述触觉媒体轨道中包含一个或多个样本，所述触觉媒体轨道中的任一个样本包含所述时序触觉媒体的一个或多个触觉信号；
8.如权利要求7所述的方法，其特征在于，所述元数据轨道包含依赖信息结构数量字段、依赖信息标识字段、依赖取消标志字段、依赖信息结构字段；
9.如权利要求1所述的方法，其特征在于，所述触觉媒体包括非时序触觉媒体；所述非时序触觉媒体在所述媒体文件中被封装为触觉媒体项目，一个触觉媒体项目包含所述非时序触觉媒体的一个或多个触觉信号；
10.如权利要求9所述的方法，其特征在于，所述触觉媒体项目具备一个或多个依赖属性，所述依赖属性用于指示所述触觉媒体项目在呈现时所依赖的依赖信息；
11.如权利要求6、8或10所述的方法，其特征在于，所述关联关系包括同步呈现关系；所述依赖信息结构字段包含呈现依赖标志字段；
12.如权利要求6、8或10所述的方法，其特征在于，所述关联关系包括条件触发关系；所述条件包括以下至少一种：特定对象、特定空间区域、特定事件、特定视角、特定球面区域、特定视窗；所述依赖信息结构字段包含对象依赖标志字段、空间区域依赖标志字段、事件依赖标志字段、视角依赖标志字段、球面区域依赖标志字段、视窗依赖标志字段；
13.如权利要求6、8或10所述的方法，其特征在于，所述依赖信息结构字段包含媒体类型数量字段和媒体类型字段；
14.如权利要求1所述的方法，其特征在于，所述触觉媒体采用流化传输方式进行传输，所述获取触觉媒体的媒体文件，包括：
15.如权利要求14所述的方法，其特征在于，所述关联关系包括依赖关系；所述描述信息包括预选择集合，所述预选择集合用于定义所述关系指示信息所指示的触觉媒体及所述触觉媒体所依赖的其他媒体；
16.如权利要求15所述的方法，其特征在于，所述描述信息包括依赖信息描述子；所述依赖信息描述子用于定义触觉媒体资源在呈现时所依赖的依赖信息；所述依赖信息描述子用于描述以下至少一种级别的媒体资源：表示级别的触觉媒体资源、自适应集合级别的触觉媒体资源、预选级别的触觉媒体资源；
17.如权利要求1所述的方法，其特征在于，所述按照所述关系指示信息对所述码流进行解码处理以呈现所述触觉媒体，包括：
18.一种触觉媒体的数据处理方法，其特征在于，包括：
19.一种触觉媒体的数据处理装置，其特征在于，包括：
20.一种触觉媒体的数据处理装置，其特征在于，包括：
21.一种计算机设备，其特征在于，包括：
22.一种计算机可读存储介质，其特征在于，所述计算机存储介质存储有计算机程序，所述计算机程序被处理器执行时，执行如权利要求1-18任一项所述的触觉媒体的数据处理方法。
...【技术特征摘要】
1.一种触觉媒体的数据处理方法，其特征在于，包括：
2.如权利要求1所述的方法，其特征在于，所述触觉媒体包括时序触觉媒体；所述时序触觉媒体在所述媒体文件中被封装为触觉媒体轨道，所述触觉媒体轨道中包含一个或多个样本，所述触觉媒体轨道中的任一个样本包含所述时序触觉媒体的一个或多个触觉信号；所述关系指示信息设置于所述触觉媒体轨道的样本入口；所述关联关系包括依赖关系；所述关系指示信息包括独立呈现标识符，所述独立呈现标识符用于指示所述触觉媒体轨道内的样本是否能够独立呈现；
3.如权利要求2所述的方法，其特征在于，所述参考指示信息表示为轨道参考数据盒，所述轨道参考数据盒设置于所述触觉媒体轨道中，所述轨道参考数据盒用于索引至所述触觉媒体轨道内的样本在呈现时所依赖的其他媒体所属的轨道或者轨道组；
4.如权利要求1所述的方法，其特征在于，所述触觉媒体包括时序触觉媒体；所述时序触觉媒体在所述媒体文件中被封装为触觉媒体轨道，所述触觉媒体轨道中包含一个或多个样本，所述触觉媒体轨道中的任一个样本包含所述时序触觉媒体的一个或多个触觉信号；所述关联关系包括依赖关系；所述关系指示信息包括轨道参考数据盒；
5.如权利要求2所述的方法，其特征在于，所述触觉媒体轨道的样本入口还包括解码器配置记录；所述解码器配置记录用于指示所述触觉媒体轨道内的样本对于解码器的限制信息；
6.如权利要求2所述的方法，其特征在于，所述触觉媒体轨道的样本入口还包括扩展信息；所述扩展信息包括静态依赖信息字段、依赖信息结构数量字段、依赖信息结构字段；
7.如权利要求1所述的方法，其特征在于，所述触觉媒体包括时序触觉媒体；所述时序触觉媒体在所述媒体文件中被封装为触觉媒体轨道，所述触觉媒体轨道中包含一个或多个样本，所述触觉媒体轨道中的任一个样本包含所述时序触觉媒体的一个或多个触觉信号；
8.如权利要求7所述的方法，其特征在于，所述元数据轨道包含依赖信息结构数量字段、依赖信息标识字段、依赖取消标志字段、依赖信息结构字段；
9.如权利要求1所述的方法，其特征在于，所述触觉媒体包括非时序触觉媒体；所述非时序触觉媒体在所述媒体文件中被封装为触觉媒体项目，一个触觉媒体项目包含所述非时序触觉媒体...
【专利技术属性】
技术研发人员：胡颖，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。