System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本申请涉及扩展现实,具体涉及一种应用于扩展现实的视频传输控制方法及相关设备。
技术介绍
1、扩展现实(extended reality,简称xr)是虚拟现实(virtual reality,vr)、增强现实(augmented reality,ar)和混合现实(mixed reality,mr)的总称,其通过可穿戴设备和计算机技术为体验者带来真实与虚拟结合、人机交互的环境,实现虚拟世界与现实世界之间无缝转换的“沉浸感”体验。在扩展现实的实际应用中,用户体验是非常值得关注的方面,目前仍存在因体验者移动轨迹突发变化或者是其它因素导致视频画面预测不准确的问题,进而引起用户体验不佳。
技术实现思路
1、本申请的实施例分别提供了一种应用于扩展现实的视频传输控制方法、一种应用于扩展现实的视频传输控制装置、电子设备、计算机可读存储介质以及计算机程序产品。
2、第一方面,本申请实施例提供了一种应用于扩展现实的视频传输控制方法,该方法包括:接收客户端节点发送的包含体验者移动信息的视频获取请求;通过预设的多个视图预测模型分别预测与所述体验者移动信息相匹配的候选视图,其中,不同的视图预测模型在预测候选视图时基于所述体验者移动信息所确定的移动后视口位置不同,以使得预测得到的各个候选视图的画面内容相应不同;获取针对各个候选视图所预测得到的体验质量值,并基于各个候选视图对应的体验质量值进行候选视图的融合处理,得到待传输视图;将所述待传输视图传输至所述客户端节点。
3、第二方面,本申请实
4、第三方面,本申请实施例提供了一种电子设备,包括:一个或多个处理器;存储器,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述电子设备实现如前所述的应用于扩展现实的视频传输控制方法中的步骤。
5、第四方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机可读指令,当所述计算机可读指令被计算机的处理器执行时,使计算机执行如上所述的应用于扩展现实的视频传输控制方法中的步骤。
6、第五方面,本申请实施例提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现如上所述的应用于扩展现实的视频传输控制方法中的步骤。
7、在本申请的实施例所提供的技术方案中,扩展现实的服务端节点在接收到客户端发送视频获取请求后,通过预设的多个视图预测模型来分别预测候选视图,由于不同的视图预测模型进行候选视图预测所考虑的移动后视口位置有所不同,这使得不同的视图预测模型预测得到的候选视图的画面内容也相应不同,基于此,后续通过预测各个候选视图对应的体验质量值,并基于各个候选视图的体验质量值对各个候选视图进行融合处理来得到待传输视图,这相当于待传输视图所对应的视口位置是针对预测的多个视口位置融合得到的更加精确的视口位置所匹配的视频画面,即使出现体验者移动轨迹突发变化或者其它因素,也能够预测得到精确视口对应的视频画面,由此使得将此待传输视频传输给客户端节点进行扩展现实相关的显示,能够使体验者获得更高的用户体验。
8、应理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
本文档来自技高网...【技术保护点】
1.一种应用于扩展现实的视频传输控制方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,所述获取针对各个候选视图所预测得到的体验质量值,并基于各个候选视图对应的体验质量值进行候选视图的融合处理,得到待传输视图,包括:
3.根据权利要求2所述的方法,其特征在于,所述基于各个候选视图的排序顺序对相应候选视图进行下采样处理,得到各个候选视图对应的下采样图像,包括:
4.根据权利要求2所述的方法,其特征在于,所述通过预设的多个视图预测模型分别预测与所述体验者移动信息相匹配的候选视图,包括:
5.根据权利要求4所述的方法,其特征在于,所述融合各个候选视图对应的下采样图像以得到所述待传输视图,包括:
6.根据权利要求2所述的方法,其特征在于,所述通过预设的多个视图预测模型分别预测与所述体验者移动信息相匹配的候选视图,包括:
7.根据权利要求6所述的方法,其特征在于,所述融合各个候选视图对应的下采样图像以得到所述待传输视图,包括:
8.根据权利要求1所述的方法,其特征在于,所述获取针对各个候选视
9.根据权利要求8所述的方法,其特征在于,所述方法还包括:
10.根据权利要求1所述的方法,其特征在于,所述将所述待传输视图传输至所述客户端节点,包括:
11.根据权利要求10所述的方法,其特征在于,所述对各个视图分片进行预编码处理,并基于得到的编码图像与相应视图分片之间的画面差异,确定所述待传输视图对应的视频质量指标,包括:
12.根据权利要求10所述的方法,其特征在于,所述基于确定得到的码率将所述待传输视图传输至所述客户端节点,包括:
13.一种应用于扩展现实的视频传输控制装置,其特征在于,包括:
14.一种电子设备,其特征在于,包括:
15.一种计算机可读存储介质,其特征在于,其上存储有计算机可读指令,当所述计算机可读指令被计算机的处理器执行时,使计算机执行权利要求1至12中任一项所述的应用于扩展现实的视频传输控制方法。
...【技术特征摘要】
1.一种应用于扩展现实的视频传输控制方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,所述获取针对各个候选视图所预测得到的体验质量值,并基于各个候选视图对应的体验质量值进行候选视图的融合处理,得到待传输视图,包括:
3.根据权利要求2所述的方法,其特征在于,所述基于各个候选视图的排序顺序对相应候选视图进行下采样处理,得到各个候选视图对应的下采样图像,包括:
4.根据权利要求2所述的方法,其特征在于,所述通过预设的多个视图预测模型分别预测与所述体验者移动信息相匹配的候选视图,包括:
5.根据权利要求4所述的方法,其特征在于,所述融合各个候选视图对应的下采样图像以得到所述待传输视图,包括:
6.根据权利要求2所述的方法,其特征在于,所述通过预设的多个视图预测模型分别预测与所述体验者移动信息相匹配的候选视图,包括:
7.根据权利要求6所述的方法,其特征在于,所述融合各个候选视图对应的下采样图像以得到所述待传输视图,包括:
8.根据权利要求1所...
【专利技术属性】
技术研发人员:彭俊坤,
申请(专利权)人:腾讯科技深圳有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。