System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 基于算法强化处理视频会议的方法、装置、设备及介质制造方法及图纸_技高网

基于算法强化处理视频会议的方法、装置、设备及介质制造方法及图纸

技术编号:42525366 阅读:7 留言:0更新日期:2024-08-27 19:35
本发明专利技术实施例提供了一种基于算法强化处理视频会议的方法、装置、设备及介质,所述方法包括:对预置的多个第三方平台进行性能验证,并根据性能验证结果,从所述多个第三方平台中,确定目标第三方平台;在检测到针对目标会议终端的触发事件的情况下,获取所述目标会议终端采集的至少包含音频数据的数据流;调用所述目标第三方平台,根据所述至少包含音频数据的数据流,进行视频流合成,得到用于呈现数字人像的视频流,并发送至其他会议终端。通过本发明专利技术实施例,实现了根据性能验证结果选取目标第三方平台,并调动目标第三方平台进行视频流合成,进而能够解决视频流合成过程中服务器算力较低的问题。

【技术实现步骤摘要】

本专利技术涉及通信,特别是涉及基于算法强化处理视频会议的方法、装置、设备及介质


技术介绍

1、随着通信技术的发展,用户对通信的质量和效率的要求越来越高,需求也越来越多样化和差异化。在视频会议场景下,用户不满足于仅仅能看到实时的视频图像,对高清晰、高质量、高稳定的视讯业务的需求越来越强烈。

2、在视频会议中,由会议终端将拍摄到的视频流上传到服务器,再由服务器分发给各会场的显示设备进行显示,但是鉴于会议终端的性能不同,会出现部分会议终端上传的是高清视频流、部分会议终端上传的不是高清视频流,而如果将所有的会议终端都换成高清拍摄,在视频流传输时可能因带宽波动较大等原因导致出现视频会议画面卡顿的情况。


技术实现思路

1、鉴于上述问题,提出了以便提供克服上述问题或者至少部分地解决上述问题的基于算法强化处理视频会议的方法、装置、设备及介质,包括:

2、一种基于算法强化处理视频会议的方法,应于第一服务器,所述方法包括:

3、对预置的多个第三方平台进行性能验证,并根据性能验证结果,从所述多个第三方平台中,确定目标第三方平台;

4、在检测到针对目标会议终端的触发事件的情况下,获取所述目标会议终端采集的至少包含音频数据的数据流;

5、调用所述目标第三方平台,根据所述至少包含音频数据的数据流,进行视频流合成,得到用于呈现数字人像的视频流,并发送至其他会议终端。

6、可选地,所述方法还包括:

7、预先设置固定图片尺寸,并将输入所述第三方平台的图片调整为固定图片尺寸,以使所述第三方平台采用固定锚框进行图片识别。

8、可选地,所述方法还包括:

9、对所述第三方平台中超分模型的算子进行优化。

10、可选地,所述对预置的多个第三方平台进行性能验证,包括:

11、监测所述多个第三方平台处理视频帧的相关参数;

12、根据所述相关参数,生成多个第三方平台的性能验证结果。

13、可选地,所述相关参数包括以下任一项或多项:

14、单帧延时时间、帧率、帧分辨率、相邻帧中人像的流畅度、视频码率。

15、可选地,根据所述至少包含音频数据的数据流,进行视频流合成,得到用于呈现数字人像的视频流,包括:

16、获取目标图像数据,并根据所述至少包含音频数据的数据流和所述目标图像数据,进行视频流合成,得到用于呈现数字人像的视频流。

17、可选地,所述数据流还包含根据所述目标会议终端采集的视频流生成的视频特征属性信息,所述根据所述至少包含音频数据的数据流和所述目标图像数据,进行视频流合成,得到用于呈现数字人像的视频流,包括:

18、根据至少包含音频数据和视频特征属性信息的数据流,以及所述目标图像数据,进行视频流合成,得到用于呈现数字人像的视频流。

19、一种基于算法强化处理视频会议的装置,应于第一服务器,所述装置包括:

20、目标第三方平台确定模块,用于对预置的多个第三方平台进行性能验证,并根据性能验证结果,从所述多个第三方平台中,确定目标第三方平台;

21、数据流获取模块,用于在检测到针对目标会议终端的触发事件的情况下,获取所述目标会议终端采集的至少包含音频数据的数据流;

22、视频流合成模块,用于调用所述目标第三方平台,根据所述至少包含音频数据的数据流,进行视频流合成,得到用于呈现数字人像的视频流,并发送至其他会议终端。

23、一种电子设备,包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如上所述的基于算法强化处理视频会议的方法。

24、一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如上所述的基于算法强化处理视频会议的方法。

25、本专利技术实施例具有以下优点:

26、在本专利技术实施例中,通过对预置的多个第三方平台进行性能验证,并根据性能验证结果,从多个第三方平台中,确定目标第三方平台,在检测到针对目标会议终端的触发事件的情况下,获取目标会议终端采集的至少包含音频数据的数据流,调用目标第三方平台,根据至少包含音频数据的数据流,进行视频流合成,得到用于呈现数字人像的视频流,并发送至其他会议终端,实现了根据性能验证结果选取目标第三方平台,并调动目标第三方平台进行视频流合成,进而能够解决视频流合成过程中服务器算力较低的问题。

27、而且,通过根据会议终端上传的音频数据合成视频流,降低了会议终端上传数据对带宽等方面的要求,能够以较低的带宽来上传数据且能够保持其他终端显示高清视频会议画面,进而能够弥补由于非高清拍摄、带宽波动较大等原因导致视频流难以满足需求的情况。

本文档来自技高网...

【技术保护点】

1.一种基于算法强化处理视频会议的方法,其特征在于,应于第一服务器,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述方法还包括:

3.根据权利要求1所述的方法,其特征在于,所述方法还包括:

4.根据权利要求1所述的方法,其特征在于,所述对预置的多个第三方平台进行性能验证,包括:

5.根据权利要求4所述的方法,其特征在于,所述相关参数包括以下任一项或多项:

6.根据权利要求1至5任一项所述的方法,其特征在于,根据所述至少包含音频数据的数据流,进行视频流合成,得到用于呈现数字人像的视频流,包括:

7.根据权利要求6所述的方法,其特征在于,所述数据流还包含根据所述目标会议终端采集的视频流生成的视频特征属性信息,所述根据所述至少包含音频数据的数据流和所述目标图像数据,进行视频流合成,得到用于呈现数字人像的视频流,包括:

8.一种基于算法强化处理视频会议的装置,其特征在于,应于第一服务器,所述装置包括:

9.一种电子设备,其特征在于,包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至7中任一项所述的基于算法强化处理视频会议的方法。

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的基于算法强化处理视频会议的方法。

...

【技术特征摘要】

1.一种基于算法强化处理视频会议的方法,其特征在于,应于第一服务器,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述方法还包括:

3.根据权利要求1所述的方法,其特征在于,所述方法还包括:

4.根据权利要求1所述的方法,其特征在于,所述对预置的多个第三方平台进行性能验证,包括:

5.根据权利要求4所述的方法,其特征在于,所述相关参数包括以下任一项或多项:

6.根据权利要求1至5任一项所述的方法,其特征在于,根据所述至少包含音频数据的数据流,进行视频流合成,得到用于呈现数字人像的视频流,包括:

7.根据权利要求6所述的方法,其特征在于,所述数据流还包含根据所述目标会...

【专利技术属性】
技术研发人员:曹裕民张鉴石李阔杨春晖
申请(专利权)人:海南乾唐视联信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1