System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种视频处理的方法、装置、电子设备、介质及产品制造方法及图纸_技高网

一种视频处理的方法、装置、电子设备、介质及产品制造方法及图纸

技术编号:43129175 阅读:4 留言:0更新日期:2024-10-29 17:37
本发明专利技术实施例提供了一种视频处理的方法、装置、电子设备、介质及产品,应用于视频处理领域,所述方法包括:应用于主机端中视频处理芯片,包括:响应于客户端对主机端的远程控制,获取视频帧;根据当前视频帧和上一视频帧的差异情况,确定当前视频场景;根据当前视频场景,确定用于指示客户端呈现当前视频帧的目标数据;将目标数据发送至客户端,以在客户端呈现当前视频帧。通过本发明专利技术实施例,实现了通过判断差异情况来确定当前视频场景以进行不同的处理,从而使得相同帧或相似帧不进行重复压缩和传输,实现相近帧最优化传输,以降低视频数据的传输延迟。

【技术实现步骤摘要】

本专利技术涉及视频处理,特别是涉及一种视频处理的方法、装置、电子设备、介质及产品


技术介绍

1、随着计算机技术的发展,用户可以在客户端通过网络访问主机端的数据,或对主机端进行操作控制,以进行可视化操作和管理,如远程桌面技术。

2、在相关技术中,一般是主机端按照一定帧率和分辨率采集桌面图像,转换成特定视频格式进行压缩打包,再通过网络传输到客户端,客户端解压后得到视频流,按采集的帧率、分辨率及视频格式回放。

3、然而,在采用这种方式的情况下,采集到的所有帧的数据都要进行处理,包括色彩空间转换、block(块)转换、视频压缩等;由于实际过程中会存在大量的重复帧或者是相似帧,因此存在大量的无效压缩以及传输,从而增大了视频传输的延迟,增加了视频数据处理的功耗。


技术实现思路

1、鉴于上述问题,提出了以便提供克服上述问题或者至少部分地解决上述问题的一种视频处理的方法、装置、电子设备、介质及产品,包括:

2、一种视频处理的方法,应用于主机端中视频处理芯片,包括:

3、响应于客户端对所述主机端的远程控制,获取视频帧;

4、根据当前视频帧和上一视频帧的差异情况,确定当前视频场景;

5、根据所述当前视频场景,确定用于指示所述客户端呈现当前视频帧的目标数据;

6、将所述目标数据发送至所述客户端,以在所述客户端呈现所述当前视频帧。

7、可选地,所述目标数据包括:

8、所述当前视频场景的标志,或者,所述当前视频场景的标志及当前视频帧和上一视频帧的差异数据,或者,当前视频帧和上一视频帧的差异数据,或者,所述当前视频场景的标志及最后一行的命令行数据,或者,当前视频帧。

9、可选地,所述根据当前视频帧和上一视频帧的差异情况,确定当前视频场景,包括:在当前视频帧和上一视频帧为相同帧或相似帧的情况下,确定当前视频场景为第一视频场景;

10、所述根据所述当前视频场景,确定用于指示所述客户端呈现当前视频帧的目标数据,包括:在当前视频场景为第一视频场景的情况下,确定目标数据为所述第一视频场景的标志,以使所述客户端从缓存中获取上一视频帧来呈现当前视频帧。

11、可选地,在当前视频帧和上一视频帧为相同帧或相似帧的情况下,确定当前视频场景为第一视频场景之前,还包括:

12、确定当前视频帧相较于上一视频帧的更新数据比例;

13、在所述更新数据比例指示当前视频帧相较于上一视频帧不存在更新数据的情况下,则判定当前视频帧和上一视频帧为相同帧;

14、在所述更新数据比例指示当前视频帧相较于上一视频帧存在更新数据且小于或等于预设数据比例的情况下,则判定当前视频帧和上一视频帧为相似帧。

15、可选地,所述第一视频场景为客户端对所述主机端进行远程监控的场景。

16、可选地,所述根据当前视频帧和上一视频帧的差异情况,确定当前视频场景,包括:在当前视频帧和上一视频帧为相近帧的情况下,确定当前视频场景为第二视频场景;

17、所述根据所述当前视频场景,确定用于指示所述客户端呈现当前视频帧的目标数据,包括:在当前视频场景为第二视频场景的情况下,确定目标数据为所述第二视频场景的标志及当前视频帧和上一视频帧的差异数据,或者,确定目标数据为当前视频帧和上一视频帧的差异数据,以使所述客户端根据缓存中上一视频帧和所述差异数据来呈现当前视频帧。

18、可选地,在所述在当前视频帧和上一视频帧为相近帧的情况下,确定当前视频场景为第二视频场景之前,还包括:

19、确定当前视频帧和上一视频帧中不相同像素点占所有像素点的像素点比例;

20、在所述像素点比例小于预设像素点比例的情况下,则判定当前视频帧和上一视频帧为相近帧。

21、可选地,在所述在当前视频场景为第二视频场景的情况下,确定目标数据为所述第二视频场景的标志及当前视频帧和上一视频帧的差异数据,或者,确定目标数据为当前视频帧和上一视频帧的差异数据之前,还包括:

22、对当前视频帧和上一视频帧进行差值运算,得到差值帧,并根据所述差值帧,生成压缩格式的差异数据。

23、可选地,在所述在当前视频场景为第二视频场景的情况下,确定目标数据为所述第二视频场景的标志及当前视频帧和上一视频帧的差异数据,或者,确定目标数据为当前视频帧和上一视频帧的差异数据之前,还包括:

24、确定当前视频帧和上一视频帧中不相同像素点的位置及像素值,将所述不相同像素点的位置及像素值确定为差异数据。

25、可选地,所述第二视频场景为客户端对所述主机端进行非命令行远程管理的场景。

26、可选地,所述根据当前视频帧和上一视频帧的差异情况,确定当前视频场景,包括:

27、在当前视频帧和上一视频帧仅存在最后一行的命令行数据不同的情况下,确定当前视频场景为第三视频场景;

28、所述根据所述当前视频场景,确定用于指示所述客户端呈现当前视频帧的目标数据,包括:在当前视频场景为第三视频场景的情况下,确定目标数据为所述第三视频场景的标志及最后一行的命令行数据,以使所述客户端根据缓存中上一视频帧和所述最后一行的命令行数据来呈现当前视频帧。

29、可选地,所述在当前视频帧和上一视频帧仅存在最后一行的命令行数据不同的情况下,确定当前视频场景为第三视频场景,包括:

30、确定命令行的行高信息,并按照所述行高信息,对当前视频帧和上一视频帧进行偏移比较,以判断是否仅存在最后一行的命令行数据不同。

31、可选地,所述第三视频场景为客户端对所述主机端进行命令行远程管理的场景。

32、可选地,还包括:

33、按照预设帧数间隔,向所述客户端发送完整的视频帧。

34、可选地,所述主机端在同一存储器中设置两个显存空间,还包括:

35、将标号为偶数的视频帧存储于其中一个显存空间;

36、将标号为奇数的视频帧存储于另一个显存空间。

37、可选地,还包括:

38、将所述当前视频帧对应的目标数据写入先入先出队列;

39、在所述先入先出队列中剩余空间大小小于待接收的关键帧大小时,对所述先入先出队列中部分视频帧对应的目标数据进行丢弃。

40、一种视频处理的装置,应用于主机端中视频处理芯片,包括:

41、视频帧获取模块,用于响应于客户端对所述主机端的远程控制,获取视频帧;

42、当前视频场景确定模块,用于根据当前视频帧和上一视频帧的差异情况,确定当前视频场景;

43、目标数据确定模块,用于根据所述当前视频场景,确定用于指示所述客户端呈现当前视频帧的目标数据;

44、目标数据发送模块,用于将所述目标数据发送至所述客户端,以在所述客户端呈现所述当前视频帧。

45、一种电子设备,包括处理器、存储器及存储在所本文档来自技高网...

【技术保护点】

1.一种视频处理的方法,其特征在于,应用于主机端中视频处理芯片,包括:

2.根据权利要求1所述的方法,其特征在于,所述目标数据包括:

3.根据权利要求1所述的方法,其特征在于,所述根据当前视频帧和上一视频帧的差异情况,确定当前视频场景,包括:在当前视频帧和上一视频帧为相同帧或相似帧的情况下,确定当前视频场景为第一视频场景;

4.根据权利要求3所述的方法,其特征在于,在当前视频帧和上一视频帧为相同帧或相似帧的情况下,确定当前视频场景为第一视频场景之前,还包括:

5.根据权利要求3所述的方法,其特征在于,所述第一视频场景为客户端对所述主机端进行远程监控的场景。

6.根据权利要求1所述的方法,其特征在于,所述根据当前视频帧和上一视频帧的差异情况,确定当前视频场景,包括:在当前视频帧和上一视频帧为相近帧的情况下,确定当前视频场景为第二视频场景;

7.根据权利要求6所述的方法,其特征在于,在所述在当前视频帧和上一视频帧为相近帧的情况下,确定当前视频场景为第二视频场景之前,还包括:

8.根据权利要求6所述的方法,其特征在于,在所述在当前视频场景为第二视频场景的情况下,确定目标数据为所述第二视频场景的标志及当前视频帧和上一视频帧的差异数据,或者,确定目标数据为当前视频帧和上一视频帧的差异数据之前,还包括:

9.根据权利要求6所述的方法,其特征在于,在所述在当前视频场景为第二视频场景的情况下,确定目标数据为所述第二视频场景的标志及当前视频帧和上一视频帧的差异数据,或者,确定目标数据为当前视频帧和上一视频帧的差异数据之前,还包括:

10.根据权利要求6所述的方法,其特征在于,所述第二视频场景为客户端对所述主机端进行非命令行远程管理的场景。

11.根据权利要求1所述的方法,其特征在于,所述根据当前视频帧和上一视频帧的差异情况,确定当前视频场景,包括:

12.根据权利要求11所述的方法,其特征在于,所述在当前视频帧和上一视频帧仅存在最后一行的命令行数据不同的情况下,确定当前视频场景为第三视频场景,包括:

13.根据权利要求11所述的方法,其特征在于,所述第三视频场景为客户端对所述主机端进行命令行远程管理的场景。

14.根据权利要求1所述的方法,其特征在于,还包括:

15.根据权利要求1至14任一项所述的方法,其特征在于,所述主机端在同一存储器中设置两个显存空间,还包括:

16.根据权利要求1至14任一项所述的方法,其特征在于,还包括:

17.一种视频处理的装置,其特征在于,应用于主机端中视频处理芯片,包括:

18.一种电子设备,其特征在于,包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至16中任一项所述的方法。

19.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至16中任一项所述的方法。

20.一种计算机程序产品,其特征在于,包括计算机程序,所述计算机程序在被处理器执行时实现如权利要求1至16中任一项所述的方法。

...

【技术特征摘要】

1.一种视频处理的方法,其特征在于,应用于主机端中视频处理芯片,包括:

2.根据权利要求1所述的方法,其特征在于,所述目标数据包括:

3.根据权利要求1所述的方法,其特征在于,所述根据当前视频帧和上一视频帧的差异情况,确定当前视频场景,包括:在当前视频帧和上一视频帧为相同帧或相似帧的情况下,确定当前视频场景为第一视频场景;

4.根据权利要求3所述的方法,其特征在于,在当前视频帧和上一视频帧为相同帧或相似帧的情况下,确定当前视频场景为第一视频场景之前,还包括:

5.根据权利要求3所述的方法,其特征在于,所述第一视频场景为客户端对所述主机端进行远程监控的场景。

6.根据权利要求1所述的方法,其特征在于,所述根据当前视频帧和上一视频帧的差异情况,确定当前视频场景,包括:在当前视频帧和上一视频帧为相近帧的情况下,确定当前视频场景为第二视频场景;

7.根据权利要求6所述的方法,其特征在于,在所述在当前视频帧和上一视频帧为相近帧的情况下,确定当前视频场景为第二视频场景之前,还包括:

8.根据权利要求6所述的方法,其特征在于,在所述在当前视频场景为第二视频场景的情况下,确定目标数据为所述第二视频场景的标志及当前视频帧和上一视频帧的差异数据,或者,确定目标数据为当前视频帧和上一视频帧的差异数据之前,还包括:

9.根据权利要求6所述的方法,其特征在于,在所述在当前视频场景为第二视频场景的情况下,确定目标数据为所述第二视频场景的标志及当前视频帧和上一视频帧的差异数据,或者,确定目标数据为当前视频帧和上一视频帧的...

【专利技术属性】
技术研发人员:张贞雷李拓邹晓峰李仁刚刘凯满宏涛
申请(专利权)人:山东云海国创云计算装备产业创新中心有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1