基于云边协同的行为识别方法、装置、电子设备和介质制造方法及图纸

技术编号:32112008 阅读:30 留言:0更新日期:2022-01-29 18:55
本公开的实施例公开了基于云边协同的行为识别方法、装置、电子设备和介质。该方法的一具体实施方式包括:获取第一边缘终端录制的目标视频流;根据目标视频流,对目标对象进行行为识别;响应于确定行为识别信息序列中存在表征目标对象行为异常的行为识别信息,确定目标对象的当前位置;根据当前位置信息,对第一边缘终端的拍摄角度进行调整,以使得目标对象处在第一边缘终端拍摄的图像的画面中心;响应于确定目标对象未处在第一边缘终端的录制范围内,确定目标对象的移动轨迹;根据移动轨迹,对第二边缘终端集合中的每个第二边缘终端进行拍摄角度的调整。该实施方式提高了行为识别效率和监控追踪的成功率。率和监控追踪的成功率。率和监控追踪的成功率。

【技术实现步骤摘要】
基于云边协同的行为识别方法、装置、电子设备和介质


[0001]本公开的实施例涉及计算机
,具体涉及基于云边协同的行为识别方法、装置、电子设备和介质。

技术介绍

[0002]行为识别,是指对被检测对象的行为进行识别,以确定被检测对象是否存在异常行为的一项技术。目前,在进行行为识别时,通常采用的方式为:通过人工的方式对监控摄像头录制的视频包括的被检测对象进行行为识别。
[0003]然而,当采用上述方式进行行为识别时,经常会存在如下技术问题:第一、由于监控摄像头的拍摄角度和拍摄范围的限制,往往需要布置大量的监控摄像头进行监控,通过人工的方式对多个视频包括的待检测对象进行行为识别,识别效率低下;第二、由于被检测对象往往处于移动状态,当被检测对象存在异常行为时,通过单一监控摄像头进行监控追踪,当被检测对象超出监控摄像头的监控范围时,往往会导致监控追踪失败。

技术实现思路

[0004]本公开的内容部分用于以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
[0005]本公开的一些实施例提出了基于云边协同的行为识别方法、装置、电子设备和介质,来解决以上
技术介绍
部分提到的技术问题中的一项或多项。
[0006]第一方面,本公开的一些实施例提供了一种基于云边协同的行为识别方法,该方法包括:获取第一边缘终端录制的目标视频流,其中,上述目标视频流为包含目标对象的视频流;根据上述目标视频流,对上述目标对象进行行为识别,以生成行为识别信息序列;响应于确定上述行为识别信息序列中存在表征上述目标对象行为异常的行为识别信息,确定上述目标对象的当前位置,以生成当前位置信息;根据上述当前位置信息,对上述第一边缘终端的拍摄角度进行调整,以使得上述目标对象处在上述第一边缘终端拍摄的图像的画面中心;响应于确定上述目标对象未处在上述第一边缘终端的录制范围内,确定上述目标对象的移动轨迹;根据上述移动轨迹,对第二边缘终端集合中的每个第二边缘终端进行拍摄角度的调整。
[0007]可选地,上述方法还包括:从上述第一边缘终端和上述第二边缘终端集合中的第二边缘终端拉取实时视频流,得到实时视频流集合;在目标终端实时显示上述实时视频流集合中的实时视频流。
[0008]可选地,上述根据上述目标视频流,对上述目标对象进行行为识别,以生成行为识别信息序列,包括:对于上述目标视频流包括的每帧目标图像,响应于确定上述目标图像包
括上述目标对象,将上述目标图像确定为候选图像;对得到的候选图像序列中的每张候选图像包括的上述目标对象进行动作检测,以生成行为识别信息,得到上述行为识别信息序列。
[0009]可选地,上述确定上述目标对象的当前位置,以生成当前位置信息,包括:获取上述目标对象距离上述第一边缘终端的距离值,得到候选距离值;根据上述候选距离值、上述第一边缘终端的俯仰角度值和上述第一边缘终端对应的坐标信息,生成上述当前位置信息。
[0010]可选地,上述确定上述目标对象的移动轨迹,包括:确定上述得到的候选图像序列中的每个候选图像包括的上述目标对象的实时位置信息,得到实时位置信息集合;根据上述得到的候选图像序列中的每个候选图像对应的帧索引和上述候选图像对应的实时位置信息,确定上述移动轨迹。
[0011]可选地,上述第二边缘终端集合中的第二边缘终端通过以下步骤得到:获取目标边缘终端信息集合,其中,上述目标边缘终端信息集合中的目标边缘终端信息包括:边缘终端位置和边缘终端监控区域信息;对于上述目标边缘终端信息集合中的目标边缘终端信息,响应于确定上述目标边缘终端信息包括的边缘终端位置和边缘终端监控区域信息对应的区域与上述移动轨迹存在重叠部分,将上述目标边缘终端信息对应的边缘终端,确定为第二边缘终端。
[0012]可选地,上述根据上述移动轨迹,对第二边缘终端集合中的每个第二边缘终端进行拍摄角度的调整,包括:获取上述第二边缘终端的当前状态信息,其中,上述当前状态信息包括:当前俯仰角度值、当前偏转角度值和当前焦距信息;根据上述目标对象在上述移动轨迹上的行进方向,和上述第二边缘终端与上述移动轨迹重叠区域对应的视角范围信息,对上述当前俯仰角度值和当前偏转角度值进行调整;根据上述视角范围信息和上述当前焦距信息,确定焦距变化范围;响应于确定上述目标对象进入上述第二边缘终端的监控范围,根据上述目标对象的移动速度,在上述焦距变化范围,对上述第二边缘终端的焦距进行实时调整,以及控制上述第二边缘终端对上述目标对象进行实时追踪。
[0013]第二方面,本公开的一些实施例提供了一种基于云边协同的行为识别装置,装置包括:获取单元,被配置成获取第一边缘终端录制的目标视频流,其中,上述目标视频流为包含目标对象的视频流;行为识别单元,被配置成根据上述目标视频流,对上述目标对象进行行为识别,以生成行为识别信息序列;第一确定单元,被配置成响应于确定上述行为识别信息序列中存在表征上述目标对象行为异常的行为识别信息,确定上述目标对象的当前位置,以生成当前位置信息;第一调整单元,被配置成根据上述当前位置信息,对上述第一边缘终端的拍摄角度进行调整,以使得上述目标对象处在上述第一边缘终端拍摄的图像的画面中心;第二确定单元,被配置成响应于确定上述目标对象未处在上述第一边缘终端的录制范围内,确定上述目标对象的移动轨迹;第二调整单元,被配置成根据上述移动轨迹,对第二边缘终端集合中的每个第二边缘终端进行拍摄角度的调整。
[0014]可选地,上述装置还包括:从上述第一边缘终端和上述第二边缘终端集合中的第二边缘终端拉取实时视频流,得到实时视频流集合;在目标终端实时显示上述实时视频流集合中的实时视频流。
[0015]可选地,上述行为识别单元,被进一步配置成:对于上述目标视频流包括的每帧目
标图像,响应于确定上述目标图像包括上述目标对象,将上述目标图像确定为候选图像;对得到的候选图像序列中的每张候选图像包括的上述目标对象进行动作检测,以生成行为识别信息,得到上述行为识别信息序列。
[0016]可选地,上述第一确定单元,被进一步配置成:获取上述目标对象距离上述第一边缘终端的距离值,得到候选距离值;根据上述候选距离值、上述第一边缘终端的俯仰角度值和上述第一边缘终端对应的坐标信息,生成上述当前位置信息。
[0017]可选地,上述第二确定单元,被配置成:确定上述得到的候选图像序列中的每个候选图像包括的上述目标对象的实时位置信息,得到实时位置信息集合;根据上述得到的候选图像序列中的每个候选图像对应的帧索引和上述候选图像对应的实时位置信息,确定上述移动轨迹。
[0018]可选地,上述第二边缘终端集合中的第二边缘终端通过以下步骤得到:获取目标边缘终端信息集合,其中,上述目标边缘终端信息集合中的目标边缘终端信息包括:边缘终端位置和边缘终端监控区域信息;对于上述目标边缘终端信息集合中的目标边缘终端信息,响应于确定上述目标边缘终本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于云边协同的行为识别方法,包括:获取第一边缘终端录制的目标视频流,其中,所述目标视频流为包含目标对象的视频流;根据所述目标视频流,对所述目标对象进行行为识别,以生成行为识别信息序列;响应于确定所述行为识别信息序列中存在表征所述目标对象行为异常的行为识别信息,确定所述目标对象的当前位置,以生成当前位置信息;根据所述当前位置信息,对所述第一边缘终端的拍摄角度进行调整,以使得所述目标对象处在所述第一边缘终端拍摄的图像的画面中心;响应于确定所述目标对象未处在所述第一边缘终端的录制范围内,确定所述目标对象的移动轨迹;根据所述移动轨迹,对第二边缘终端集合中的每个第二边缘终端进行拍摄角度的调整。2.根据权利要求1所述的方法,其中,所述方法还包括:从所述第一边缘终端和所述第二边缘终端集合中的第二边缘终端拉取实时视频流,得到实时视频流集合;在目标终端实时显示所述实时视频流集合中的实时视频流。3.根据权利要求1所述的方法,其中,所述根据所述目标视频流,对所述目标对象进行行为识别,以生成行为识别信息序列,包括:对于所述目标视频流包括的每帧目标图像,响应于确定所述目标图像包括所述目标对象,将所述目标图像确定为候选图像;对得到的候选图像序列中的每张候选图像包括的所述目标对象进行动作检测,以生成行为识别信息,得到所述行为识别信息序列。4.根据权利要求1所述的方法,其中,所述确定所述目标对象的当前位置,以生成当前位置信息,包括:获取所述目标对象距离所述第一边缘终端的距离值,得到候选距离值;根据所述候选距离值、所述第一边缘终端的俯仰角度值和所述第一边缘终端对应的坐标信息,生成所述当前位置信息。5.根据权利要求3所述的方法,其中,所述确定所述目标对象的移动轨迹,包括:确定所述得到的候选图像序列中的每个候选图像包括的所述目标对象的实时位置信息,得到实时位置信息集合;根据所述得到的候选图像序列中的每个候选图像对应的帧索引和所述候选图像对应的实时位置信息,确定所述移动轨迹。6.根据权利要求1所述的方法,其中,所述第二边缘终端集合中的第二边缘终端通过以下步骤得到:获取目标边缘终端信息集合,其中,所述目标边缘终端信息集合中的目标边缘终端信息包括:边缘终端位置和边缘终端监控区域信息;对于所述目标...

【专利技术属性】
技术研发人员:杨赋韬屈国际朱卫光李文富范永学
申请(专利权)人:国网信息通信产业集团有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1