行为活动的检测方法、检测装置与计算机可读存储介质制造方法及图纸

技术编号:33044083 阅读:10 留言:0更新日期:2022-04-15 09:26
本申请提供了一种行为活动的检测方法、检测装置与计算机可读存储介质,该方法包括:对获取的连续多帧待处理图像进行检测,得到多个第一位置信息,每个待处理图像至少对应一个第一位置信息;确定待处理图像中与各第一位置信息对应的目标区域,并截取目标区域,得到目标区域图像,目标区域图像为包括一个目标对象的图像;对各目标区域图像进行关键点检测,生成多个关键点热度图,其中,一个目标区域图像对应多个关键点热度图;根据各待处理图像和对应的各第一位置信息,确定目标对象的运动轨迹,并根据目标对象的运动轨迹对应的多个关键点热度图,确定目标对象的行为活动,从而解决了现有技术中难以较为准确地检测目标对象的行为活动的问题。为活动的问题。为活动的问题。

【技术实现步骤摘要】
行为活动的检测方法、检测装置与计算机可读存储介质


[0001]本申请涉及行为活动的检测领域,具体而言,涉及一种行为活动的检测方法、检测装置与计算机可读存储介质。

技术介绍

[0002]跌倒检测技术主要用于解决家用场景下有人跌倒时,及时通知用户联系人,从而可以及时对跌倒者提供帮助和救治。
[0003]现有的跌倒检测算法主要有两类方式:一是基于专用硬件,如穿戴式传感器,深度图像摄像头,雷达等;二是基于目标对象关键点检测,再将关键点坐标输入分类器,来确定是否有跌倒事件。
[0004]专利技术人了解到,以上主流的跌倒检测方法,仍然存在诸多问题。例如,穿戴性设备往往需要多种传感器采集不同的数据,需要穿戴较为复杂的设备,传感器成本比较高,还存在用户体验较差的问题;而基于关键点的方法,对关键点的位置依赖较高,且没有充分利用目标对象各部位的运动信息。
[0005]因此,亟需一种能够较为准确地检测目标对象的行为活动的方法。
[0006]在
技术介绍
部分中公开的以上信息只是用来加强对本文所描述技术的
技术介绍
的理解,因此,
技术介绍
中可能包含某些信息,这些信息对于本领域技术人员来说并未形成在本国已知的现有技术。

技术实现思路

[0007]本申请的主要目的在于提供一种行为活动的检测方法、检测装置与计算机可读存储介质,以解决现有技术中难以较为准确地检测目标对象的行为活动的问题。
[0008]根据本专利技术实施例的一个方面,提供了一种行为活动的检测方法,包括:对获取的连续多帧待处理图像进行检测,得到多个第一位置信息,每个所述待处理图像至少对应一个所述第一位置信息,所述第一位置信息包括第一位置点的位置信息和第二位置点的位置信息,所述第一位置点和第二位置点在目标对角线上,所述目标对角线为检测到的所述待处理图像的包括目标对象的最小矩形区域的一个对角线;确定所述待处理图像中与各所述第一位置信息对应的目标区域,并截取所述目标区域,得到目标区域图像,所述目标区域图像为包括一个所述目标对象的图像,所述第一位置信息与所述目标区域图像一一对应;对各所述目标区域图像进行关键点检测,生成多个关键点热度图,其中,一个所述目标区域图像对应多个所述关键点热度图;根据各所述待处理图像和对应的各所述第一位置信息,确定所述目标对象的运动轨迹,并根据所述目标对象的运动轨迹对应的多个所述关键点热度图,确定所述目标对象的行为活动。
[0009]可选地,对各所述目标区域图像进行关键点检测,生成多个关键点热度图,包括:将各所述目标区域图像输入至第一预定模型,输出多个所述关键点热度图,所述第一预定模型为对所述目标区域图像进行关键点检测的神经网络模型。
[0010]可选地,根据各所述待处理图像和对应的各所述第一位置信息,确定所述目标对象的运动轨迹,包括:根据第N帧所述待处理图像和对应的所述第一位置信息,预测所述目标对象在第N+1帧所述待处理图像中的第二位置信息,N≥1;根据第N+1帧所述待处理图像的所述第一位置信息和所述第二位置信息,确定第N帧所述待处理图像和第N+1帧所述待处理图像是否对应于同一个所述目标对象;在第N帧所述待处理图像和第N+1帧所述待处理图像对应于同一个所述目标对象的情况下,根据第N帧所述待处理图像的所述第一位置信息和第N+1帧所述待处理图像的所述第一位置信息,确定所述目标对象的运动轨迹。
[0011]可选地,根据第N帧所述待处理图像和对应的所述第一位置信息,预测所述目标对象在第N+1帧所述待处理图像中的第二位置信息,包括:确定第N帧所述待处理图像对应的所述目标对象的运动速度和加速度;根据所述目标对象的所述运动速度和所述加速度,确定所述目标对象在预定时间段内的位移;根据所述位移以及第N帧所述待处理图像对应的所述第一位置信息,预测所述目标对象在第N+1帧所述待处理图像中的所述第二位置信息。
[0012]可选地,根据第N+1帧所述待处理图像的所述第一位置信息和所述第二位置信息,确定第N帧所述待处理图像和所述第N+1帧所述待处理图像是否对应于同一个所述目标对象,包括:确定第N+1帧所述待处理图像中与所述第一位置信息对应的区域为第一预定区域,并确定第N+1帧所述待处理图像中与所述第二位置信息对应的区域为第二预定区域;计算第一预定面积和第二预定面积的比值,得到目标比值,其中,所述第一预定面积为所述第一预定区域和所述第二预定区域的交集,所述第二预定面积为所述第一预定区域和所述第二预定区域的并集;在所述目标比值大于或者等于预定值的情况下,确定第N帧所述待处理图像和所述第N+1帧所述待处理图像对应于同一个所述目标对象。
[0013]可选地,根据所述目标对象的运动轨迹对应的多个所述关键点热度图,确定所述目标对象的行为活动,包括:按照时间顺序,根据所述目标对象的运动轨迹,确定与所述目标对象的运动轨迹对应的多个所述关键点热度图;将多个所述关键点热度图输入至第二预定模型,输出所述目标对象的行为活动,所述第二预定模型为对各所述关键点热度图进行分类的神经网络模型。
[0014]可选地,所述关键点包括以下至少之一:左眼睛、右眼睛、左肩膀、右肩膀、左耳朵、右耳朵、左手腕、右手腕、左膝盖、右膝盖、鼻子、左脚踝、右脚踝;所述行为活动包括以下至少之一:站立、坐下、跌倒、行走。
[0015]可选地,在根据所述目标对象的运动轨迹对应的多个所述关键点热度图,确定所述目标对象的行为活动之后,所述方法还包括:在所述目标对象的行为活动为所述跌倒的情况下,确定所述目标对象处于危险状态,并发送报警信息至终端设备。
[0016]根据本专利技术实施例的另一方面,还提供了一种行为活动的检测装置,包括:检测单元,用于对获取的连续多帧待处理图像进行检测,得到多个第一位置信息,每个所述待处理图像至少对应一个所述第一位置信息,所述第一位置信息包括第一位置点的位置信息和第二位置点的位置信息,所述第一位置点和第二位置点在目标对角线上,所述目标对角线为检测到的所述待处理图像的包括目标对象的最小矩形区域的一个对角线;第一确定单元,用于确定所述待处理图像中与各所述第一位置信息对应的目标区域,并截取所述目标区域,得到目标区域图像,所述目标区域图像为包括一个所述目标对象的图像,所述第一位置信息与所述目标区域图像一一对应;生成单元,用于对各所述目标区域图像进行关键点检
测,生成多个关键点热度图,其中,一个所述目标区域图像对应多个所述关键点热度图;第二确定单元,用于根据各所述待处理图像和对应的各所述第一位置信息,确定所述目标对象的运动轨迹,并根据所述目标对象的运动轨迹对应的多个所述关键点热度图,确定所述目标对象的行为活动。
[0017]根据本专利技术实施例的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质包括存储的程序,其中,所述程序执行任意一种所述的方法。
[0018]在本专利技术实施例中,所述行为活动的检测方法中,首先,获取连续的多帧待处理图像,并对获取到的多帧待处理图像进行检测,得到多个第一位置信息;然后,根据各所述第一位置信息,在对应的所述待处理图本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种行为活动的检测方法,其特征在于,包括:对获取的连续多帧待处理图像进行检测,得到多个第一位置信息,每个所述待处理图像至少对应一个所述第一位置信息,所述第一位置信息包括第一位置点的位置信息和第二位置点的位置信息,所述第一位置点和第二位置点在目标对角线上,所述目标对角线为检测到的所述待处理图像的包括目标对象的最小矩形区域的一个对角线;确定所述待处理图像中与各所述第一位置信息对应的目标区域,并截取所述目标区域,得到目标区域图像,所述目标区域图像为包括一个所述目标对象的图像,所述第一位置信息与所述目标区域图像一一对应;对各所述目标区域图像进行关键点检测,生成多个关键点热度图,其中,一个所述目标区域图像对应多个所述关键点热度图;根据各所述待处理图像和对应的各所述第一位置信息,确定所述目标对象的运动轨迹,并根据所述目标对象的运动轨迹对应的多个所述关键点热度图,确定所述目标对象的行为活动。2.根据权利要求1所述的方法,其特征在于,对各所述目标区域图像进行关键点检测,生成多个关键点热度图,包括:将各所述目标区域图像输入至第一预定模型,输出多个所述关键点热度图,所述第一预定模型为对所述目标区域图像进行关键点检测的神经网络模型。3.根据权利要求1所述的方法,其特征在于,根据各所述待处理图像和对应的各所述第一位置信息,确定所述目标对象的运动轨迹,包括:根据第N帧所述待处理图像和对应的所述第一位置信息,预测所述目标对象在第N+1帧所述待处理图像中的第二位置信息,N≥1;根据第N+1帧所述待处理图像的所述第一位置信息和所述第二位置信息,确定第N帧所述待处理图像和第N+1帧所述待处理图像是否对应于同一个所述目标对象;在第N帧所述待处理图像和第N+1帧所述待处理图像对应于同一个所述目标对象的情况下,根据第N帧所述待处理图像的所述第一位置信息和第N+1帧所述待处理图像的所述第一位置信息,确定所述目标对象的运动轨迹。4.根据权利要求3所述的方法,其特征在于,根据第N帧所述待处理图像和对应的所述第一位置信息,预测所述目标对象在第N+1帧所述待处理图像中的第二位置信息,包括:确定第N帧所述待处理图像对应的所述目标对象的运动速度和加速度;根据所述目标对象的所述运动速度和所述加速度,确定所述目标对象在预定时间段内的位移;根据所述位移以及第N帧所述待处理图像对应的所述第一位置信息,预测所述目标对象在第N+1帧所述待处理图像中的所述第二位置信息。5.根据权利要求3所述的方法,其特征在于,根据第N+1帧所述待处理图像的所述第一位置信息和所述第二位置信息,确定第N帧所述待处理图像和所述第N+1帧所述待处理图像是否对应于同一个所述目标对象,包括:确定第N+1帧所述待处理图像中与所述...

【专利技术属性】
技术研发人员:王韶杰
申请(专利权)人:深圳市联洲国际技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1