明厨亮灶场景下的人员玩手机行为检测方法及装置制造方法及图纸

技术编号:35822679 阅读:23 留言:0更新日期:2022-12-03 13:48
本发明专利技术提供一种明厨亮灶场景下的人员玩手机行为检测方法及装置,属于机器视觉技术领域,所述方法包括:对单帧图像中的人体关键点位和目标物体进行检测;基于人体骨骼关节点位信息和目标物体信息,确定人脸与目标物体之间的距离、人体姿态与目标姿态的相似度以及人脸朝向与目标物体之间的偏离程度;基于所述距离、所述相似度和所述偏离程度,确定人员行为是否为玩手机行为。本发明专利技术基于单帧图像检测人体关键点和目标物体,提高了系统运行效率,结合所述距离、所述相似度和所述偏离程度,确定人员行为是否为玩手机行为,解决了泛化性能差和鲁棒性差的问题,对人体关键点位进行检测,提升了俯拍和侧脸等情况的识别准确率。提升了俯拍和侧脸等情况的识别准确率。提升了俯拍和侧脸等情况的识别准确率。

【技术实现步骤摘要】
明厨亮灶场景下的人员玩手机行为检测方法及装置


[0001]本专利技术涉及机器视觉
,尤其涉及一种明厨亮灶场景下的人员玩手机行为检测方法及装置。

技术介绍

[0002]随着信息技术的快速发展,人们对手机的依赖程度也越来越严重,由于玩手机消极怠工,甚至造成事故的情况屡见不鲜。比如在厨师烹饪的过程中,可能因违规玩手机,忘记关闭燃气炉等火源,造成火灾等安全事故。此外,在岗玩手机还可能导致工作效率降低,影响食品安全卫生等问题。因此,在明厨亮灶场景中,玩手机导致的怠工和安全风险等问题需要引起高度重视。如果通过人力监管的方式对人员进行监控,会增加人力成本,因此,需要对人员玩手机等目标行为进行智能监控。
[0003]目前对目标行为进行智能监控,存在如下缺点:若采用单帧图像进行分析,由于目标背景干扰等客观因素,对玩手机行为特征提取较难,容易导致误报和漏报等情况;若采用连续多帧图像进行分析,则需要消耗大量的算力资源,且分析结果存在时延。
[0004]因此,现有的智能监控方法无法同时保证对目标行为识别的准确性和及时性。

技术实现思路

[0005]本专利技术提供一种明厨亮灶场景下的人员玩手机行为检测方法及装置,可以既保证对玩手机行为识别的准确性,还可以保证对玩手机行为识别的及时性。
[0006]本专利技术提供一种明厨亮灶场景下的人员玩手机行为检测方法,包括:
[0007]获取单帧图像,对所述单帧图像中的人体关键点位和目标物体进行检测;
[0008]在检测到所述单帧图像中存在人体关键点位和目标物体的情况下,基于从所述单帧图像中提取的人体骨骼关节点位信息和目标物体信息,确定人脸与所述目标物体之间的距离、人体姿态与目标姿态的相似度,以及人脸朝向与所述目标物体之间的偏离程度;
[0009]基于所述距离、所述相似度和所述偏离程度,确定人员行为是否属于目标行为;
[0010]其中,所述目标物体为手机,所述目标姿态为所述目标行为对应的姿态,所述目标行为为明厨亮灶场景下的人员玩手机行为。
[0011]根据本专利技术提供的明厨亮灶场景下的人员玩手机行为检测方法,所述对所述单帧图像中的人体关键点位和目标物体进行检测,包括:
[0012]将所述单帧图像输入至人体检测模型进行人体关键点位检测,得到所述人体检测模型输出的第一检测结果,以基于所述第一检测结果判断所述单帧图像中是否存在人体骨骼关键点;
[0013]将所述单帧图像输入至物体检测模型进行目标物体检测,得到所述物体检测模型输出的第二检测结果,以基于所述第二检测结果判断所述单帧图像中是否存在目标物体;
[0014]其中,所述人体检测模型是基于自底向上算法和图论算法训练得到,所述物体检测模型是基于小目标检测算法训练得到。
[0015]根据本专利技术提供的明厨亮灶场景下的人员玩手机行为检测方法,所述人体检测模型和所述物体检测模型均分别部署在多个处理器上并行运行。
[0016]根据本专利技术提供的明厨亮灶场景下的人员玩手机行为检测方法,所述小目标检测算法为单阶段目标检测算法。
[0017]根据本专利技术提供的明厨亮灶场景下的人员玩手机行为检测方法,所述基于从所述单帧图像中提取的人体骨骼关节点位信息和目标物体信息,确定人脸与所述目标物体之间的距离、人体姿态与目标姿态的相似度,以及人脸朝向与所述目标物体之间的偏离程度,包括:
[0018]将所述人体骨骼关节点位信息和所述目标物体信息输入至训练好的人体姿态估计模型,得到所述人体姿态估计模型输出的人脸与所述目标物体之间的距离、人体姿态与目标姿态的相似度,以及人脸朝向与所述目标物体之间的偏离程度;
[0019]其中,所述人体姿态估计模型基于深度学习算法训练得到。
[0020]根据本专利技术提供的明厨亮灶场景下的人员玩手机行为检测方法,所述基于所述距离、所述相似度和所述偏离程度,确定人员行为是否属于目标行为,包括:
[0021]基于所述距离、所述相似度和所述偏离程度,确定人体姿态为目标姿态的概率;
[0022]在所述概率大于预设阈值的情况下,确定人员行为属于目标行为。
[0023]根据本专利技术提供的明厨亮灶场景下的人员玩手机行为检测方法,所述获取单帧图像,包括:
[0024]获取视频数据,对所述视频数据进行解码抽帧,得到所述单帧图像。
[0025]本专利技术还提供一种明厨亮灶场景下的人员玩手机行为检测装置,包括:
[0026]第一检测模块,用于获取单帧图像,对所述单帧图像中的人体关键点位和目标物体进行检测;
[0027]第二检测模块,用于在检测到所述单帧图像中存在人体关键点位和目标物体的情况下,基于从所述单帧图像中提取的人体骨骼关节点位信息和目标物体信息,确定人脸与所述目标物体之间的距离、人体姿态与目标姿态的相似度,以及人脸朝向与所述目标物体之间的偏离程度;
[0028]判断模块,用于基于所述距离、所述相似度和所述偏离程度,确定人员行为是否属于目标行为;
[0029]其中,所述目标物体为手机,所述目标姿态为所述目标行为对应的姿态,所述目标行为为明厨亮灶场景下的人员玩手机行为。
[0030]本专利技术还提供一种服务器,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一项所述明厨亮灶场景下的人员玩手机行为检测方法。
[0031]本专利技术还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一种所述明厨亮灶场景下的人员玩手机行为检测方法。
[0032]本专利技术还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述任一种所述明厨亮灶场景下的人员玩手机行为检测方法。
[0033]本专利技术还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述任一种所述明厨亮灶场景下的人员玩手机行为检测方法。
[0034]本专利技术提供的明厨亮灶场景下的人员玩手机行为检测方法及装置,通过对单帧图像中的人体关键点位和目标物体进行检测,基于人体骨骼关节点位信息和目标物体信息,确定人脸与目标物体之间的距离、人体姿态与目标姿态的相似度,以及人脸朝向与目标物体的偏离程度,确定人员行为是否是玩手机行为。相对于现有技术中采用图像分类算法对图像进行处理,本专利技术对单帧图像检测人体关键点和目标物体,提高了系统运行效率,结合所述距离、所述相似度和所述偏离程度,确定人员行为是否是玩手机行为,解决了传统人工特征设计方法泛化性能差和鲁棒性差的问题。对人体关键点位(例如人脸关键点位、手部关键点位和躯干关键点位)进行检测,提升了俯拍和侧脸等情况的识别准确率。因此,本专利技术可以既保证对玩手机行为识别的准确性,还可以保证对玩手机行为识别的及时性。
附图说明
[0035]为了更清楚地说明本专利技术或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种明厨亮灶场景下的人员玩手机行为检测方法,其特征在于,包括:获取单帧图像,对所述单帧图像中的人体关键点位和目标物体进行检测;在检测到所述单帧图像中存在人体关键点位和目标物体的情况下,基于从所述单帧图像中提取的人体骨骼关节点位信息和目标物体信息,确定人脸与所述目标物体之间的距离、人体姿态与目标姿态的相似度,以及人脸朝向与所述目标物体之间的偏离程度;基于所述距离、所述相似度和所述偏离程度,确定人员行为是否属于目标行为;其中,所述目标物体为手机,所述目标姿态为所述目标行为对应的姿态,所述目标行为为明厨亮灶场景下的人员玩手机行为。2.根据权利要求1所述的明厨亮灶场景下的人员玩手机行为检测方法,其特征在于,所述对所述单帧图像中的人体关键点位和目标物体进行检测,包括:将所述单帧图像输入至人体检测模型进行人体关键点位检测,得到所述人体检测模型输出的第一检测结果,以基于所述第一检测结果判断所述单帧图像中是否存在人体骨骼关键点;将所述单帧图像输入至物体检测模型进行目标物体检测,得到所述物体检测模型输出的第二检测结果,以基于所述第二检测结果判断所述单帧图像中是否存在目标物体;其中,所述人体检测模型是基于自底向上算法和图论算法训练得到,所述物体检测模型是基于小目标检测算法训练得到。3.根据权利要求2所述的明厨亮灶场景下的人员玩手机行为检测方法,其特征在于,所述人体检测模型和所述物体检测模型均分别部署在多个处理器上并行运行。4.根据权利要求2所述的明厨亮灶场景下的人员玩手机行为检测方法,其特征在于,所述小目标检测算法为单阶段目标检测算法。5.根据权利要求1所述的明厨亮灶场景下的人员玩手机行为检测方法,其特征在于,所述基于从所述单帧图像中提取的人体骨骼关节点位信息和目标物体信息,确定人脸与所述目标物体之间的距离、人体姿态与目标姿态的相似度,以及人脸朝向与所述目标物体之间的偏离程度,包括:将所述人体骨骼关节点位信息和所述目标物体信息输入至训练好的人体...

【专利技术属性】
技术研发人员:梁秉豪袁明明王凯王涛李知澳
申请(专利权)人:浪潮通信信息系统有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1