行为检测方法、装置、车辆、电子设备及存储介质制造方法及图纸

本公开提出一种行为检测方法、装置、车辆、电子设备及存储介质，该方法包括：获取待检测图像，并识别待检测图像中的目标物体信息和图像区域信息，以及根据目标物体信息和图像区域信息，确定人体行为信息。通过本公开，由于是联合待检测图像中的目标物体信息和图像区域信息对待检测图像进行行为检测，能够有效地提升行为检测识别的准确性和检测识别效率，从而能够有效地提升行为检测方法的鲁棒性和适用性。够有效地提升行为检测方法的鲁棒性和适用性。够有效地提升行为检测方法的鲁棒性和适用性。

【技术实现步骤摘要】
行为检测方法、装置、车辆、电子设备及存储介质


[0001]本公开涉及人工智能
，尤其涉及一种行为检测方法、装置、车辆、电子设备及存储介质。

技术介绍

[0002]在车辆驾驶场景中，规范司机的驾驶行为是解决车辆安全隐患的一个重要方面，由此，亟需提出一种行为检测方法，以在车辆驾驶场景中，对司机的非规范行为(例如，抽烟行为，喝水行为，接打电话行为)进行检测，从而对司机的行为进行相应规范。
[0003]相关技术中，在进行行为检测时，行为检测的准确性较差，行为检测效果不佳。

技术实现思路

[0004]本公开旨在至少在一定程度上解决相关技术中的技术问题之一。
[0005]为此，本公开的目的在于提出一种行为检测方法、装置、车辆、电子设备及存储介质，由于是联合待检测图像中的目标物体信息和图像区域信息对待检测图像进行行为检测，能够有效地提升行为检测识别的准确性和检测识别效率，从而能够有效地提升行为检测方法的鲁棒性和适用性。
[0006]本公开第一方面实施例提出的行为检测方法，包括：获取待检测图像；识别待检测图像中的目标物体信息和图像区域信息；以及根据目标物体信息和图像区域信息，确定人体行为信息。
[0007]本公开第一方面实施例提出的行为检测方法，通过获取待检测图像，并识别待检测图像中的目标物体信息和图像区域信息，以及根据目标物体信息和图像区域信息，确定人体行为信息。由此，由于是联合待检测图像中的目标物体信息和图像区域信息对待检测图像进行行为检测，能够有效地提升行为检测识别的准确性和检测识别效率，从而能够有效地提升行为检测方法的鲁棒性和适用性。
[0008]本公开第二方面实施例提出的行为检测装置，包括：获取模块，用于获取待检测图像；识别模块，用于识别待检测图像中的目标物体信息和图像区域信息；以及确定模块，用于根据目标物体信息和图像区域信息，确定人体行为信息。
[0009]本公开第二方面实施例提出的行为检测装置，通过获取待检测图像，并识别待检测图像中的目标物体信息和图像区域信息，以及根据目标物体信息和图像区域信息，确定人体行为信息。由此，由于是联合待检测图像中的目标物体信息和图像区域信息对待检测图像进行行为检测，能够有效地提升行为检测识别的准确性和检测识别效率，从而能够有效地提升行为检测方法的鲁棒性和适用性。
[0010]根据本公开第三方面，提供了一种车辆，包括：本公开第二方面实施例提出的行为检测装置。
[0011]根据本公开第四方面，提供了一种电子设备，包括：至少一个处理器；以及与至少一个处理器通信连接的存储器；其中，存储器存储有可被至少一个处理器执行的指令，指令
被至少一个处理器执行，以使至少一个处理器能够执行本公开第一方面实施例的行为检测方法。
[0012]根据本公开第五方面，提出了一种存储有计算机指令的非瞬时计算机可读存储介质，计算机指令用于使计算机执行本公开第一方面实施例的行为检测方法。
[0013]根据本公开第六方面，提供了一种计算机程序产品，包括计算机程序，计算机程序在被处理器执行时实现本公开第一方面实施例的行为检测方法。
[0014]本公开附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本公开的实践了解到。
附图说明
[0015]本公开上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
[0016]图1是本公开一实施例提出的行为检测方法的流程示意图；
[0017]图2是本公开另一实施例提出的行为检测方法的流程示意图；
[0018]图3是本公开另一实施例提出的行为检测方法的流程示意图；
[0019]图4是本公开一实施例提出的行为检测装置的结构示意图；
[0020]图5是本公开另一实施例提出的行为检测装置的结构示意图；
[0021]图6是本公开一实施例提出的车辆的结构示意图；
[0022]图7示出了适于用来实现本公开实施方式的示例性电子设备的框图。
具体实施方式
[0023]下面详细描述本公开的实施例，实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本公开，而不能理解为对本公开的限制。相反，本公开的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。
[0024]图1是本公开一实施例提出的行为检测方法的流程示意图。
[0025]其中，需要说明的是，本实施例的行为检测方法的执行主体为行为检测装置，该装置可以由软件和/或硬件的方式实现，该装置可以配置在电子设备中，电子设备可以包括但不限于终端、服务器端等。
[0026]如图1所示，该行为检测方法，包括：
[0027]S101：获取待检测图像。
[0028]需要说明的是，本公开实施例中获取待检测图像，均是在经过相关用户授权后获取的，其过程均符合相关法律、法规的规定，且不违背公序良俗。
[0029]其中，当前待对其进行行为检测的图像，即可以被称为待检测图像，该待检测图像可以是针对人脸采集得到的人脸图像，或者，该待检测图像，还可以是针对人体某个部位(例如，手部，对此不做限制)采集得到的图像，对此不做限制。
[0030]本公开实施例中，待测图像的数量可以是一个或者多个，待测图像可以具体例如一幅图像，或者一段视频中的视频帧对应的图像，待测图像还可以是二维图像，或者三维图像，对此不做限制。
[0031]一些实施例中，获取待检测图像，可以是采用手机，相机等具有摄像功能的摄像装置，针对人脸采集得到的人脸图像，或者，还可以是对视频流进行解析，以得到多个视频帧图像，再从多个视频帧图像中挑选出包含人脸的视频帧图像，并将该视频帧图像作为待检测图像，而后，可以基于前述获取得到的待检测图像执行后续的行为检测方法，对此不做限制。
[0032]S102：识别待检测图像中的目标物体信息和图像区域信息。
[0033]本公开实施例中，当对前述获取得到的待检测图像进行行为检测时，待检测图像中可以被分为多个图像区域，以待检测图像是人脸图像为例，可以将待检测图像分为，人脸区域(例如，眼部区域，嘴巴区域，)，物体区域(例如，眼镜区域，喝水时的吸管区域，)对此不做限制。
[0034]其中，用于对待检测图像中的人脸区域进行描述的信息，即可以被称为图像区域信息，该图像区域信息可以具体例如为图像区域像素信息，图像区域的特征信息等，对此不做限制。
[0035]其中，用于对待检测图像中的目标物体进行描述的信息，即可以被称为目标物体信息，该目标物体信息可以具体例如为，目标物体相对于待检测图像的位置信息，目标物体的特征信息等，对此不做限制。
[0036]一些实施例中，识别待检测图像中的目标物体信息和图像区域信息，可以是采用特征解析的方法(例如，局部二值模式((Local Bina本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种行为检测方法，其特征在于，包括：获取待检测图像；识别所述待检测图像中的目标物体信息和图像区域信息；以及根据所述目标物体信息和所述图像区域信息，确定人体行为信息。2.如权利要求1所述的方法，其特征在于，所述识别所述待检测图像中的目标物体信息和图像区域信息，包括：识别所述待检测图像中的目标物体区域和部位图像区域；根据所述目标物体区域，确定所述目标物体信息；根据所述部位图像区域，确定所述图像区域信息。3.如权利要求2所述的方法，其特征在于，所述根据所述目标物体区域，确定所述目标物体信息，包括：获取所述目标物体区域的区域类别信息；将所述区域类别信息作为所述目标物体信息。4.如权利要求2所述的方法，其特征在于，所述根据所述部位图像区域，确定所述图像区域信息，包括：根据所述部位图像区域，确定部位类别；将所述部位类别作为所述图像区域信息。5.如权利要求3或4所述的方法，其特征在于，所述根据所述目标物体信息和所述图像区域信息，确定人体行为信息，包括：在候选行为信息对应的候选物体信息和候选区域信息之间的候选关联关系与目标关联关系之间满足设定条件时，将候选行为信息作为所述人体行为信息；其中，所述目标关联关系是所述目标物体信息和所述图像区域信息之间的关联关系。6.如权利要求5所述的方法，其特征在于，还包括：将所述目标物体信息和所述图像区域信息输入至行为信息分类模型中；基于所述行为信息分类模型，确定所述目标物体信息和所述图像区域信息之间的待匹配关系与所述候选关联关系之间满足设定条件。7.如权利要求2所述的方法，其特征在于，所述识别所述待检测图像中的目标物体区域，包括：将所述待检测图像输入至预训练的物体区域检测模型之中，由物体区域检测模型对所述待检测图像进行物体区域检测，以得到所述目标物体区域。8.如权利要求2所述的方法，其特征在于，所述识别所述待检测图像中的部位图像区域，包括：将所述待检测图像输入至预训练的关键点检测模型之中，由所述关键点检测模型对所述待检测图像进行关键点检测，以得到多个关键点信息；基于所述多个关键点信息对所述待检测图像进行剪切处理，以得到所述部位图像区域。9.如权利要求1所述的方法，其特征在于，所述获取待检测图像，包括：获取初始图像，其中，所述初始图像由车辆的摄像装置捕获，所述初始图像对应驾驶区域标注信息；
将所述初始图像输入至人脸检测模型中，由所述人脸检测模型对所述初始图像进行人脸检测，以得到人脸检测结果；如果所述人脸检测结果指示：所述初始图像中存在人脸，则根据所述驾驶区域标注信息，从所述初始图像中确定出所述待检测图像。10.一种行为检测装置，其特征在于，所述装置包括：获取模块，用于获取待检测图像；识别模块，用于识别所述待检测图像中的目标物体信息和图像区域信息；以及确定模块，用于根据所述目标物体信息和所述图像区域信息，确定人体行为信息。11.如权利要求10所述的装置，其特征在于，所述识别模块，...

【专利技术属性】
技术研发人员：韦涛，
申请(专利权)人：北京罗克维尔斯科技有限公司，
类型：发明
国别省市：