行为识别方法、装置、电子设备及可读存储介质制造方法及图纸

本公开实施例中提供了一种行为识别方法、装置、电子设备及可读存储介质，属于图像处理技术领域。针对车辆在行驶过程中驾驶区域的监控图像进行图像处理，识别所述监控图像中的驾驶区域中的目标对象的实时行为状态，并判断所述实时行为状态是否为满足预设条件的预设行为状态中的任一种，进而在检测到实时行为状态为对应危险驾驶的预设行为状态，输出所述车辆存在异常驾驶行为的报警信息。通过本公开的方案，可以针对行驶过程中的司机驾驶行为进行实时监控并及时预警，提高了公交车等车辆的安全驾驶保障，极大程度地保证了公共交通安全。极大程度地保证了公共交通安全。极大程度地保证了公共交通安全。

Behavior recognition method, device, electronic device and readable storage medium

【技术实现步骤摘要】
行为识别方法、装置、电子设备及可读存储介质


[0001]本专利技术涉及图像处理
，具体而言，涉及一种行为识别方法、装置、电子设备及可读存储介质。

技术介绍

[0002]多年来，道路安全领域的许多研究人员一直在研究与道路交通事故相关的危险因素。研究结果表明，我国交通事故主导因素即驾驶员失误所导致的交通事故占全国道路交通事故的90％以上。公交车作为国家公共交通安全的载体，一旦发生事故，则损失巨大。
[0003]针对公交车司机行为异常和司乘冲突行为所引发的公共交通安全问题，简单传统的视频监控系统只能对事件过程进行存储和上传调阅，通过人工观看和甄别，对事件进行处置。这一系列繁琐的过程不仅极大的消耗人力物力，而且对突发事件错过了最佳的预警时间。若将监控视频技术与识别算法结合，对司机行为异常画面和乘客妨碍司机驾驶画面进行判别，再利用通讯技术对判别异常行为远程预警，能够对实时发生的司机异常事件进行报警，降低事故发生的同时及时的处理紧急突发事件，更有效的保护了司机、乘客及路人的生命和财产安全。
[0004]综上所述，亟需一种在视频监控下对公交车司机行为异常实时识别的系统，以解决当前公共交通安全领域存在的问题。

技术实现思路

[0005]有鉴于此，本公开实施例提供一种行为识别方法、装置电子设备及可读存储介质，至少部分解决现有技术中存在的问题。
[0006]第一方面，本公开实施例提供了一种行为识别方法，所述方法包括：
[0007]获取车辆在行驶过程中驾驶区域的监控图像；
[0008]识别所述监控图像中的驾驶区域中的目标对象的实时行为状态；
[0009]判断所述实时行为状态是否为满足预设条件的预设行为状态中的任一种，其中，预设行为状态包括接打电话、离开驾驶位、与外区对象接触和身体抽搐中的至少一种；
[0010]若所述实时行为状态为预设行为状态，输出所述车辆存在异常驾驶行为的报警信息。
[0011]根据本公开实施例的一种具体实现方式，所述判断所述实时行为状态是否为满足预设条件的预设行为状态的步骤，包括：
[0012]若所述实时行为状态为预设行为状态，获取所述实时行为状态的发生时段，其中，所述发生时段为行驶时段和静止时段中的任一种；
[0013]获取所述实时行为状态的实际边界值；
[0014]根据所述实时行为状态的发生时段和所述实际边界值，判断所述实时行为状态是否为满足预设条件的预设行为状态。
[0015]根据本公开实施例的一种具体实现方式，所述获取所述实时行为状态的实际边界
值的步骤，包括：
[0016]根据所述车辆内驾驶区域与监控图像的范围对应关系，在所述监控图像中确定驾驶区域及周边关联区域的像素区域；
[0017]在所述监控图像中确定驾驶区域内的驾驶员对象的坐标数据以及乘客对象的坐标数据；
[0018]计算所述驾驶员对象和所述乘客对象之间的最近距离，作为所述实际边界值。
[0019]根据本公开实施例的一种具体实现方式，若所述实时行为状态为与外区对象接触或者离开驾驶位，所述根据所述实时行为状态的发生时段和所述实际边界值，判断所述实时行为状态是否为满足预设条件的预设行为状态的步骤，包括：
[0020]若所述实时行为状态的发生时段为行驶时段，判断所述实际边界值是否大于或者等于预先定义的边界阈值；
[0021]若所述实际边界值大于或者等于所述边界阈值，判定所述实时行为状态为满足预设条件的预设行为状态。
[0022]根据本公开实施例的一种具体实现方式，所述输出所述车辆存在异常驾驶行为的报警信息的步骤，包括：
[0023]控制所述车辆发出语音报警或者自动制动。
[0024]根据本公开实施例的一种具体实现方式，所述判断所述实时行为状态是否为满足预设条件的预设行为状态中的任一种的步骤之前，所述方法还包括：
[0025]收集对应异常驾驶行为的初始异常行为图片和正常驾驶行为的初始正常行为图片；
[0026]将所述初始异常行为图片进行预处理，形成预设数量的异常行为样本图片；
[0027]利用预设数量的异常行为样本图片训练基础卷积神经网络，得到异常行为行为状态识别模型；
[0028]所述判断所述实时行为状态是否为满足预设条件的预设行为状态中的任一种的步骤，包括：
[0029]将所述监控图像输入所述行为状态识别模型，得到所述驾驶区域的实时行为状态。
[0030]根据本公开实施例的一种具体实现方式，所述将所述初始异常行为图片进行数据预处理的步骤，包括：
[0031]采用Mosaic数据增强、随机缩放、随机裁剪或者随机排布的方式将所述初始异常行为图片进行预处理。
[0032]第二方面，本公开实施例提供了一种行为识别装置，包括：
[0033]获取模块，用于获取车辆在行驶过程中驾驶区域的监控图像；
[0034]识别模块，用于识别所述监控图像中的驾驶区域中的目标对象的实时行为状态；
[0035]判断模块，用于判断所述实时行为状态是否为满足预设条件的预设行为状态中的任一种，其中，预设行为状态包括接打电话、离开驾驶位、与外区对象接触和身体抽搐中的至少一种；
[0036]报警模块，用于若所述实时行为状态为预设行为状态，输出所述车辆存在异常驾驶行为的报警信息。
[0037]第三方面，本公开实施例还提供了一种电子设备，该电子设备包括：
[0038]至少一个处理器；以及，
[0039]与该至少一个处理器通信连接的存储器；其中，
[0040]该存储器存储有可被该至少一个处理器执行的指令，该指令被该至少一个处理器执行，以使该至少一个处理器能够执行前述第一方面或第一方面的任一实现方式中的行为识别方法。
[0041]第四方面，本公开实施例还提供了一种非暂态计算机可读存储介质，该非暂态计算机可读存储介质存储计算机指令，该计算机指令用于使该计算机执行前述第一方面或第一方面的任一实现方式中的行为识别方法。
[0042]第五方面，本公开实施例还提供了一种计算机程序产品，该计算机程序产品包括存储在非暂态计算机可读存储介质上的计算程序，该计算机程序包括程序指令，当该程序指令被计算机执行时，使该计算机执行前述第一方面或第一方面的任一实现方式中的行为识别方法。
[0043]本公开实施例中的行为识别方案，针对车辆在行驶过程中驾驶区域的监控图像进行图像处理，识别所述监控图像中的驾驶区域中的目标对象的实时行为状态，并判断所述实时行为状态是否为满足预设条件的预设行为状态中的任一种，进而在检测到实时行为状态为对应危险驾驶的预设行为状态，输出所述车辆存在异常驾驶行为的报警信息。通过本公开的方案，可以针对行驶过程中的司机驾驶行为进行实时监控并及时预警，提高了公交车等车辆的安全驾驶保障，极大程度地保证了公共交通安全。
附图说明
[0044]为了更清楚地说明本公开实施例的技术方案，下面将对实施例中所需本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种行为识别方法，其特征在于，所述方法包括：获取车辆在行驶过程中驾驶区域的监控图像；识别所述监控图像中的驾驶区域中的目标对象的实时行为状态；判断所述实时行为状态是否为满足预设条件的预设行为状态中的任一种，其中，预设行为状态包括接打电话、离开驾驶位、与外区对象接触和身体抽搐中的至少一种；若所述实时行为状态为预设行为状态，输出所述车辆存在异常驾驶行为的报警信息。2.根据权利要求1所述的行为识别方法，其特征在于，所述判断所述实时行为状态是否为满足预设条件的预设行为状态的步骤，包括：若所述实时行为状态为预设行为状态，获取所述实时行为状态的发生时段，其中，所述发生时段为行驶时段和静止时段中的任一种；获取所述实时行为状态的实际边界值；根据所述实时行为状态的发生时段和所述实际边界值，判断所述实时行为状态是否为满足预设条件的预设行为状态。3.根据权利要求2所述的行为识别方法，其特征在于，所述获取所述实时行为状态的实际边界值的步骤，包括：根据所述车辆内驾驶区域与监控图像的范围对应关系，在所述监控图像中确定驾驶区域及周边关联区域的像素区域；在所述监控图像中确定驾驶区域内的驾驶员对象的坐标数据以及乘客对象的坐标数据；计算所述驾驶员对象和所述乘客对象之间的最近距离，作为所述实际边界值。4.根据权利要求2所述的行为识别方法，其特征在于，若所述实时行为状态为与外区对象接触或者离开驾驶位，所述根据所述实时行为状态的发生时段和所述实际边界值，判断所述实时行为状态是否为满足预设条件的预设行为状态的步骤，包括：若所述实时行为状态的发生时段为行驶时段，判断所述实际边界值是否大于或者等于预先定义的边界阈值；若所述实际边界值大于或者等于所述边界阈值，判定所述实时行为状态为满足预设条件的预设行为状态。5.根据权利要求1所述的行为识别方法，其特征在于，所述输出所述车辆存在异常驾驶行为的报警信息的步骤，包括：控制所述车辆发出语音报警或者自动制动。6.根据权...

【专利技术属性】
技术研发人员：刘世达，王旭云，王力，杨明，全振，邢更力，
申请(专利权)人：北方工业大学，
类型：发明
国别省市：