乘梯行为检测方法及装置、电子设备和存储介质制造方法及图纸

本公开涉及一种乘梯行为检测方法及装置、电子设备和存储介质，所述方法包括：获取目标电梯的视频流；根据所述视频流进行乘梯行为检测，确定视觉检测结果，其中，所述视觉检测结果用于指示所述目标电梯内是否出现异常乘梯行为；在所述视觉检测结果指示所述目标电梯内出现至少一种异常乘梯行为的情况下，获取所述目标电梯的目标设备信息；根据所述目标设备信息，对所述至少一种异常乘梯行为进行校验，确定目标检测结果，其中，所述目标检测结果用于指示所述目标电梯内出现的目标异常乘梯行为。本公开实施例可以提高异常乘梯行为的检测准确率，从而可以有效降低异常乘梯行为导致的电梯事故发生的概率。梯事故发生的概率。梯事故发生的概率。

【技术实现步骤摘要】
乘梯行为检测方法及装置、电子设备和存储介质


[0001]本公开涉及计算机
，尤其涉及一种乘梯行为检测方法及装置、电子设备和存储介质。

技术介绍

[0002]随着经济的发展和基础设施建设的不断完善，电梯在社区、商场、写字楼、公共交通等场景的应用也越来越广泛。据统计，三分之一的电梯事故是由乘客在乘坐电梯时出现异常乘梯行为造成的，例如，在电梯内打架、在电梯内蹦跳、乘客或乘客携带电动车乱敲乱撞电梯门等造成电梯震动的行为，或者是用手、其它物体等反复阻挡电梯门关闭的行为。因此，亟需一种能够及时准确地检测到电梯内的异常乘梯行为的乘梯行为检测方法，以实现及时告警制止异常乘梯行为，进而降低电梯事故发生的概率。

技术实现思路

[0003]本公开提出了一种乘梯行为检测方法及装置、电子设备和存储介质的技术方案。
[0004]根据本公开的一方面，提供了一种乘梯行为检测方法，包括：获取目标电梯的视频流；根据所述视频流进行乘梯行为检测，确定视觉检测结果，其中，所述视觉检测结果用于指示所述目标电梯内是否出现异常乘梯行为；在所述视觉检测结果指示所述目标电梯内出现至少一种异常乘梯行为的情况下，获取所述目标电梯的目标设备信息；根据所述目标设备信息，对所述至少一种异常乘梯行为进行校验，确定目标检测结果，其中，所述目标检测结果用于指示所述目标电梯内出现的目标异常乘梯行为。
[0005]在一种可能的实现方式中，所述根据所述视频流进行乘梯行为检测，确定视觉检测结果，包括：对所述视频流进行目标检测，确定所述视频流中的待跟踪目标；对所述视频流进行特征提取，得到所述待跟踪目标对应的待检测特征信息；根据至少一种异常乘梯行为检测网络，对所述待检测特征信息进行乘梯行为检测，确定所述视觉检测结果。
[0006]在一种可能的实现方式中，在对所述视频流进行特征提取，得到所述待跟踪目标对应的待检测特征信息之后，所述方法还包括：确定所述待检测特征信息与预先存储的至少一种参考特征信息之间的相似度，其中，一种参考特征信息对应一种异常乘梯行为；针对任一所述参考特征信息，在所述待检测特征信息与所述参考特征信息之间的相似度大于相似度阈值的情况下，将所述待检测特征信息输入用于检测所述参考特征信息对应的异常乘梯行为的异常乘梯行为检测网络。
[0007]在一种可能的实现方式中，所述根据至少一种异常乘梯行为检测网络，对所述待检测特征信息进行乘梯行为检测，确定所述视觉检测结果，包括：针对任一所述异常乘梯行为检测网络，利用所述异常乘梯行为检测网络，对所述待检测特征信息进行乘梯行为检测，得到所述目标电梯内出现所述异常乘梯行为检测网络对应的异常乘梯行为的预测概率；在所述预测概率大于或等于所述异常乘梯行为检测网络对应的概率阈值的情况下，确定所述目标电梯内出现所述异常乘梯行为检测网络对应的异常乘梯行为。
[0008]在一种可能的实现方式中，所述在所述视觉检测结果指示所述目标电梯内出现至少一种异常乘梯行为的情况下，获取所述目标电梯的目标设备信息，包括：确定每个所述异常乘梯行为的行为类型；根据每个所述异常乘梯行为的行为类型，获取与每个所述异常乘梯行为对应的所述目标设备信息。
[0009]在一种可能的实现方式中，所述根据所述目标设备信息，对所述至少一种异常乘梯行为进行校验，确定目标检测结果，包括：针对任一所述异常乘梯行为，根据所述异常乘梯行为对应的所述目标设备信息，确定所述目标电梯是否出现与所述异常乘梯行为对应的异常状态；在确定所述目标电梯出现与所述异常乘梯行为对应的异常状态的情况下，将所述异常乘梯行为确定为所述目标异常乘梯行为。
[0010]在一种可能的实现方式中，所述方法还包括：根据所述目标异常乘梯行为的行为类型，调整所述目标电梯的运行状态。
[0011]在一种可能的实现方式中，所述方法还包括：根据所述目标异常乘梯行为的行为类型，确定所述目标异常乘梯行为对应的预设语音提示信息；控制所述目标电梯内的语音播报装置播报所述预设语音提示信息。
[0012]根据本公开的一方面，提供了一种乘梯行为检测装置，包括：视频流获取模块，用于获取目标电梯的视频流；乘梯行为检测模块，用于根据所述视频流进行乘梯行为检测，确定视觉检测结果，其中，所述视觉检测结果用于指示所述目标电梯内是否出现异常乘梯行为；设备信息获取模块，用于在所述视觉检测结果指示所述目标电梯内出现至少一种异常乘梯行为的情况下，获取所述目标电梯的目标设备信息；校验模块，用于根据所述目标设备信息，对所述至少一种异常乘梯行为进行校验，确定目标检测结果，其中，所述目标检测结果用于指示所述目标电梯内出现的目标异常乘梯行为。
[0013]在一种可能的实现方式中，所述乘梯行为检测模块，包括：目标检测子模块，用于对所述视频流进行目标检测，确定所述视频流中的待跟踪目标；特征提取子模块，用于对所述视频流进行特征提取，得到所述待跟踪目标对应的待检测特征信息；乘梯行为检测子模块，用于根据至少一种异常乘梯行为检测网络，对所述待检测特征信息进行乘梯行为检测，确定所述视觉检测结果。
[0014]在一种可能的实现方式中，所述装置还包括：预判断模块；在所述特征提取模块对所述视频流进行特征提取，得到所述待跟踪目标对应的待检测特征信息之后，所述预判断模块，用于：确定所述待检测特征信息与预先存储的至少一种参考特征信息之间的相似度，其中，一种参考特征信息对应一种异常乘梯行为；针对任一所述参考特征信息，在所述待检测特征信息与所述参考特征信息之间的相似度大于相似度阈值的情况下，将所述待检测特征信息输入用于检测所述参考特征信息对应的异常乘梯行为的异常乘梯行为检测网络。
[0015]在一种可能的实现方式中，所述乘梯行为检测子模块，用于：针对任一所述异常乘梯行为检测网络，利用所述异常乘梯行为检测网络，对所述待检测特征信息进行乘梯行为检测，得到所述目标电梯内出现所述异常乘梯行为检测网络对应的异常乘梯行为的预测概率；在所述预测概率大于或等于所述异常乘梯行为检测网络对应的概率阈值的情况下，确定所述目标电梯内出现所述异常乘梯行为检测网络对应的异常乘梯行为。
[0016]在一种可能的实现方式中，所述设备信息获取模块，用于：确定每个所述异常乘梯行为的行为类型；根据每个所述异常乘梯行为的行为类型，获取与每个所述异常乘梯行为
所说明的任何实施例不必解释为优于或好于其它实施例。
[0032]本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合，例如，包括A、B、C中的至少一种，可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
[0033]另外，为了更好地说明本公开，在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解，没有某些具体细节，本公开同样可以实施。在一些实例中，对于本领域技术人员熟知的方法、手段、元件和电路未作详细本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种乘梯行为检测方法，其特征在于，包括：获取目标电梯的视频流；根据所述视频流进行乘梯行为检测，确定视觉检测结果，其中，所述视觉检测结果用于指示所述目标电梯内是否出现异常乘梯行为；在所述视觉检测结果指示所述目标电梯内出现至少一种异常乘梯行为的情况下，获取所述目标电梯的目标设备信息；根据所述目标设备信息，对所述至少一种异常乘梯行为进行校验，确定目标检测结果，其中，所述目标检测结果用于指示所述目标电梯内出现的目标异常乘梯行为。2.根据权利要求1所述的方法，其特征在于，所述根据所述视频流进行乘梯行为检测，确定视觉检测结果，包括：对所述视频流进行目标检测，确定所述视频流中的待跟踪目标；对所述视频流进行特征提取，得到所述待跟踪目标对应的待检测特征信息；根据至少一种异常乘梯行为检测网络，对所述待检测特征信息进行乘梯行为检测，确定所述视觉检测结果。3.根据权利要求2所述的方法，其特征在于，在对所述视频流进行特征提取，得到所述待跟踪目标对应的待检测特征信息之后，所述方法还包括：确定所述待检测特征信息与预先存储的至少一种参考特征信息之间的相似度，其中，一种参考特征信息对应一种异常乘梯行为；针对任一所述参考特征信息，在所述待检测特征信息与所述参考特征信息之间的相似度大于相似度阈值的情况下，将所述待检测特征信息输入用于检测所述参考特征信息对应的异常乘梯行为的异常乘梯行为检测网络。4.根据权利要求2或3所述的方法，其特征在于，所述根据至少一种异常乘梯行为检测网络，对所述待检测特征信息进行乘梯行为检测，确定所述视觉检测结果，包括：针对任一所述异常乘梯行为检测网络，利用所述异常乘梯行为检测网络，对所述待检测特征信息进行乘梯行为检测，得到所述目标电梯内出现所述异常乘梯行为检测网络对应的异常乘梯行为的预测概率；在所述预测概率大于或等于所述异常乘梯行为检测网络对应的概率阈值的情况下，确定所述目标电梯内出现所述异常乘梯行为检测网络对应的异常乘梯行为。5.根据权利要求1至4中任意一项所述的方法，其特征在于，所述在所述视觉检测结果指示所述目标电梯内出现至少一种异常乘梯行为的情况下，获取所述目标电梯的目标设备信息，包括：确定每个所述异常乘梯行为的行为类型；根据每个所述异常乘梯行为的行为类型，获取与每个所述异常乘梯行为对应的所述目标设备信息。6.根据权利要求5所述的方法，其特征在于，所述根据所述目标设备信息，对所述至少一种异常乘梯行为进行校验，确定目标检测结果，包括：针对任一所述异常乘梯行为，根据所述异常乘梯行为对应的所述目标设备信息，确定所述目标电梯是否出现与所述异常乘梯行为对应的异常状态；在确定所述目标电梯出现与所述异常乘梯行为对应的异常状态的情况下，将所述异常
乘梯行为确定为所述目标异常乘梯行为。7.根据权利要求1至6中任意一项所述的方法，其特征在于，所述方法还包括：根据所述目标异常乘梯行为的行为类型，调整所述目标电梯的运行状态。8.根据权利要求1至7中任意一项所述的方法，其特征在于，所述方法还包括：根据所述目标异常乘梯行为的行为类型，确定所述目标异常乘梯行为对应的预设语音提示信息；控制所述目标电梯内的语音播报装置播报所述预设语音提示信息。9.一种乘梯行为检测装置，其特征在于，包括：视频流获取模块，用于获取目标电梯的视频流；乘梯行为检测模块，用于根据所述视频流进行乘梯行为检测，确定视觉检测结果，其中，所述视觉检...

【专利技术属性】
技术研发人员：徐慧敏，吴晓明，张艳华，吴佳飞，张义保，冷冰，叶建云，张广程，李俊，
申请(专利权)人：上海商汤智能科技有限公司，
类型：发明
国别省市：