基于边缘智能的配网作业个人防护用品智能识别设备制造技术

本发明专利技术涉及一种基于边缘智能的配网作业个人防护用品智能识别设备，该系统包括视频采集模块、视频流逐帧提取模块、防护用品穿戴检测人工智能组件和异常记录及告警模块；视频采集模块用于现场作业视频拍摄；视频流逐帧提取模块用于对视频采集模块采集到的视频逐帧提取；防护用品穿戴检测人工智能组件用于对每一帧画面进行人脸识别，识别出现场工作人员及其负责人的相关信息，然再识别该帧画面中现场工作人员是否正确穿戴防护用品，若存在没有正确穿戴防护用品情况，则发送信号给异常记录及告警模块进行报警；本发明专利技术能解决配网作业现场防护用品穿戴安全风险管控的共享、实时、预警、全覆盖问题，构建作业现场无人化、自动化、智能化现场安全监督模式。现场安全监督模式。现场安全监督模式。

【技术实现步骤摘要】
基于边缘智能的配网作业个人防护用品智能识别设备


[0001]本专利技术属于配网作业
，具体涉及一种基于边缘智能的配网作业个人防护用品智能识别设备。

技术介绍

[0002]随着电力生产需求剧增，配网作业呈现体量大、点多面广战线长的特点。目前，配网工作现场防护用户穿戴安全管控手段，一是现场监察人员现场安全管控，二是通过现场布置布控球等高清视频采集设备进行现场工作视频记录，用于现场工作备份和后期工作安全监察和复盘。
[0003]传统的视频监控系统功能都相对较为简单，通过摄像头视频采集系统，对作业现场进行监控并采集现场的视频信息，并且如果要甄别异常情况，需要大量的工作人员进行人工识别，准确率低、效率慢。有的场景需要及时采取有效措施，就必须进行实时监控识别，这个时候工作人员必须一直不停的观看监视视频，人工识别出其中的异常行为，并且报警。但视频监控采集的现场画面通常包含多专业、多工种的作业人员，信息复杂多变，靠人工远程判断难以全面而准确的判定违规作业情况，在对多路监控视频进行监控时，往往无法及时发现突发或有威胁的安全事件，很多事件因此无法得到及时预防与控制，延误了最佳处理时机，对因违章作业引发的重大人身安全责任事故无法做到提前预防。因此如何克服现有技术的不足是目前配网作业
亟需解决的问题。

技术实现思路

[0004]本专利技术的目的是为了解决现有技术的不足，提供一种基于边缘智能的配网作业个人防护用品智能识别设备，通过结合在边缘设备中运行的轻量人工智能组件的视频智能识别技术来实现智能防护用户穿戴安全管控。首先在边端设备中实现视频监控与工作任务、作业人员信息关联、防护用户穿戴情况智能识别；同时依据智能识别情况记录各个现场工作中人员防护用品穿戴情况，对存在违规的情况进行实时反馈，以短信、实时通讯软件等方式自动向监管人员发送违规告警，并在边端设备中进行声音报警。本专利技术能解决配网作业现场防护用品穿戴安全风险管控的共享、实时、预警、全覆盖问题，构建作业现场“无人化”、“自动化”、“智能化”现场安全监督模式，解决人力资源短缺和安全监督效率、质量问题，为安全纠察、作业回顾等提供全方位的实景信息支持。
[0005]为实现上述目的，本专利技术采用的技术方案如下：基于边缘智能的配网作业个人防护用品智能识别设备，包括视频采集模块、视频流逐帧提取模块、防护用品穿戴检测人工智能组件和异常记录及告警模块；视频采集模块用于现场作业视频拍摄；视频流逐帧提取模块，与视频采集模块相连，用于对视频采集模块采集到的视频逐帧提取；所述的防护用品穿戴检测人工智能组件中预存有人脸识别模型和基于YOLOv3目
标检测模型；所述的人脸识别模型用于识别现场工作人员及其负责人的人脸及身份信息；所述的基于YOLOv3目标检测模型用于识别现场工作人员是否正确穿戴防护用品；防护用品穿戴检测人工智能组件，与视频流逐帧提取模块相连，用于对视频流逐帧提取模块传来的每一帧画面进行人脸识别，识别出现场工作人员及其负责人的人脸及身份信息，然后识别该帧画面中现场工作人员是否正确穿戴防护用品，若存在没有正确穿戴防护用品情况，则发送信号给异常记录及告警模块；异常记录及告警模块，与防护用品穿戴检测人工智能组件相连，用于根据防护用品穿戴检测人工智能组件识别出的现场工作人员及其负责人的人脸及身份信息，将该现场工作人员的没有正确穿戴防护用品情况的报警信息发送至现场工作人员及其负责人进行相应的提醒。
[0006]进一步，优选的是，所述的视频采集模块为摄像头。
[0007]进一步，优选的是，所述的防护用品包括安全帽、安全绳和绝缘手套。
[0008]进一步，优选的是，所述的人脸识别模型中，先使用mtcnn进行人脸检测，然后再利用facenet来作为主干网络模型来进行人脸识别。
[0009]进一步，优选的是，所述的基于YOLOv3目标检测模型训练时，训练集为历史现场作业视频帧画面，人工对历史现场作业视频帧画面进行标签标注，标注防护用品是否穿戴正常；然后以作业视频帧画面作为输入，以标准的标签作为输出，对基于YOLOv3目标检测模型进行训练。
[0010]本专利技术同时提供基于边缘智能的配网作业个人防护用品智能识别方法，采用上述基于边缘智能的配网作业个人防护用品智能识别设备，包括如下步骤：步骤一，数据采集：采集配网作业现场作业视频数据并进行数据清洗；步骤二，视频流逐帧提取：对步骤一获得的视频逐帧进行提取；步骤三，人脸识别：将步骤二提取的每一帧画面输入到人脸识别模型中，先使用mtcnn进行人脸检测，然后再利用facenet来作为主干网络模型来进行人脸识别，识别出现场工作人员及其负责人的相关信息；步骤四，穿戴防护用品识别：将步骤二提取的每一帧画面输入到基于YOLOv3目标检测模型，识别现场工作人员是否正确穿戴防护用品步骤五，报警信息提醒：将现场工作人员没有正确穿戴防护用品情况的报警信息发送至现场工作人员及其负责人进行相应的提醒。
[0011]进一步，优选的是，步骤一中，数据清洗时，对于不清晰的现场作业视频数据进行修复或者删除。
[0012]进一步，优选的是，步骤五中，以短信和/或即时通讯软件将将现场工作人员没有正确穿戴防护用品情况的报警信息发送给现场工作人员及其负责人，并进行现场声音提醒。
[0013]本专利技术步骤一中，数据清洗时，对于不清晰的现场作业视频数据进行修复或者删除处理，为能够运行防护用品穿戴检测人工智能组件研发准备基础数据。
[0014]本专利技术对于前期数据标注主要依靠人工来进行，然后在与标注的基础上，人工进行数据审核入库实现半自动数据标注。
[0015]异常记录及告警模块在进行现场声音提醒时，调用现场音响设备进行现场声音提
醒。
[0016]本专利技术基于现场作业视频采集设备，采用计算机视觉、图像处理等技术，实现在现场作业视频采集设备中人工智能分析，在配网现场工作视频拍摄过程中逐帧对画面进行工作人员安全帽、安全绳、绝缘手套穿戴情况分析，而不是通过将视频传到云端服务器进行分析。一方面提高了视频数据智能分析的工作效率、另一方面避免了大量现场作业视频数据传输，保障数据安全。
[0017]本专利技术利用边缘计算、人工智能技术实现智能、实时的配网现场作业风险全景洞察，构建基于作业人员安全防护设备穿戴检测、实时异常情况分析的现场作业防护用户风险实时预警机制，辅助安全监察人员进行视频抽查，实现精益化现场安全管控，推进电网“本质安全”建设。
[0018]本专利技术与现有技术相比，其有益效果为：本专利技术提出的基于边缘智能的配网作业个人防护用品智能识别设备，结合了边缘计算、人工智能技术，将配网作业工作票视频监控与实时人工智能分析进行关联，实现现场人员防护用品智能监管。
[0019]本专利技术结合边缘计算、目标检测方法与人脸识别技术，实现了复杂场景下的高效识别。本专利技术与传统的方法相比，检测速度及其效果得到了大幅度的提升，满足了电力作业的实际工作需求。基于各类视频分析模型，实现作业现场的风险可视、实时预警，辅助安全监察人员进行及时的风险干预本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.基于边缘智能的配网作业个人防护用品智能识别设备，其特征在于，包括视频采集模块、视频流逐帧提取模块、防护用品穿戴检测人工智能组件和异常记录及告警模块；视频采集模块用于现场作业视频拍摄；视频流逐帧提取模块，与视频采集模块相连，用于对视频采集模块采集到的视频逐帧提取；所述的防护用品穿戴检测人工智能组件中预存有人脸识别模型和基于YOLOv3目标检测模型；所述的人脸识别模型用于识别现场工作人员及其负责人的人脸及身份信息；所述的基于YOLOv3目标检测模型用于识别现场工作人员是否正确穿戴防护用品；防护用品穿戴检测人工智能组件，与视频流逐帧提取模块相连，用于对视频流逐帧提取模块传来的每一帧画面进行人脸识别，识别出现场工作人员及其负责人的人脸及身份信息，然后识别该帧画面中现场工作人员是否正确穿戴防护用品，若存在没有正确穿戴防护用品情况，则发送信号给异常记录及告警模块；异常记录及告警模块，与防护用品穿戴检测人工智能组件相连，用于根据防护用品穿戴检测人工智能组件识别出的现场工作人员及其负责人的人脸及身份信息，将该现场工作人员的没有正确穿戴防护用品情况的报警信息发送至现场工作人员及其负责人进行相应的提醒。2.根据权利要求1所述的基于边缘智能的配网作业个人防护用品智能识别设备，其特征在于，所述的视频采集模块为摄像头。3.根据权利要求1所述的基于边缘智能的配网作业个人防护用品智能识别设备，其特征在于，所述的防护用品包括安全帽、安全绳和绝缘手套。4.根据权利要求1所述的基于边缘智能的配网作业个人防护用品智能识别设备，其特征在于，所述的人脸识别模型中，先使用mtcnn进行人脸检测，然后再利用facenet来作为主干网络模型来...

【专利技术属性】
技术研发人员：欧基尧，冯小敏，冯斯猛，蔡兴龙，洪跃佳，王东，吴善为，黄发泽，王文，黄军，王世春，陈忠飞，陈景隆，马娇，王儒斌，李延定，张翔，郑大飞，欧贻成，梁应波，蔡汝孟，杨恒威，
申请(专利权)人：海南电网有限责任公司澄迈供电局，
类型：发明
国别省市：