动作检测方法、装置、电子设备及存储介质制造方法及图纸

技术编号:34475751 阅读:26 留言:0更新日期:2022-08-10 08:50
本公开涉及一种动作检测方法、装置、电子设备及存储介质,所述动作检测方法包括:获取图像采集设备针对多个液压支架采集的待检测图像;对所述待检测图像进行识别处理,得到所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线;根据所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线,确定所述多个液压支架的状态信息,其中,所述状态信息包括移架推溜正常或移架推溜异常。由于液压支架的状态信息是根据待检测图像中识别到的每个液压支架的底座前端边缘线和伸缩杆前端边缘线来确定的,因此较为精度较高、效率较高、自动化程度较高,提高了采煤过程的效率和安全性,避免出现安全事故。避免出现安全事故。避免出现安全事故。

【技术实现步骤摘要】
动作检测方法、装置、电子设备及存储介质


[0001]本公开涉及动作检测
,尤其涉及一种动作检测方法、装置、电子设备及存储介质。

技术介绍

[0002]近年来,采煤技术取得了很大的发展,已经逐步从人工采煤进步到机械化、自动化采煤,这不仅增加了采煤的效率,而且也提高了煤矿工人的安全。以综采工作面采煤的方式来说,预先将采煤机、液压支架、刮板运输机安装到位后,便可以在少量人工参与的情况下,进行自动采煤。在综采工作面采煤的过程中,采煤机、液压支架、刮板运输机所执行的动作是否准确到位,将影响采煤的效率以及采煤环境的安全。相关技术中,依靠人工来监测采煤机、液压支架、刮板运输机所执行的动作,效率较低且精度较差,容易造成事故。

技术实现思路

[0003]本公开提供一种动作检测方法、装置、设备及存储介质,以解决相关技术中的缺陷。
[0004]根据本公开实施例的第一方面,提供一种动作检测方法,包括:
[0005]获取图像采集设备针对多个液压支架采集的待检测图像;
[0006]对所述待检测图像进行识别处理,得到所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线;
[0007]根据所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线,确定所述多个液压支架的状态信息,其中,所述状态信息包括移架推溜正常或移架推溜异常。
[0008]在一个实施例中,所述对所述待检测图像进行识别处理,得到所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线,包括:
[0009]将所述待检测图像输入预先训练的神经网络模型中,所述神经网络模型输出所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线。
[0010]在一个实施例中,所述对所述待检测图像进行识别处理,得到所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线,包括:
[0011]对所述待检测图像进行分割处理,得到多个存在所述底座前端边缘线的第一分割图块和多个存在所述伸缩杆前端边缘线的第二分割图块;
[0012]对所述第一分割图块进行直线拟合处理,得到用于表示所述底座前端边缘线的第一线段,并对所述第二分割图块进行直线拟合处理,得到用于表示所述伸缩杆前端边缘线的第二线段;
[0013]根据每个所述第一分割图块在所述待检测图像中的位置,以及所述第一线段在所述第一分割图块中的位置,分别在所述待检测图像中确定每个所述底座前端边缘线,并根据每个所述第二分割图像在所述待检测图像中的位置,以及所述第二线段在所述第二分割
图块中的位置,在所述待检测图像中每个确定所述伸缩杆前端边缘线。
[0014]在一个实施例中,所述根据所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线,确定所述多个液压支架的状态信息,包括:
[0015]根据每个所述液压支架的底座前端边缘线,拟合得到第三线段,并根据每个所述液压支架的伸缩杆前端边缘线,拟合得到第四线段;
[0016]根据所述第三线段斜率和所述第四线段的斜率,确定所述多个液压支架的状态信息。
[0017]在一个实施例中,所述根据所述第三线段斜率和所述第四线段的斜率,确定所述多个液压支架的状态信息,包括:
[0018]在所述第三线段斜率和所述第四线段的斜率之间的差值在预设范围内的情况下,确定所述多个液压支架的状态信息为移架推溜正常;
[0019]在所述第三线段斜率和所述第四线段的斜率之间的差值超出预设范围内的情况下,确定所述多个液压支架的状态信息为移架推溜异常。
[0020]在一个实施例中,所述根据所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线,确定所述多个液压支架的状态信息,包括:
[0021]根据每个所述液压支架的底座前端边缘线,拟合得到第三线段,并根据每个所述液压支架的伸缩杆前端边缘线,拟合得到第四线段;
[0022]分别确定每个所述液压支架的底座前端边缘线与所述第三线段间的距离,并分别确定每个所述液压支架的伸缩杆前端边缘线与所述第四线段间的距离;
[0023]在每个所述液压支架的底座前端边缘线与所述第三线段间的距离均小于或等于距离阈值,且每个所述液压支架的伸缩杆前端边缘线与所述第四线段间的距离均小于或等于所述距离阈值的情况下,确定所述多个液压支架的状态信息为移架推溜正常,否则,确定所述多个液压支架的状态信息为移架推溜异常。
[0024]在一个实施例中,还包括:
[0025]获取图像采集设备针对多个液压支架连续采集的多帧待检测图像;
[0026]对所述多帧待检测图像进行识别处理,得到每帧待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆的侧边边缘线;
[0027]根据所述每帧待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆的侧边边缘线,分别确定每个所述液压支架的动作状态;
[0028]所述获取图像采集设备针对多个液压支架采集的待检测图像,包括:
[0029]在每个所述液压支架的动作状态均由推溜切换为静止的情况下,获取图像采集设备针对所述多个液压支架采集的待检测图像。
[0030]根据本公开实施例的第二方面,提供一种动作检测装置,包括:
[0031]获取模块,用于获取图像采集设备针对多个液压支架采集的待检测图像;
[0032]识别模块,用于对所述待检测图像进行识别处理,得到所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线;
[0033]确定模块,用于根据所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线,确定所述多个液压支架的状态信息,其中,所述状态信息包括移架推溜正常或移架推溜异常。
[0034]在一个实施例中,所述识别模块具体用于:
[0035]将所述待检测图像输入预先训练的神经网络模型中,所述神经网络模型输出所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线。
[0036]在一个实施例中,所述识别模块具体用于:
[0037]对所述待检测图像进行分割处理,得到多个存在所述底座前端边缘线的第一分割图块和多个存在所述伸缩杆前端边缘线的第二分割图块;
[0038]对所述第一分割图块进行直线拟合处理,得到用于表示所述底座前端边缘线的第一线段,并对所述第二分割图块进行直线拟合处理,得到用于表示所述伸缩杆前端边缘线的第二线段;
[0039]根据每个所述第一分割图块在所述待检测图像中的位置,以及所述第一线段在所述第一分割图块中的位置,分别在所述待检测图像中确定每个所述底座前端边缘线,并根据每个所述第二分割图像在所述待检测图像中的位置,以及所述第二线段在所述第二分割图块中的位置,分别在所述待检测图像中确定每个所述伸缩杆前端边缘线。
[0040]在一个实施例中,所述确定模块具体用于:
[0041]根据每个所述液压支架的底座前端边本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种动作检测方法,其特征在于,包括:获取图像采集设备针对多个液压支架采集的待检测图像;对所述待检测图像进行识别处理,得到所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线;根据所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线,确定所述多个液压支架的状态信息,其中,所述状态信息包括移架推溜正常或移架推溜异常。2.根据权利要求1所述的动作检测方法,其特征在于,所述对所述待检测图像进行识别处理,得到所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线,包括:将所述待检测图像输入预先训练的神经网络模型中,所述神经网络模型输出所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线。3.根据权利要求1或2所述的动作检测方法,其特征在于,所述对所述待检测图像进行识别处理,得到所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线,包括:对所述待检测图像进行分割处理,得到多个存在所述底座前端边缘线的第一分割图块和多个存在所述伸缩杆前端边缘线的第二分割图块;对所述第一分割图块进行直线拟合处理,得到用于表示所述底座前端边缘线的第一线段,并对所述第二分割图块进行直线拟合处理,得到用于表示所述伸缩杆前端边缘线的第二线段;根据每个所述第一分割图块在所述待检测图像中的位置,以及所述第一线段在所述第一分割图块中的位置,分别在所述待检测图像中确定每个所述底座前端边缘线,并根据每个所述第二分割图像在所述待检测图像中的位置,以及所述第二线段在所述第二分割图块中的位置,分别在所述待检测图像中确定每个所述伸缩杆前端边缘线。4.根据权利要求1所述的动作检测方法,其特征在于,所述根据所述待检测图像中,每个所述液压支架的底座前端边缘线和伸缩杆前端边缘线,确定所述多个液压支架的状态信息,包括:根据每个所述液压支架的底座前端边缘线,拟合得到第三线段,并根据每个所述液压支架的伸缩杆前端边缘线,拟合得到第四线段;根据所述第三线段斜率和所述第四线段的斜率,确定所述多个液压支架的状态信息。5.根据权利要求4所述的动作检测方法,其特征在于,所述根据所述第三线段斜率和所述第四线段的斜率,确定所述多个液压支架的状态信息,包括:在所述第三线段斜率和所述第四线段的斜率之间的差值在预设范围内的情况下,确定所述多个液压支架的状态信息为移架推溜正常;在所述第三线段斜率和所...

【专利技术属性】
技术研发人员:李帆祝胜男赵思远李艳民闵旺华成功
申请(专利权)人:上海商汤科技开发有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1