System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 仪表盘终检系统及方法技术方案_技高网

仪表盘终检系统及方法技术方案

技术编号:42436930 阅读:6 留言:0更新日期:2024-08-16 16:46
本发明专利技术涉及一种仪表盘终检系统及方法。该方法包括:通过基于深度神经网络的仪表盘特征提取器对获取的被检测仪表盘的检测图像进行多层次特征提取以得到仪表盘浅层特征图和仪表盘语义特征图;将仪表盘浅层特征图和仪表盘语义特征图通过仪表盘多尺度特征增强表达模块以得到仪表盘多尺度浅层特征图和仪表盘多尺度语义特征图;基于仪表盘多尺度语义特征图,对仪表盘多尺度浅层特征图进行基于注意力机制的区域转移以得到前景凸显仪表盘浅层特征,以确定被检测仪表盘是否存在缺陷。这样,能够实现对仪表盘的智能化终检,从而避免传统的人工终检方式测带来的误差和低效率问题,能够很好地应对复杂的仪表盘缺陷问题,确保仪表盘产品质量符合标准要求。

【技术实现步骤摘要】

本专利技术涉及仪表盘,具体地,涉及一种仪表盘终检系统及方法


技术介绍

1、仪表盘是汽车中至关重要的组件,能够提供有关车辆状态和性能的关键信息。仪表盘终检是制造业中一个重要的环节,用于确保生产出的仪表盘产品符合质量标准和规格要求。

2、在传统的仪表盘终检过程中,通常会依赖人工目视检查来进行仪表盘的质量检测,人工目视检查容易受到人为主观因素的影响,不同的操作员可能会有不同的判断标准,导致检测结果的不一致性。并且,人工目视检查需要大量的人力投入,工作效率低下,而且长时间的重复性工作容易导致操作员疲劳,进而影响检测准确性。此外,传统的仪表盘终检方案通常需要等待人工检测完成后才能得到结果,无法实时反馈生产线上可能存在的问题,影响生产效率和产品质量。同时,仪表盘产品可能存在各种不同类型的缺陷,传统的检测方法难以有效应对复杂的情况,容易漏检或误判。

3、因此,期望一种优化的仪表盘终检系统。


技术实现思路

1、提供该
技术实现思路
部分以便以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。该
技术实现思路
部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。

2、第一方面,本专利技术提供了一种仪表盘终检系统,所述系统包括:

3、仪表盘图像采集模块,用于获取由摄像头采集的被检测仪表盘的检测图像;

4、仪表盘多层次特征提取模块,用于通过基于深度神经网络的仪表盘特征提取器对所述被检测仪表盘的检测图像进行多层次特征提取以得到仪表盘浅层特征图和仪表盘语义特征图;

5、仪表盘特征增强表达模块,用于将所述仪表盘浅层特征图和所述仪表盘语义特征图通过仪表盘多尺度特征增强表达模块以得到仪表盘多尺度浅层特征图和仪表盘多尺度语义特征图;

6、仪表盘语义信息转移凸显浅层特征模块,用于基于所述仪表盘多尺度语义特征图,对所述仪表盘多尺度浅层特征图进行基于注意力机制的区域转移以得到前景凸显仪表盘浅层特征;

7、仪表盘缺陷检测模块,用于基于所述前景凸显仪表盘浅层特征,确定所述被检测仪表盘是否存在缺陷。

8、可选地,所述基于深度神经网络的仪表盘特征提取器为基于金字塔网络的仪表盘特征提取器。

9、可选地,所述仪表盘特征增强表达模块,包括:第一卷积单元,用于将所述仪表盘浅层特征图通过所述仪表盘多尺度特征增强表达模块中的基于1×1卷积核的第一卷积层以得到通道变换仪表盘浅层特征图;特征图拆分单元,用于将所述通道变换仪表盘浅层特征图沿着通道维度进行拆分以得到第一分支特征图、第二分支特征图、第三分支特征图和第四分支特征图;特征提取单元,用于将所述第一分支特征图通过所述仪表盘多尺度特征增强表达模块中的卷积神经网络模型以得到第一分支输出特征图;第二卷积单元,用于将所述第二分支特征图通过所述仪表盘多尺度特征增强表达模块中的基于3×3卷积核的第二卷积层进行处理以得到第二分支输出特征图;第三卷积单元,用于将所述第二分支输出特征图和所述第三分支特征图进行融合后通过所述仪表盘多尺度特征增强表达模块中的基于3×3卷积核的第三卷积层进行处理以得到第三分支输出特征图;第四卷积单元,用于将所述第三分支输出特征图和所述第四分支特征图进行融合后通过所述仪表盘多尺度特征增强表达模块中的基于3×3卷积核的第四卷积层进行处理以得到第四分支输出特征图;多分支融合单元,用于融合所述第一分支输出特征图、所述第二分支输出特征图、所述第三分支输出特征图和所述第四分支输出特征图以得到多分支融合特征图;第五卷积单元,用于将所述多分支融合特征图通过所述仪表盘多尺度特征增强表达模块中的基于1×1卷积核的第五卷积层进行处理以得到通道变换多分支融合特征图;多尺度融合单元,用于融合所述通道变换多分支融合特征图和所述仪表盘浅层特征图以得到所述仪表盘多尺度浅层特征图。

10、可选地,所述仪表盘语义信息转移凸显浅层特征模块,包括:仪表盘多尺度语义空间聚焦单元,用于计算所述仪表盘多尺度语义特征图的空间注意特征矩阵;掩码化处理单元,用于基于预定阈值对所述空间注意特征矩阵进行掩码化处理以得到掩码化空间注意特征矩阵;仪表盘浅层特征前景凸显单元,用于计算所述仪表盘多尺度浅层特征图的各个特征矩阵与所述掩码化空间注意特征矩阵之间的按位置点乘以得到所述前景凸显仪表盘浅层特征图作为所述前景凸显仪表盘浅层特征。

11、可选地,所述仪表盘缺陷检测模块,用于:将所述前景凸显仪表盘浅层特征图通过基于分类器的仪表盘缺陷识别器以得到识别结果,所述识别结果用于表示所述被检测仪表盘是否存在缺陷。

12、可选地,还包括用于对所述基于金字塔网络的仪表盘特征提取器、所述仪表盘多尺度特征增强表达模块和所述基于分类器的仪表盘缺陷识别器进行训练的训练模块。

13、可选地,所述训练模块,包括:训练仪表盘图像采集单元,用于获取由摄像头采集的被检测仪表盘的训练检测图像;训练仪表盘多层次特征提取单元,用于通过所述基于深度神经网络的仪表盘特征提取器对所述被检测仪表盘的训练检测图像进行多层次特征提取以得到训练仪表盘浅层特征图和训练仪表盘语义特征图;训练仪表盘特征增强表达单元,用于将所述训练仪表盘浅层特征图和所述训练仪表盘语义特征图通过所述仪表盘多尺度特征增强表达模块以得到训练仪表盘多尺度浅层特征图和训练仪表盘多尺度语义特征图;训练仪表盘多尺度语义空间聚焦单元,用于计算所述训练仪表盘多尺度语义特征图的训练空间注意特征矩阵;训练掩码化处理单元,用于基于预定阈值对所述训练空间注意特征矩阵进行掩码化处理以得到训练掩码化空间注意特征矩阵;训练仪表盘浅层特征前景凸显单元,用于计算所述训练仪表盘多尺度浅层特征图的各个特征矩阵与所述训练掩码化空间注意特征矩阵之间的按位置点乘以得到训练前景凸显仪表盘浅层特征图;训练分类单元,用于将所述训练前景凸显仪表盘浅层特征图通过所述基于分类器的仪表盘缺陷识别器以得到训练分类损失函数值;训练单元,用于基于所述训练分类损失函数值的加权和作为损失函数值对所述基于金字塔网络的仪表盘特征提取器、所述仪表盘多尺度特征增强表达模块和所述基于分类器的仪表盘缺陷识别器进行训练,在每次模型迭代时,对所述训练前景凸显仪表盘浅层特征图进行优化。

14、第二方面,本专利技术提供了一种仪表盘终检方法,所述方法包括:

15、获取由摄像头采集的被检测仪表盘的检测图像;

16、通过基于深度神经网络的仪表盘特征提取器对所述被检测仪表盘的检测图像进行多层次特征提取以得到仪表盘浅层特征图和仪表盘语义特征图;

17、将所述仪表盘浅层特征图和所述仪表盘语义特征图通过仪表盘多尺度特征增强表达模块以得到仪表盘多尺度浅层特征图和仪表盘多尺度语义特征图;

18、基于所述仪表盘多尺度语义特征图,对所述仪表盘多尺度浅层特征图进行基于注意力机制的区域转移以得到前景凸显仪表盘浅层特征;

19、基于所述前景凸显仪表盘浅层特征,确定所述被检测仪表盘是否存在本文档来自技高网...

【技术保护点】

1.一种仪表盘终检系统,其特征在于,包括:

2.根据权利要求1所述的仪表盘终检系统,其特征在于,所述基于深度神经网络的仪表盘特征提取器为基于金字塔网络的仪表盘特征提取器。

3.根据权利要求2所述的仪表盘终检系统,其特征在于,所述仪表盘特征增强表达模块,包括:

4.根据权利要求3所述的仪表盘终检系统,其特征在于,所述仪表盘语义信息转移凸显浅层特征模块,包括:

5.根据权利要求4所述的仪表盘终检系统,其特征在于,所述仪表盘缺陷检测模块,用于:将所述前景凸显仪表盘浅层特征图通过基于分类器的仪表盘缺陷识别器以得到识别结果,所述识别结果用于表示所述被检测仪表盘是否存在缺陷。

6.根据权利要求5所述的仪表盘终检系统,其特征在于,还包括用于对所述基于金字塔网络的仪表盘特征提取器、所述仪表盘多尺度特征增强表达模块和所述基于分类器的仪表盘缺陷识别器进行训练的训练模块。

7.根据权利要求6所述的仪表盘终检系统,其特征在于,所述训练模块,包括:

8.一种仪表盘终检方法,其特征在于,包括:

9.根据权利要求8所述的仪表盘终检方法,其特征在于,所述基于深度神经网络的仪表盘特征提取器为基于金字塔网络的仪表盘特征提取器。

...

【技术特征摘要】

1.一种仪表盘终检系统,其特征在于,包括:

2.根据权利要求1所述的仪表盘终检系统,其特征在于,所述基于深度神经网络的仪表盘特征提取器为基于金字塔网络的仪表盘特征提取器。

3.根据权利要求2所述的仪表盘终检系统,其特征在于,所述仪表盘特征增强表达模块,包括:

4.根据权利要求3所述的仪表盘终检系统,其特征在于,所述仪表盘语义信息转移凸显浅层特征模块,包括:

5.根据权利要求4所述的仪表盘终检系统,其特征在于,所述仪表盘缺陷检测模块,用于:将所述前景凸显仪表盘浅层特征图通过基于分类器的仪表盘缺陷识别器...

【专利技术属性】
技术研发人员:华山余建明张悦
申请(专利权)人:江苏电子信息职业学院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1