本发明专利技术公开了一种基于增强现实的汽车零部件检测方法，应用于增强现实服务端，所述方法包括：S1：接收增强显示客户端上传的扫描到的实物图像信息；S2：在预设的图像识别模型数据集中筛选出与所述实物图像信息关联的图像识别样本；S3：基于筛选出的所述图像识别样本生成对应于所述实物图像信息的图像识别模型数据子集，基于所述图像识别模型数据子集对扫描到的实物图像信息进行图像识别；S4：当图像识别成功时，下发故障识别指令并将故障识别结果输出至所述增强现实客户端；S5：对所述实物图像信息中的实物影像进行数据处理，构建实物影像坐标，根据实物影像坐标构建虚拟影像，并将实物影像和构建的虚拟影像共同输出至所述增强现实客户端。增强现实客户端。增强现实客户端。
【技术实现步骤摘要】
一种基于增强现实的汽车零部件检测方法及装置
[0001]本专利技术涉及设备检测
，具体涉及一种基于增强现实的汽车零部件检测方法及装置。
技术介绍
[0002]在汽车板件的冲压与汽车组装的过程之中，检查冲压板件和零部件是否符合规范标准是否有外观上的破损是智能化汽车工厂板件冲压和零部件组装环节中必不可少的。目前检测的通用方式还是第一组工人，人工用普通工具和肉眼检查零部件的规格和外观，第二组工人再进行人工抽检打分，因此存在着检测效率较低的问题，此外针对小部件细节的检查，工人往往进行操作时容易疲劳，出现漏检误检，从而导致一些安全事故发生，并且针对汽车零部件的检测需要依赖经验十分丰富的工作人员判定，对于新人来说不易上手，
[0003]因此针对以上问题提供一种基于增强现实的汽车零部件检测方法及装置具有重要意义。
技术实现思路
[0004]本专利技术的目的在于提供一种基于增强现实的汽车零部件检测方法及装置，通过人工智能的图像识别算法配合增强现实的图形可视化检测提示，来辅助检测人员检测零部件质量，提高零部件检测效率。
[0005]为解决上述技术问题，本专利技术采用了以下方案：
[0006]一种基于增强现实的汽车零部件检测方法，应用于增强现实服务端，所述方法包括：
[0007]S1：接收增强显示客户端上传的扫描到的实物图像信息；
[0008]S2：在预设的图像识别模型数据集中筛选出与所述实物图像信息关联的图像识别样本；
[0009]S3：基于筛选出的所述图像识别样本生成对应于所述实物图像信息的图像识别模型数据子集，并将所述图像识别模型数据子集推送至所述增强现实客户端，以使所述增强现实客户端在实时环境执行图像扫描时，基于所述图像识别模型数据子集对扫描到的实物图像信息进行图像识别；
[0010]S4：当图像识别成功时，基于所述图像识别模型数据子集对扫描到的实物图像信息进行故障识别并将故障识别结果输出至所述增强现实客户端；
[0011]S5：对所述实物图像信息中的实物影像进行数据处理，构建实物影像坐标，根据实物影像坐标采用神经网络算法在实物影像上构建虚拟影像，并将实物影像和构建的虚拟影像共同输出至所述增强现实客户端。
[0012]进一步地，所述方法还包括：执行S2之前，采集实物样本数据，对实物样本中的缺陷进行标注，对不同缺陷进行分类并贴上相应的标签，对实物样本数据进行AI深度学习训练，建立图像识别模型数据集，训练完成后能够识别预先定义的不同缺陷的故障。
[0013]进一步地，所述方法包括：
[0014]Sa：获取为所述图像识别模型数据集中的图像识别样本配置的展示数据；以及，为所述展示数据配置的展示效果；
[0015]Sb：将获取到的所述展示数据以及所述展示效果与所述图像识别模型数据集中的图像识别样本进行关联存储，并响应于增强现实客户端的更新请求，对所述展示数据以及所述展示效果进行动态更新。
[0016]进一步地，所述方法包括：
[0017]Sc：当从所述实物图像信息中识别出与所述图像识别模型数据子集中的任一图像识别样本对应的零部件时，将与该图像识别样本关联的展示数据，以及与该展示数据关联的展示效果，推送至所述增强现实客户端，以使所述增强现实客户端基于所述展示效果将所述展示数据在增强现实场景中与所述零部件对应的位置上进行增强显示。
[0018]进一步地，所述方法包括：执行S5时，获取通过位置传感器捕捉的实物实时影像，并对实物实时影像构建坐标。
[0019]进一步地，所述方法包括：执行S5时，对所述实物图像信息中的实物影像进行数据处理为将待检测的零部件与背景进行识别、筛选并标识，从而将要检测的零部件实物与背景区分开来。
[0020]进一步地，对所述实物图像信息中的实物影像进行数据处理还包括虚拟扩充、背景叠加、色彩过滤、图像分割、二值化和边缘检测，从而有效的将要检测的小部件与背景进行有效的区分。
[0021]进一步地，当待检测的零部件与背景进行有效的区分后，对各个零部件构建基准状态的虚拟影像，并不断将各个零部件的实物影像与基准状态的虚拟影像进行实时对比。
[0022]本专利技术还提出了一种基于增强现实的汽车零部件检测装置，应用于增强现实服务端，所述装置包括：
[0023]接收模块，接收增强显示客户端上传的扫描到的实物图像信息；
[0024]筛选模块，在预设的图像识别模型数据集中筛选出与所述实物图像信息关联的图像识别样本；
[0025]推送模块，基于筛选出的所述图像识别样本生成对应于所述实物图像信息的图像识别模型数据子集，并将所述图像识别模型数据子集推送至所述增强现实客户端，以使所述增强现实客户端在实时环境执行图像扫描时，基于所述图像识别模型数据子集对扫描到的实物图像信息进行图像识别；
[0026]第一识别模块，接收增强显示客户端上传的扫描到的实物图像信息，基于所述图像识别模型数据子集对扫描到的实物图像信息进行图像识别；
[0027]第二识别模块，当图像识别成功时，下发故障识别指令并将故障识别结果输出至所述增强现实客户端；
[0028]影像生成模块，对所述实物图像信息中的实物影像进行数据处理，构建实物影像坐标，根据实物影像坐标采用神经网络算法在实物影像上构建虚拟影像，并将实物影像和构建的虚拟影像共同输出至所述增强现实客户端。
[0029]进一步地，还包括：
[0030]训练采集模块，采集实物样本数据，对实物样本中的缺陷进行标注，对不同缺陷进
行分类并贴上相应的标签，对实物样本数据进行AI深度学习训练，建立图像识别模型数据集，训练完成后能够识别预先定义的不同缺陷的故障；
[0031]获取模块，获取为所述图像识别模型数据集中的图像识别样本配置的展示数据；以及，为所述展示数据配置的展示效果；
[0032]存储模块，将获取到的所述展示数据以及所述展示效果与所述图像识别模型数据集中的图像识别样本进行关联存储，并响应于增强现实客户端的更新请求，对所述展示数据以及所述展示效果进行动态更新。
[0033]本专利技术具有的有益效果：
[0034]1、本专利技术通过人工智能的图像识别算法配合增强现实的图形可视化检测提示，来辅助检测人员检测零部件质量，提高零部件检测效率，操作简单，容易上手和推广，减少工人负担，降低了检测人员的门槛要求，大大提高了基层维修保障的日常巡检工作效率。
[0035]2、本专利技术通过以增强现实形式呈现可视化的问题图标，可以非常直观的反应汽车板件和零部件出现的问题原因、问题位置并提供对比参考图，将出现问题的区域在实物图像当中被凸显出来，经过训练的针对汽车冲压板件和零部件的识别算法，也可以快速而且精确的识别型号和问题，检测人员再根据识别的结果进行最终确认和上报，相比人工形式，识别速度和精确都得到了提升。
附图说明
[0036]图1为本专利技术的工作流程图；
[0037]图2为本专利技术的增强现实服务端和增强现实本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种基于增强现实的汽车零部件检测方法，其特征在于，应用于增强现实服务端，所述方法包括：S1：接收增强显示客户端上传的扫描到的实物图像信息；S2：在预设的图像识别模型数据集中筛选出与所述实物图像信息关联的图像识别样本；S3：基于筛选出的所述图像识别样本生成对应于所述实物图像信息的图像识别模型数据子集，并将所述图像识别模型数据子集推送至所述增强现实客户端，以使所述增强现实客户端在实时环境执行图像扫描时，基于所述图像识别模型数据子集对扫描到的实物图像信息进行图像识别；S4：当图像识别成功时，基于所述图像识别模型数据子集对扫描到的实物图像信息进行故障识别并将故障识别结果输出至所述增强现实客户端；S5：对所述实物图像信息中的实物影像进行数据处理，构建实物影像坐标，根据实物影像坐标采用神经网络算法在实物影像上构建虚拟影像，并将实物影像和构建的虚拟影像共同输出至所述增强现实客户端。2.根据权利要求1所述的一种基于增强现实的汽车零部件检测方法，其特征在于，所述方法还包括：执行S2之前，采集实物样本数据，对实物样本中的缺陷进行标注，对不同缺陷进行分类并贴上相应的标签，对实物样本数据进行AI深度学习训练，建立图像识别模型数据集，训练完成后能够识别预先定义的不同缺陷的故障。3.根据权利要求1所述的一种基于增强现实的汽车零部件检测方法，其特征在于，所述方法包括：Sa：获取为所述图像识别模型数据集中的图像识别样本配置的展示数据；以及，为所述展示数据配置的展示效果；Sb：将获取到的所述展示数据以及所述展示效果与所述图像识别模型数据集中的图像识别样本进行关联存储，并响应于增强现实客户端的更新请求，对所述展示数据以及所述展示效果进行动态更新。4.根据权利要求3所述的一种基于增强现实的汽车零部件检测方法，其特征在于，所述方法包括：Sc：当从所述实物图像信息中识别出与所述图像识别模型数据子集中的任一图像识别样本对应的零部件时，将与该图像识别样本关联的展示数据，以及与该展示数据关联的展示效果，推送至所述增强现实客户端，以使所述增强现实客户端基于所述展示效果将所述展示数据在增强现实场景中与所述零部件对应的位置上进行增强显示。5.根据权利要求1所述的一种基于增强现实的汽车零部件检测方法，其特征在于，所述方法包括：执行S5时，获取通过位置传感器捕捉的实物实时影像，并对实物实时影像构建坐标。6.根据权利要求1所述的一种基于增强现实的汽车零部件检测方法，其特征在于，所述方法包...
【专利技术属性】
技术研发人员：罗翼鹏，
申请(专利权)人：四川物通科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。