一种基于AR技术的MOCVD设备维修辅助方法及系统技术方案

本发明专利技术公开了一种基于AR技术的MOCVD设备维修辅助方法及系统，该方法包括：调用用户端摄像头获取当前视频图像并上传，得到视频信息；通过目标识别算法对视频信息进行图像模板识别，得到检测目标；将检测目标与资料库内的设备匹配，得到设备信息；将设备信息添加至视频信息后进行视频处理，得到AR视频；将AR视频回传至用户端。该系统包括：用户端和服务器端。通过使用本发明专利技术，可以极大的解决MOCVD设备修理困难的问题。本发明专利技术作为一种基于AR技术的MOCVD设备维修辅助方法及系统，可广泛应用于半导体设备技术领域。

【技术实现步骤摘要】
一种基于AR技术的MOCVD设备维修辅助方法及系统
本专利技术涉及半导体设备
，尤其涉及一种基于AR技术的MOCVD设备维修辅助方法及系统。
技术介绍
MOCVD(Metal-OrganicChemicalVaporDeposition)即金属有机物化学气相沉积，是制备化合物半导体薄膜的一项关键技术。MOCVD设备是研发世界先进水平的S、C、X、K和Q等波段的氮化镓大功率电子器件和高压大功率固体开关器件、高端激光器件及效率可达40％以上的太阳电池等光电子器件不可或缺的。但是MOCVD设备结构、结构精密、零件特色，非专业从事MOCVD设备研发的人员，很难完全掌握MOCVD设备的组装、维护、修理等工作。目前，MOCVD设备的组装、维护、修理等工作往往是由生产厂商派遣专业人员去进行相关工作，但是其中涉及到的成本问题，例如：较远地区的维护工作，往往会给企业带来额外的成本，使得企业售后代价大。同时，由于专业人员有限，维修工作往往需要预约一定的时间，以及跨地区的路程上花费的时间，也会耽误用户的使用。另外，在MCOVD设备的企业中，新员工对MOCVD设备结构、零件、操作方式等操作，均需要企业进行相关的培训。因此，需要一种可以方便、快捷，可以同时满足客户与企业需求的办法来解决MOCVD专业设备的组装、维护、修理，以及新员工的学习培训等需求。
技术实现思路
为了解决上述技术问题，本专利技术的目的是提供一种基于AR技术的MOCVD设备维修辅助方法及系统，使得用户更直观的对MOCVD设备结构、零件、操作方式等进行了解，有主语用户维修设备。本专利技术所采用的第一技术方案是：一种基于AR技术的MOCVD设备维修辅助方法，包括以下步骤：调用用户端摄像头获取当前视频图像并上传，得到视频信息；通过目标识别算法对视频信息进行图像模板识别，得到检测目标；将检测目标与资料库内的设备匹配，得到设备信息；将设备信息添加至视频信息后进行视频处理，得到AR视频；将AR视频回传至用户端。进一步，所述调用用户端摄像头获取当前视频图像并上传，得到视频信息这一步骤之前，还包括：发送请求指令并确认用户端的IP地址。进一步，所述通过目标识别算法对视频信息进行图像模板识别，得到检测目标这一步骤，其具体包括：根据视频信息中的图像和目标识别算法生成特征图；将特征图输入到预训练的分类模型，得到检测目标。进一步，所述根据视频信息中的图像生成特征图这一步骤，其具体包括：对视频信息进行分帧，并将分帧后的图像逐帧输入卷积神经网络；通过窗口建议网络生成建议窗口并映射到卷积神经网络的最后一层，得到固定尺寸的特征图。进一步，所述预训练的分类模型具体为通过探测分类概率和探测边框回归对分类概率和边框回归联合训练得出的分类模型。进一步，所述设备信息包括零件规格、设备结构和操作规范信息。进一步，视频图像上传和视频回传均采用视频流方式传输。本专利技术所采用的第二技术方案是：一种基于AR技术的MOCVD设备维修辅助系统，包括：用户端，用于获取当前图像并向服务端发送数据、接收来自服务端返回的AR视频并实时播放；服务器端，用于接收来自用户端发送的视频图像信息并对视频图像信息进行识别、与资料库内的设备匹配后进行视频处理，得到AR视频并回传至用户端。进一步，还包括：所述服务器端包括目标识别模块、匹配模块、视频处理模块和AR生成模块。本专利技术方法及系统的有益效果是：通过手机用户端与服务器端的共同作用，利用用户手机摄像头，避免了使用额外设备带来的额外负担；服务器对接收到来自用户端图像进行识别处理，从而实现远程维护、修理的功能，极大的解决MOCVD设备的维护、修理等售后相关的服务，节省人力物力。附图说明图1是本专利技术一种基于AR技术的MOCVD设备维修辅助方法的步骤流程图；图2是本专利技术一种基于AR技术的MOCVD设备维修辅助系统的结构框图；图3是本专利技术服务器端的模块结构图。具体实施方式下面结合附图和具体实施例对本专利技术做进一步的详细说明。对于以下实施例中的步骤编号，其仅为了便于阐述说明而设置，对步骤之间的顺序不做任何限定，实施例中的各步骤的执行顺序均可根据本领域技术人员的理解来进行适应性调整。本专利技术通过手机用户端与服务器端的共同作用，利用用户手机摄像头，避免了使用额外设备带来的额外负担；服务器对接收到来自用户端图像进行识别处理，同时后台服务人员也可以进行增添信息，再返回给用户端，从而实现远程维护、修理的功能，也可以实现新员工的设备相关的培训工作。本专利技术可以极大的解决MOCVD设备(或零件)的维护、修理等售后相关的问题，减少MOCVD设备厂商的售后等问题，也能减轻MOCVD设备相关企业新员工培训等压力。节省人力物力，节省相关的时间成本。为用户提供优质的人性化服务。如图1所示，本专利技术提供了一种基于AR技术的MOCVD设备维修辅助方法，该方法包括以下步骤：S101、调用用户端摄像头获取当前视频图像并上传，得到视频信息；S102、通过目标识别算法对视频信息进行图像模板识别，得到检测目标；S103、将检测目标与资料库内的设备匹配，得到设备信息；S104、将设备信息添加至视频信息后进行视频处理，得到AR视频；具体地，所述的资料库为MOCVD设备生成厂商所有，包含设备生产的设备信息、零件规格、设备结构、操作规范等说明的信息库，。S105、将AR视频回传至用户端。具体地，所述AR视频中应当包括用户所拍摄的MOCVD设备(或零件)的图像信息；用户所拍摄的MOCVD设备(或零件)的操作说明信息，以文字或动画的形式表达；用户所拍摄的MOCVD设备(或零件)的设备结构简图信息；后台服务人员所增加的指导意见；用户所拍摄的MOCVD设备(或零件)操作的额外注意事项。进一步作为本方法的优选实施例，所述调用用户端摄像头获取当前视频图像并上传，得到视频信息这一步骤之前，还包括：发送请求指令并确认用户端的IP地址。具体地，用户端向服务端发送请求指令，服务端接收到请求指令后，确认IP地址，然后开始准备接收用户端传输的MOCVD设备(或零件)视频图像信息。进一步作为本方法的优选实施例，所述通过目标识别算法对视频信息进行图像模板识别，得到检测目标这一步骤，其具体包括：根据视频信息中的图像和目标识别算法生成特征图；将特征图输入到预训练的分类模型，得到检测目标。具体地，所述目标识别算法采用FASTER-RCNN算法。进一步作为本方法优选实施例，所述根据视频信息中的图像生成特征图这一步骤，其具体包括：对视频信息进行分帧，并将分帧后的图像逐帧输入卷积神经网络；通过窗口建议网络生成建议窗口并映射到卷积神经网络的最后一层，得到固定尺寸的特征图。具体地，用窗口建议网络生成建议窗口，大约在每帧图像本文档来自技高网...

【技术保护点】
1.一种基于AR技术的MOCVD设备维修辅助方法，其特征在于，包括以下步骤：/n调用用户端摄像头获取当前视频图像并上传，得到视频信息；/n通过目标识别算法对视频信息进行图像模板识别，得到检测目标；/n将检测目标与资料库内的设备匹配，得到设备信息；/n将设备信息添加至视频信息后进行视频处理，得到AR视频；/n将AR视频回传至用户端。/n

【技术特征摘要】
1.一种基于AR技术的MOCVD设备维修辅助方法，其特征在于，包括以下步骤：
调用用户端摄像头获取当前视频图像并上传，得到视频信息；
通过目标识别算法对视频信息进行图像模板识别，得到检测目标；
将检测目标与资料库内的设备匹配，得到设备信息；
将设备信息添加至视频信息后进行视频处理，得到AR视频；
将AR视频回传至用户端。


2.根据权利要求1所述一种基于AR技术的MOCVD设备维修辅助方法，其特征在于，所述调用用户端摄像头获取当前视频图像并上传，得到视频信息这一步骤之前，还包括：
发送请求指令并确认用户端的IP地址。


3.根据权利要求2所述一种基于AR技术的MOCVD设备维修辅助方法，其特征在于，所述通过目标识别算法对视频信息进行图像模板识别，得到检测目标这一步骤，其具体包括：
根据视频信息中的图像和目标识别算法生成特征图；
将特征图输入到预训练的分类模型，得到检测目标。


4.根据权利要求3所述一种基于AR技术的MOCVD设备维修辅助方法，其特征在于，所述根据视频信息中的图像和目标识别算法生成特征图这一步骤，其具体包括：
对视频信息进行分帧，并将分帧后的图像逐帧输入卷积神...

【专利技术属性】
技术研发人员：李健，罗铁成，王钢，裴艳丽，
申请(专利权)人：中山大学，
类型：发明
国别省市：广东;44