一种培训方法、装置、网络设备、终端设备及培训系统制造方法及图纸

本发明专利技术提供一种培训方法、装置、网络设备、终端设备及培训系统，涉及混合现实领域。该方法包括：接收目标设备的实体信息；根据所述实体信息，向第一终端设备和第二终端设备发送所述目标设备的设备模型信息；所述第一终端设备和所述第二终端设备根据所述设备模型信息显示所述目标设备的设备模型；其中，所述实体信息是由所述第一终端或所述第二终端实时采集并发送的。本发明专利技术的方案，解决了现有技术中的系统培训功能单一而导致培训效率较低的问题。系统培训功能单一而导致培训效率较低的问题。系统培训功能单一而导致培训效率较低的问题。

【技术实现步骤摘要】
一种培训方法、装置、网络设备、终端设备及培训系统


[0001]本专利技术涉及混合现实领域，特别是指一种培训方法、装置、网络设备、终端设备及培训系统。

技术介绍

[0002]在工业企业中，新员工上岗前通常需要经过一系列的培训考核，以确保员工具备完成相应工作的能力。目前，绝大多数企业拥有多样化的生产线，且每条产线包含众多环节，不同环节所涉及的操作内容及方法复杂且不统一，这就造成了企业在员工培训环节需要花费大量成本投入，且由于培训无法有针对性地指导每一位新员工，导致培训效率和质量难以得到有效保障。
[0003]以柴油发动机装配流程为例，柴油机由两大机构和四大系统组成，即由曲柄连杆机构、配气机构、燃料供给系、润滑系、冷却系和起动系组成。其中，包括的主要配件有汽缸、活塞、排气门、曲轴同步带轮、进气管等，还包括大量的螺母、螺栓、垫片等细小零配件，因此粗略估算一台柴油机需组装的零部件可达成千上万个，可见柴油发动机的装配是一个异常复杂的工作。此外，在柴油发动机装配过程中，缺失任何一个微小组件都可能导致发动机产品安全风险的提高，而由于柴油发动机造价成本极高，每产出一个不合格品都会给企业带来至少几十万的损失。
[0004]因此，如何在减少培训成本的同时提升培训质量和效率，保证生产安全，是所有工业企业目前亟待解决的痛点之一。
[0005]随着混合现实MR技术是虚拟现实技术的进一步发展，该技术通过在虚拟环境中引入现实场景信息，能够在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路，以增强用户体验的真实感。因此，MR不仅提供新的观看方法，还提供新的输入方法，并且能够将所有方法相互结合，从而推动创新。MR技术在实现时，需要一个能与现实世界各事物相互交互的环境，其关键点在于与现实世界进行交互，以及信息的及时获取(如果一切事物都是虚拟的就是虚拟现实VR；如果展现出来的虚拟信息只能简单叠加在现实事物上，就是增强现实AR)。
[0006]MR技术中，SLAM(Simultaneous Localization And Mapping，即时定位与地图构建)、识别跟踪、人机交互是混合现实技术的重要组成部分。其中，SLAM技术是MR设备对环境进行感知及定位自身所处空间相对位置的最基础、最核心的技术；识别跟踪是基于三维空间信息，对其中某一物体进行追踪的关键技术；人机交互是使用者与MR设备之间进行指令、信息互通的核心技术。目前，较成熟的人机交互方式包括：触控、语音和手势等，未来还由可能通过眼球、脑电波等方式直接操控MR设备。
[0007]除此之外，为了更好地感知环境中的物体，MR技术的应用常常伴随着机器视觉(Computer Vision)技术，而机器视觉是人工智能中正在快速发展的一个分支。简单来说，机器视觉就是基于深度神经网络等技术，让机器具备自主识别的能力，从而实现特定动作的自动触发。一般情况下，使用者可利用MR终端拍摄图片、视频等内容素材，并通过无线传
输网络将拍摄到的素材上传至云端或相应的业务管理系统，系统基于机器视觉能力对采集到的内容素材进行识别分析，再将分析的结果或待触发的虚拟内容回传至MR终端进行呈现。
[0008]目前，虽然可以借助AR眼镜与传感器，实现培训内容的可视化呈现以及自主考核，但是，现有技术中的培训考核系统缺少多人协作功能，学员只能依靠预设的培训内容进行学习，在遇到复杂问题时，无法与老师、或其他学员进行协作；需要借助外部传感器配合完成设备状态的监测，对于类似柴油机装配的场景，无法自主判断装配结果是否完成且合格；缺失员工考核环节，无法判定员工在培训后是否具备上岗作业能力。总之，现有技术的培训功能单一，导致培训效率较低。

技术实现思路

[0009]本专利技术的目的是提供一种培训方法、装置、网络设备、终端设备及培训系统，解决了现有技术中的系统培训功能单一而导致培训效率较低的问题。
[0010]为达到上述目的，本专利技术的实施例提供一种培训方法，应用于网络设备，包括：
[0011]接收目标设备的实体信息；
[0012]根据所述实体信息，向第一终端设备和第二终端设备发送所述目标设备的设备模型信息；所述第一终端设备和所述第二终端设备根据所述设备模型信息显示所述目标设备的设备模型；
[0013]其中，所述实体信息是由所述第一终端或所述第二终端实时采集并发送的。
[0014]可选地，所述培训方法还包括：
[0015]若所述实体信息是第一终端设备发送的，则进入第一模式；
[0016]在所述第一模式下，接收所述第一终端设备发送的第一信息；其中，所述第一信息包括第一用户对所述目标设备进行操作时的第一多媒体数据信息和/或第一操作信息；
[0017]将所述第一信息发送至所述第二终端设备。
[0018]可选地，所述培训方法还包括：
[0019]在所述第一模式下，接收所述第二终端设备发送的第一指令；
[0020]根据所述第一指令，创建新的会话；
[0021]通过所述新的会话，完成所述第二终端设备与所述新的会话的相关终端设备的通信；
[0022]其中，所述第二终端设备和第一终端设备对应所述新的会话生成一操作室，所述操作室显示新的设备模型。
[0023]可选地，所述培训方法还包括：
[0024]在所述第一模式下，在接收到所述第二终端设备发送的第二指令的情况下，关闭所述新的会话；
[0025]其中，所述第二指令用于指示关闭所述新的会话。
[0026]可选地，所述培训方法还包括：
[0027]若所述实体信息是第二终端设备发送的，且在接收到所述第二终端设备发送的第三指令的情况下，则进入第二模式；
[0028]在所述第二模式下，根据所述第三指令，向所述第二终端发送所述目标设备对应
的培训信息；其中，所述培训信息包括动画模型和/或多媒体信息；
[0029]接收所述第二终端设备发送的第二信息；其中，所述第二信息包括第二用户对所述目标设备进行操作时的第二多媒体数据信息和/或第二操作信息；
[0030]根据所述第二信息，向所述第二终端设备发送反馈信息。
[0031]可选地，所述培训方法还包括：
[0032]根据所述第二信息，对所述第二用户的操作过程及所述目标设备的实时状态进行分析；
[0033]在所述第二用户操作错误的情况下，存储所述第二操作信息；
[0034]基于机器学习能力，根据所述第二操作信息，生成新的考核信息。
[0035]可选地，所述培训方法还包括：
[0036]若所述实体信息是第二终端设备发送的，且在接收到所述第二终端设备发送的第四指令的情况下，则进入第三模式；
[0037]在第三模式下，根据所述第四指令，向所述第二终端发送所述目标设备对应的考核信息；
[0038]接收所述第二终端设备发送的第三信息；其中，所述第三信息包括第二用户对所述目标设备进行操作时的第三多媒体数据信息和/或第三操作信息；
[本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种培训方法，应用于网络设备，其特征在于，包括：接收目标设备的实体信息；根据所述实体信息，向第一终端设备和第二终端设备发送所述目标设备的设备模型信息；所述第一终端设备和所述第二终端设备根据所述设备模型信息显示所述目标设备的设备模型；其中，所述实体信息是由所述第一终端或所述第二终端实时采集并发送的。2.根据权利要求1所述的培训方法，其特征在于，还包括：若所述实体信息是第一终端设备发送的，则进入第一模式；在所述第一模式下，接收所述第一终端设备发送的第一信息；其中，所述第一信息包括第一用户对所述目标设备进行操作时的第一多媒体数据信息和/或第一操作信息；将所述第一信息发送至所述第二终端设备。3.根据权利要求2所述的培训方法，其特征在于，还包括：在所述第一模式下，接收所述第二终端设备发送的第一指令；根据所述第一指令，创建新的会话；通过所述新的会话，完成所述第二终端设备与所述新的会话的相关终端设备的通信；其中，所述第二终端设备和第一终端设备对应所述新的会话生成一操作室，所述操作室显示新的设备模型。4.根据权利要求3所述的培训方法，其特征在于，还包括：在所述第一模式下，在接收到所述第二终端设备发送的第二指令的情况下，关闭所述新的会话；其中，所述第二指令用于指示关闭所述新的会话。5.根据权利要求1所述的培训方法，其特征在于，还包括：若所述实体信息是第二终端设备发送的，且在接收到所述第二终端设备发送的第三指令的情况下，则进入第二模式；在所述第二模式下，根据所述第三指令，向所述第二终端发送所述目标设备对应的培训信息；其中，所述培训信息包括动画模型和/或多媒体信息；接收所述第二终端设备发送的第二信息；其中，所述第二信息包括第二用户对所述目标设备进行操作时的第二多媒体数据信息和/或第二操作信息；根据所述第二信息，向所述第二终端设备发送反馈信息。6.根据权利要求5所述的培训方法，其特征在于，还包括：根据所述第二信息，对所述第二用户的操作过程及所述目标设备的实时状态进行分析；在所述第二用户操作错误的情况下，存储所述第二操作信息；基于机器学习能力，根据所述第二操作信息，生成新的考核信息。7.根据权利要求1所述的培训方法，其特征在于，还包括：若所述实体信息是第二终端设备发送的，且在接收到所述第二终端设备发送的第四指令的情况下，则进入第三模式；在第三模式下，根据所述第四指令，向所述第二终端发送所述目标设备对应的考核信息；
接收所述第二终端设备发送的第三信息；其中，所述第三信息包括第二用户对所述目标设备进行操作时的第三多媒体数据信息和/或第三操作信息；在接收到所述终端设备发送的第五指令的情况下，根据所述第三信息，对所述第二用户的考核过程进行评分，并将评分结果发送至所述第二终端设备；其中，所述第五指令用于指示结束考核。8.根据权利要求7所述的培训方法，其特征在于，在所述向所述第二终端发送所述目标设备对应的考核信息之前，所述培训方法还包括：根据所述第四指令，确定所述目标设备的型号；其中，所述第四指令携带有所述目标设备的标识码信息；判断所述第二用户是否已完成所述目标设备对应的培训课程；在判断结果为否的情况下，提示所述第二用户完成所述培训课程。9.一种培训方法，应用于第一终端设备，其特征在于，包括：接收网络设备发送的目标设备的设备模型信息；根据所述设备模型信息，向第一用户显示所述目标设备的设备模型；其中，所述设备模型信息是所述网络设备根据所述目标设备的实体信息发送的，所述实体信息是由第一终端或第二终端实时采集并向所述网络设备发送的。10.根据权利要求9所述的培训方法，其特征在于，在所述接收网络设备发送的目标设备的设备模型信息之前，所述培训方法还包括：对所述目标设备进行扫描，获得所述目标设备的实体信息，并将所述实体信息发送至所述网络设备。11.根据权利要求9所述的培训方法，其特征在于，还包括：采集所述第一用户对所述目标设备进行操作时的第一信息，并将所述第一信息发送至所述网络设备；其中，所述第一信息包括第一多媒体数据信息和/或第一操作信息。12.一种培训方法，应用于第二终端设备，其特征在于，包括：接收网络设备发送的目标设备的设备模型信息；根据所述设备模型信息，向第二用户显示所述目标设备的设备模型；其中，所述设备模型信息是所述网络设备根据所述目标设备的实体信息发送的，所述实体信息是由第一终端或第二终端实时采集并向所述网络设备发送的。13.根据权利要求12所述的培训方法，其特征在于，还包括：在所述第一模式下，接收网络设备发送的第一信息；其中，所述第一信息包括第一用户对所述目标设备进行操作时的第一多媒体数据信息和/或第一操作信息。14.根据权利要求12所述的培训方法，其特征在于，还包括：在所述第一模式下，向所述网络设备发送第一指令；通过所述网络设备根据所述第一指令创建新的会话，完成与所述新的会话的相关终端设备的通信；其中，所述第二终端设备和第一终端设备对应所述新的会话生成一操作室，所述操作室显示新的设备模型。15.根据权利要求14所述的培训方法，其特征在于，还包括：
在所述第一模式下，向所述网络设备发送第二指令；其中，所述第二指令用于指示关闭所述新的会话。16.根据权利要求12所述的培训方法，其特征在于，在所述接收网络设备发送的目标设备的设备模型信息之前，所述培训方法还包括：向所述网络设备发送第三指令；在所述第二模式下，接收所述网络设备根据所述第三指令发送的所述目标设备对应的培训信息；其中，所述培训信息包括动画模型和/或多媒体信息；采集所述第二用户对所述目标设备进行操作时的第二信息，并向所述网络设备发送所述第二信息；其中，所述第二信息包括第二多媒体数据信息和/或第二操作信息；接收所述网络设备根据所述第二信息发送的反馈信息。17.根据权利要求12所述的培训方法，其特征在于，在所述接收网络设备发送的目标设备的设备模型信息之前，所述培训方法还包括：向所述网络设备发送第四指令；在第三模式下，接收所述网络设备根据所述第四指令发送的所述目标设备对应的考核信息；将所述考核信息叠加在所述目标设备上，并显示给所述第二用户；采集所述第二用户对所述目标设备进行操作时的第三信息，并向所述网络设备发送所述第三信息；其中，所述第三信息包括第三多媒体数据信息和/或第三操作信息；向所述网络设备发送第五指令；其中，所述第五指令用于指示结束考核；接收所述网络设备发送的评分结果。18.一种网络设备，其特征在于，包括：收发机和处理器；所述收发机用于接收目标设备的实体信息；所述处理器用于根据所述实体信息，向第一终端设备和第二终端设备发送所述目标设备的设备模型信息；所述第一终端设备和所述第二终端设备根据所述设备模型信息显示所述目标设备的设备模型；其中，所述实体信息是由所述第一终端或所述第二终端实时采集并发送的。19.根据权利要求18所述的网络设备，其特征在于，所述处理器还用于：若所述实体信息是第一终端设备发送的，则进入第一模式；在所述第一模式下，接收所述第一终端设备发送的第一信息；其中，所述第一信息包括第一用户对所述目标设备进行操作时的第一多媒体数据信息和/或第一操作信息；将所述第一信息发送至所述第二...

【专利技术属性】
技术研发人员：王科，梁睿，王子晨，
申请(专利权)人：中移智行网络科技有限公司中国移动通信集团有限公司，
类型：发明
国别省市：