【技术实现步骤摘要】
本专利技术涉及基于混合现实领域，尤其涉及一种基于混合现实的军用载具交互方法及相关设备。
技术介绍
1、在现代战争中，军用载具的作用越来越重要。现有的军用载具操作方式主要依赖于多人协同工作，通常包括指挥官和炮手两个角色。指挥官负责通过各种传感器和监控设备获取战场信息，并进行分析和决策。根据指挥官的指令，炮手负责具体执行操作，例如瞄准和发射武器。然而这种操作方式中，指挥官和炮手之间的沟通协调过程需要时间，此外，由于这种操作方式的信息获取方式主要依赖于视场内的观察和固定角度的摄像头，这使得操作者在快速变化的战场环境中难以及时获取全面的环境信息，通过旋转摄像头也容易导致信息获取的延迟，在快速变化的战场环境中，这种延迟可能导致关键战机的错失，综上所述这种多人协同的军用载具操作方式无疑增加了人员的暴露风险和伤亡率。
技术实现思路
1、本专利技术的主要目的在于解决现有的军用载具操作容易增加人员的暴露风险和伤亡率的技术问题。
2、本专利技术第一方面提供了一种基于混合现实的军用载具交互方法，所述基于混合现实的军用载具交互方法包括：
3、通过所述军用载具上安装的摄像头设备采集所述军用载具所在环境的影像数据；
4、根据预设的视觉算法，对所述影像数据进行图像融合拼接，得到融合图像，并在所述军用载具对应的混合现实设备运行时，将所述融合图像转化为所述混合现实设备的场景图像；
5、根据所述场景图像生成所述混合现实设备的显示画面，其中，所述显示画面包括多个交互控件；
6、响应于针对所述多个交互控件中的任一交互控件的选择操作，将所述选择操作对应的交互控件作为目标控件，并实现所述目标控件对应的交互功能。
7、可选的，在本专利技术第一方面的第一种实现方式中，在所述根据所述场景图像生成所述混合现实设备的显示画面之后，还包括：
8、当所述军用载具对应的混合现实设备转动时，实时获取所述混合现实设备的转动角度；
9、根据所述转动角度和所述场景图像调整所述显示画面。
10、可选的，在本专利技术第一方面的第二种实现方式中，在所述根据所述场景图像生成所述混合现实设备的显示画面之后，还包括：
11、对所述影像数据或所述融合图像或场景图像进行攻击对象识别，得到识别结果；
12、若所述识别结果为所述影像数据或所述融合图像或场景图像中存在攻击对象，则根据所述攻击对象在所述影像数据或所述融合图像或场景图像中的图像位置；
13、根据所述图像位置在所述显示画面中对所述攻击对象进行标记。
14、可选的，在本专利技术第一方面的第三种实现方式中，所述根据所述图像位置在所述显示画面中对所述攻击对象进行标记包括：
15、根据所述图像位置判断所述攻击对象是否在所述显示画面中；
16、若是，则根据所述图像位置确定所述攻击对象在所述显示画面中的第一标记位置，并在所述第一标记位置对所述攻击对象进行实时标记；
17、若否，则根据所述图像位置确定所述攻击对象与所述军用载具之间的相对方向；
18、根据所述相对方向在所述显示画面的边缘确定第二标记位置，并在所述第二标记位置对所述攻击对象进行实时标记。
19、可选的，在本专利技术第一方面的第四种实现方式中，所述混合现实设备包括头戴设备和手持设备，所述军用载具上装载有炮台，所述炮台上装载有高清摄像头设备；
20、在所述根据所述场景图像生成所述混合现实设备的显示画面之后，还包括：
21、对佩戴所述头戴设备的用户进行眼球追踪，得到眼球追踪结果；
22、当检测到所述手持设备中的调整按钮被按压时，根据所述眼球追踪结果确定所述炮台的朝向位置，并根据所述朝向位置转动所述炮台；
23、当所述炮台完成所述朝向位置的转动时，通过所述炮台上装载的高清摄像头设备拍摄所述朝向位置上的影像数据；
24、对所述朝向位置上的影像数据进行攻击对象识别和标记。
25、可选的，在本专利技术第一方面的第五种实现方式中，所述响应与针对所述多个交互控件中的任一交互控件的选择操作，将所述选择操作对应的交互控件作为目标控件，并实现所述目标控件对应的交互功能包括：
26、对所述眼球追踪结果进行分析，识别所述用户是否进行目标行为；
27、若所述用户进行了目标行为，则根据所述眼球追踪结果确定所述用户进行目标行为时的视线位置，并判断所述视线位置是否存在对应的交互控件；
28、若所述视线位置存在对应的交互控件，则将所述目标行为识别为选择操作，并将所述选择操作对应的交互控件作为目标控件，实现所述目标控件对应的交互功能。
29、可选的，在本专利技术第一方面的第六种实现方式中，所述响应与针对所述多个交互控件中的任一交互控件的选择操作，将所述选择操作对应的交互控件作为目标控件，并实现所述目标控件对应的交互功能包括：
30、实时获取所述手持设备的空间位置，并根据所述手持设备的空间位置生成所述显示画面所在的虚拟空间的虚拟手部；
31、实时对所述虚拟手部进行动作识别，得到动作识别结果，并判断所述动作识别结果是否为目标动作；
32、若为目标动作，则判断识别所述动作识别结果时所述虚拟手部在所述虚拟空间的位置是否映射至任一交互控件；
33、若映射至任一交互控件，则将所述动作识别结果识别为选择操作，将所述选择操作对应的交互控件作为目标控件，并实现所述目标控件对应的交互功能。
34、本专利技术第二方面提供了一种基于混合现实的军用载具交互装置，所述基于混合现实的军用载具交互装置包括：
35、数据采集模块， 用于通过所述军用载具上安装的摄像头设备采集所述军用载具所在环境的影像数据；
36、虚拟成像模块，用于根据预设的视觉算法，对所述影像数据进行图像融合拼接，得到融合图像，并在所述军用载具对应的混合现实设备运行时，将所述融合图像转化为所述混合现实设备的场景图像；
37、显示模块，用于根据所述场景图像生成所述混合现实设备的显示画面，其中，所述显示画面包括多个交互控件；
38、功能响应模块，用于响应于针对所述多个交互控件中的任一交互控件的选择操作，将所述选择操作对应的交互控件作为目标控件，并实现所述目标控件对应的交互功能。
39、本专利技术第三方面提供了一种基于混合现实的军用载具交互装置，包括：存储器和至少一个处理器，所述存储器中存储有指令，所述存储器和所述至少一个处理器通过线路互连；所述至少一个处理器调用所述存储器中的所述指令，以使得所述基于混合现实的军用载具交互设备执行上述的基于混合现实的军用载具交互方法的步骤。
40、本专利技术的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述的基于混合现实的军用载具交互方法的步骤。
41、上述基于混合现实的军用载本文档来自技高网...
【技术保护点】
1.一种基于混合现实的军用载具交互方法，其特征在于，所述基于混合现实的军用载具交互方法包括：
2.根据权利要求1所述的基于混合现实的军用载具交互方法，其特征在于，在所述根据所述场景图像生成所述混合现实设备的显示画面之后，还包括：
3.根据权利要求1所述的基于混合现实的军用载具交互方法，其特征在于，在所述根据所述场景图像生成所述混合现实设备的显示画面之后，还包括：
4.根据权利要求3所述的基于混合现实的军用载具交互方法，其特征在于，所述根据所述图像位置在所述显示画面中对所述攻击对象进行标记包括：
5.根据权利要求1所述的基于混合现实的军用载具交互方法，其特征在于，所述混合现实设备包括头戴设备和手持设备，所述军用载具上装载有炮台，所述炮台上装载有高清摄像头设备；
6.根据权利要求5所述的基于混合现实的军用载具交互方法，其特征在于，所述响应与针对所述多个交互控件中的任一交互控件的选择操作，将所述选择操作对应的交互控件作为目标控件，并实现所述目标控件对应的交互功能包括：
7.根据权利要求5所述的基于混合现实的军用载具
8.一种基于混合现实的军用载具交互装置，其特征在于，所述基于混合现实的军用载具交互装置包括：
9.一种基于混合现实的军用载具交互设备，其特征在于，所述基于混合现实的军用载具交互设备包括：存储器和至少一个处理器，所述存储器中存储有指令；
10.一种计算机可读存储介质，所述计算机可读存储介质上存储有指令，其特征在于，所述指令被处理器执行时实现如权利要求1-7中任意一项所述基于混合现实的军用载具交互方法的步骤。
...【技术特征摘要】
1.一种基于混合现实的军用载具交互方法，其特征在于，所述基于混合现实的军用载具交互方法包括：
2.根据权利要求1所述的基于混合现实的军用载具交互方法，其特征在于，在所述根据所述场景图像生成所述混合现实设备的显示画面之后，还包括：
3.根据权利要求1所述的基于混合现实的军用载具交互方法，其特征在于，在所述根据所述场景图像生成所述混合现实设备的显示画面之后，还包括：
4.根据权利要求3所述的基于混合现实的军用载具交互方法，其特征在于，所述根据所述图像位置在所述显示画面中对所述攻击对象进行标记包括：
5.根据权利要求1所述的基于混合现实的军用载具交互方法，其特征在于，所述混合现实设备包括头戴设备和手持设备，所述军用载具上装载有炮台，所述炮台上装载有高清摄像头设备；
6.根据权利要求5所述的基于混合现实的军用载具交互方法，其特征在于，所述...
【专利技术属性】
技术研发人员：蔡松晏，
申请(专利权)人：深圳市易晨虚拟现实技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。