一种太空舱特效生成方法、装置、电子设备及存储介质制造方法及图纸

本公开提供了一种太空舱特效生成方法、装置、电子设备及存储介质，其中，该方法包括：基于获取的场景图像，确定室内环境中各个真实物体的信息；根据室内环境中各个真实物体的信息，确定各个虚拟太空舱元素在待生成的AR太空舱场景图像中的融合方式和融合位置；融合方式包括补充展示在室内环境中和替换室内环境中的真实物体；基于确定的各个虚拟太空舱元素的融合方式和融合位置，控制AR设备展示将各个虚拟太空舱元素融入室内环境的AR太空舱场景图像。本公开通过AR设备构建的虚拟太空环境能够使得用户产生身临其境的外太空体验，可以使用较低的成本，来体验外太空环境，且可以兼顾各种真实场景进行虚拟太空环境的构建，适用性更佳。

【技术实现步骤摘要】
一种太空舱特效生成方法、装置、电子设备及存储介质
本公开涉及AR设备
，具体而言，涉及一种太空舱特效生成方法、装置、电子设备及存储介质。
技术介绍
随着人们生活水平的提高，越来越多的用户想要寻找不一样的体验，外太空则一直是一个人们一直探索却又无比神秘的所在。目前，人们对于外太空的探索还处于初步阶段，访问真实的外太空环境造价极为昂贵，且可能因为存在一些潜在的威胁而导致人们没有勇气造访外太空，从而使得人们想要身临其境的感受外太空环境的需求难以得到满足。
技术实现思路
本公开实施例至少提供一种太空舱特效生成方案，通过AR设备展示AR太空舱场景图像，其构建的虚拟太空环境能够使得用户产生身临其境的外太空体验，可以使用较低的成本，来体验外太空环境，且能够兼顾各种真实场景进行虚拟太空环境的构建，适用性更佳。第一方面，本公开实施例提供了一种太空舱特效生成方法，所述方法包括：获取包括室内环境的场景图像；基于获取的所述场景图像，确定所述室内环境中各个真实物体的信息；根据所述室内环境中各个真实物体的信息，确定各个虚拟太空舱元素在待生成的AR太空舱场景图像中的融合方式和融合位置；所述融合方式包括补充展示在室内环境中和替换室内环境中的真实物体；基于确定的所述各个虚拟太空舱元素的所述融合方式和融合位置，控制AR设备展示将所述各个虚拟太空舱元素融入所述室内环境的AR太空舱场景图像。在一种实施方式中，所述基于获取的所述场景图像，确定所述室内环境中各个真实物体的信息，包括：基于训练的目标检测网络对所述场景图像进行目标检测，提取出所述场景图像中各个真实物体的图像区域；基于训练的特征提取网络对每个真实物体的图像区域进行特征提取，得到该真实物体的属性特征，并将该属性特征作为所述每个真实物体的信息。在一种实施方式中，所述根据所述室内环境中各个真实物体的信息，确定各个虚拟太空舱元素在待生成的AR太空舱场景图像中的融合方式和融合位置，包括：针对所述室内环境中的每个真实物体，若确定存在与该真实物体匹配的第一虚拟太空舱元素，则确定所述融合方式为采用该真实物体匹配的第一虚拟太空舱元素替换该真实物体，并根据该真实物体在整个室内环境中的位置信息，确定与该真实物体匹配的第一虚拟太空舱元素在待生成的AR太空舱场景图像中的融合位置。在一种实施方式中，针对任一真实物体，确定与该任一真实物体匹配的第一虚拟太空舱元素，包括：根据所述任一真实物体对应的物体类型，确定与该任一真实物体匹配的第一虚拟太空舱元素类型；获取确定的所述第一虚拟太空舱元素类型对应的三维模型，并根据所述任一真实物体的属性特征，调整该三维模型的属性特征，得到调整后的与该任一真实物体匹配的第一虚拟太空舱元素。在一种实施方式中，所述根据所述室内环境中各个真实物体的信息，确定各个虚拟太空舱元素在待生成的AR太空舱场景图像中的融合方式和融合位置，包括：针对待呈现的虚拟太空舱元素中，不存在与真实物体匹配的第二虚拟太空舱元素，确定各个第二虚拟太空舱元素对应的所述融合方式为补充展示在室内环境中，并根据各个真实物体在整个室内环境中的位置信息，确定各个第二虚拟太空舱元素在待生成的AR太空舱场景图像中的融合位置。在一种实施方式中，所述属性特征包括以下至少一种：尺寸、大小、姿态。在一种实施方式中，根据以下步骤确定所述待呈现的虚拟太空舱元素：根据所述室内环境对应的场景类型，从各个存储的虚拟太空舱元素集合中，选择与该场景类型匹配的虚拟太空舱元素集合。第二方面，本公开实施例还提供了一种太空舱特效生成装置，所述装置包括：获取模块，用于获取包括室内环境的场景图像；第一确定模块，用于基于获取的所述场景图像，确定所述室内环境中各个真实物体的信息；第二确定模块，用于根据所述室内环境中各个真实物体的信息，确定各个虚拟太空舱元素在待生成的AR太空舱场景图像中的融合方式和融合位置；所述融合方式包括补充展示在室内环境中和替换室内环境中的真实物体；控制模块，用于基于确定的所述各个虚拟太空舱元素的所述融合方式和融合位置，控制AR设备展示将所述各个虚拟太空舱元素融入所述室内环境的AR太空舱场景图像。第三方面，本公开实施例还提供了一种电子设备，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如第一方面及其各种实施方式任一所述的太空舱特效生成方法的步骤。第四方面，本公开实施例还提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如第一方面及其各种实施方式任一所述的太空舱特效生成方法的步骤。采用上述太空舱特效生成方案，其首先可以基于获取的所述场景图像，确定所述室内环境中各个真实物体的信息，并可以根据各个真实物体的信息，确定各个虚拟太空舱元素在待生成的AR太空舱场景图像中的融合方式和融合位置，最后，可以根据确定的各个虚拟太空舱元素的融合方式和融合位置，控制AR设备展示将各个虚拟太空舱元素融入室内环境的AR太空舱场景图像，也即，AR可以展示的是带有各个虚拟太空舱元素的AR太空舱场景图像，其构建的虚拟太空环境能够使得用户产生身临其境的外太空体验，可以使用较低的成本来体验外太空环境，另外，由于展示的AR太空舱场景图像可以是基于各种融合方式得到的，因而能兼顾各种真实场景进行虚拟太空环境的构建，适用性更佳。为使本公开的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。附图说明为了更清楚地说明本公开实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，此处的附图被并入说明书中并构成本说明书中的一部分，这些附图示出了符合本公开的实施例，并与说明书一起用于说明本公开的技术方案。应当理解，以下附图仅示出了本公开的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。图1示出了本公开实施例一所提供的一种太空舱特效生成方法的流程图；图2(a)示出了本公开实施例一所提供的一种太空舱特效生成方法的应用示意图；图2(b)示出了本公开实施例一所提供的一种太空舱特效生成方法的应用示意图图3示出了本公开实施例二所提供的一种太空舱特效生成装置的示意图；图4示出了本公开实施例三所提供的一种电子设备的示意图。具体实施方式为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本本文档来自技高网...

【技术保护点】
1.一种太空舱特效生成方法，其特征在于，所述方法包括：/n获取包括室内环境的场景图像；/n基于获取的所述场景图像，确定所述室内环境中各个真实物体的信息；/n根据所述室内环境中各个真实物体的信息，确定各个虚拟太空舱元素在待生成的AR太空舱场景图像中的融合方式和融合位置；所述融合方式包括补充展示在室内环境中和替换室内环境中的真实物体；/n基于确定的所述各个虚拟太空舱元素的所述融合方式和融合位置，控制AR设备展示将所述各个虚拟太空舱元素融入所述室内环境的AR太空舱场景图像。/n

【技术特征摘要】
1.一种太空舱特效生成方法，其特征在于，所述方法包括：
获取包括室内环境的场景图像；
基于获取的所述场景图像，确定所述室内环境中各个真实物体的信息；
根据所述室内环境中各个真实物体的信息，确定各个虚拟太空舱元素在待生成的AR太空舱场景图像中的融合方式和融合位置；所述融合方式包括补充展示在室内环境中和替换室内环境中的真实物体；
基于确定的所述各个虚拟太空舱元素的所述融合方式和融合位置，控制AR设备展示将所述各个虚拟太空舱元素融入所述室内环境的AR太空舱场景图像。


2.根据权利要求1所述的方法，其特征在于，所述基于获取的所述场景图像，确定所述室内环境中各个真实物体的信息，包括：
基于训练的目标检测网络对所述场景图像进行目标检测，提取出所述场景图像中各个真实物体的图像区域；
基于训练的特征提取网络对每个真实物体的图像区域进行特征提取，得到该真实物体的属性特征，并将该属性特征作为所述每个真实物体的信息。


3.根据权利要求1或2所述的方法，其特征在于，所述根据所述室内环境中各个真实物体的信息，确定各个虚拟太空舱元素在待生成的AR太空舱场景图像中的融合方式和融合位置，包括：
针对所述室内环境中的每个真实物体，若确定存在与该真实物体匹配的第一虚拟太空舱元素，则确定所述融合方式为采用该真实物体匹配的第一虚拟太空舱元素替换该真实物体，并根据该真实物体在整个室内环境中的位置信息，确定与该真实物体匹配的第一虚拟太空舱元素在待生成的AR太空舱场景图像中的融合位置。


4.根据权利要求3所述的方法，其特征在于，针对任一真实物体，确定与该任一真实物体匹配的第一虚拟太空舱元素，包括：
根据所述任一真实物体对应的物体类型，确定与该任一真实物体匹配的第一虚拟太空舱元素类型；
获取确定的所述第一虚拟太空舱元素类型对应的三维模型，并根据所述任一真实物体的属性特征，调整该三维模型的属性特征，得到调整后的与该任一真实物体匹配的第一虚拟太空舱元素。


5.根据权利要求1或2所...

【专利技术属性】
技术研发人员：孙红亮，揭志伟，王子彬，潘思霁，
申请(专利权)人：浙江商汤科技开发有限公司，
类型：发明
国别省市：浙江;33