混合现实显示方法、三维扫描设备及存储介质技术

本发明专利技术实施例提供一种混合现实显示方法、三维扫描设备及存储介质，属于图像处理领域。该方法包括：通过显示装置实时显示放置于三维扫描设备上的目标对象的三维模型重建画面；在所述目标对象的初始三维模型重建完成时，显示所述三维扫描设备上的相机装置在当前时刻对所述目标对象进行拍摄得到的RGB图像；响应于用户触发的三维模型切换操作，将显示的所述RGB图像切换为所述目标对象的对应三维模型。本发明专利技术实施例的技术方案提高了目标对象的损坏检查的便利性和准确性。坏检查的便利性和准确性。坏检查的便利性和准确性。

【技术实现步骤摘要】
混合现实显示方法、三维扫描设备及存储介质


[0001]本专利技术涉及图像处理领域，尤其涉及一种混合现实显示方法、三维扫描设备及存储介质。

技术介绍

[0002]人们通过物流公司、快递公司或者航空公司托运行李、家具、家电等物品，但在托运行李、家具、家电等物品时需要对行李、家具、家电等物品进行跟踪检测和实时稽查行李、家具、家电等物品是否发生破损，进而保证行李、家具、家电等物品的安全运达。目前，对行李、家具、家电等物品很难进行全方面度无死角的检测，如果行李、家具、家电等物品在运输过程中发生小面积的几何形变或者破损，则很难及时发现，这会导致在行李、家具、家电等物品的运输过程中，可能出现物品损坏或丢失的风险，影响用户的体验效果。

技术实现思路

[0003]本专利技术实施例提供了一种混合现实显示方法、三维扫描设备及存储介质，旨在提高用户对行李、家具、家电等物品进行损坏检查的便利性和准确性。
[0004]第一方面，本专利技术实施例提供一种混合现实显示方法，包括：实时显示放置于三维扫描设备上的目标对象的三维模型重建画面；在所述目标对象的初始三维模型重建完成时，显示所述三维扫描设备上的相机装置在当前时刻对所述目标对象进行拍摄得到的RGB图像；响应于用户触发的三维模型切换操作，将显示的所述RGB图像切换为所述目标对象的对应三维模型。
[0005]第二方面，本专利技术实施例还提供一种三维扫描设备，所述三维扫描设备包括显示装置、处理器、存储器、存储在所述存储器上并可被所述处理器执行的计算机程序以及用于实现所述显示装置、所述处理器和所述存储器之间的连接通信的数据总线，其中所述计算机程序被所述处理器执行时，实现如本专利技术说明书提供的任一项混合现实显示方法的步骤。
[0006]第三方面，本专利技术实施例还提供一种存储介质，用于计算机可读存储，其特征在于，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如本专利技术说明书提供的任一项显示的方法的步骤。
[0007]本专利技术实施例提供一种混合现实显示方法、三维扫描设备及存储介质，该混合现实显示方法通过实时显示放置于三维扫描设备上的目标对象的三维模型重建画面，在目标对象的初始三维模型重建完成时，显示三维扫描设备上的相机装置在当前时刻对目标对象进行拍摄得到的RGB图像，响应于用户触发的三维模型切换操作，将显示的RGB图像切换为目标对象的三维模型，从而使得用户能够预览目标对象的三维重建过程，而通过显示目标对象的RGB图像以及用户手动将显示的RGB图像切换为目标对象的三维模型，可以使目标对象的RGB图像和虚拟的三维模型进行无缝融合，以实现虚拟与现实之间的融合，连续的三维
模型渲染弥补了离散的查看RGB图像方式所丢失的空间感，又不会让简陋的三维模型让用户失去查看目标对象破损的能力。
附图说明
[0008]为了更清楚地说明本申请实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0009]图1是实施本专利技术实施例提供的混合现实显示方法的一场景示意图；图2是实施本专利技术实施例提供的混合现实显示方法的另一场景示意图；图3是本专利技术实施例提供的一种混合现实显示方法的流程示意图；图4是本专利技术实施例中的三维模型重建画面的一示意图；图5是本专利技术实施例中的三维模型重建画面的另一示意图；图6是本专利技术实施例中的三维模型重建画面的另一示意图；图7是本专利技术实施例中的三维模型重建画面的另一示意图；图8是本专利技术实施例中的三维模型重建画面的另一示意图；图9是本专利技术实施例中的三维模型重建画面的另一示意图；图10是本专利技术实施例中的目标对象的RGB图像的一示意图；图11是本专利技术实施例中的目标对象的三维模型的一示意图；图12是本专利技术实施例提供的一种三维扫描设备的结构示意框图。
具体实施方式
[0010]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0011]附图中所示的流程图仅是示例说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解、组合或部分合并，因此实际执行的顺序有可能根据实际情况改变。
[0012]应当理解，在此本专利技术说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本专利技术。如在本专利技术说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。下面结合附图，对本专利技术的一些实施例作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。
[0013]目前，对行李、家具、家电等物品很难进行全方面度无死角的检测，如果行李、家具、家电等物品在运输过程中发生小面积的几何形变或者破损，则很难及时发现，这会导致在行李、家具、家电等物品的运输过程中，可能出现物品损坏或丢失的风险，影响用户的体验效果。
[0014]为解决上述问题，本专利技术实施例提供了一种混合现实显示方法、三维扫描设备及存储介质，该混合现实显示方法通过实时显示放置于三维扫描设备上的目标对象的三维模
型重建画面，在目标对象的初始三维模型重建完成时，显示三维扫描设备上的相机装置在当前时刻对目标对象进行拍摄得到的RGB图像，响应于用户触发的三维模型切换操作，将显示的RGB图像切换为目标对象的三维模型，从而使得用户能够预览目标对象的三维重建过程，而通过将显示的RGB图像切换为目标对象的三维模型，可以使目标对象的RGB图像和虚拟的三维模型进行无缝融合，以实现虚拟与现实之间的融合，连续的三维模型渲染弥补了离散的查看RGB图像方式所丢失的空间感，又不会让简陋的三维模型让用户失去查看目标对象破损的能力，方便用户全面的对目标对象进行损坏检测，提高了目标对象的损坏检查的便利性和准确性。
[0015]请参阅图1，图1是实施本专利技术实施例提供的混合现实显示方法的一场景示意图。如图1所示，三维扫描设备100包括称重装置110、第一旋转机构120、第二旋转机构130、垂直升降机构140、旋转力臂150和显示装置160，第一旋转机构120通过旋转力臂150与第二旋转机构130连接，第二旋转机构130和垂直升降机构140连接，称重装置110用于放置目标对象170，称重装置110还用于对目标对象170进行称重。其中，相机装置121包括单目深度相机、多目深度相机，目标对象170可以包括行李、家具、家电、人偶等，显示装置160可以包括触摸屏或液晶显示屏。
[0016]示例性的，第一旋转机构120上设有相机装置121，第一旋转机构120为垂直180
°
旋转机构，用于调整相机装置121的俯仰本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种混合现实显示方法，其特征在于，包括：通过显示装置实时显示放置于三维扫描设备上的目标对象的三维模型重建画面；在所述目标对象的初始三维模型重建完成时，显示所述三维扫描设备上的相机装置在当前时刻对所述目标对象进行拍摄得到的RGB图像；响应于用户触发的三维模型切换操作，将显示的所述RGB图像切换为所述目标对象的对应三维模型。2.根据权利要求1所述的混合现实显示方法，其特征在于，所述响应于用户触发的三维模型切换操作，将显示的所述RGB图像切换为所述目标对象的对应三维模型，包括：响应于用户触发的三维模型切换操作，将所述相机装置拍摄所述RGB图像时的相机姿态确定为在所述目标对象的三维重建坐标系下的初始虚拟相机姿态；根据所述三维模型切换操作和所述初始虚拟相机姿态，确定所述目标对象的待显示的三维模型，并将显示的所述RGB图像切换为所述待显示的三维模型。3.根据权利要求2所述的混合现实显示方法，其特征在于，所述根据所述三维模型切换操作和所述初始虚拟相机姿态，确定所述目标对象的待显示的三维模型，包括：根据所述三维模型切换操作和所述初始虚拟相机姿态，确定目标虚拟相机姿态；将所述目标对象在所述目标虚拟相机姿态下的三维模型确定为所述待显示的三维模型。4.根据权利要求1所述的混合现实显示方法，其特征在于，所述三维模型切换操作包括以下任一项：用户对与所述显示装置连接的鼠标的长按操作、用户对与所述显示装置连接的鼠标的长按拖拽操作、用户对所述显示装置的显示页面内的预设图标的第一预设操作，所述显示装置包括所述三维扫描设备上的显示装置或与所述三维扫描设备通信连接的显示设备上的显示装置。5.根据权利要求4所述的混合现实显示方法，其特征在于，显示的所述三维模型随着所述长按拖拽操作的拖拽位移的改变而发生变化；或者，显示的所述...

【专利技术属性】
技术研发人员：区士超，刘晓涛，
申请(专利权)人：超节点创新科技深圳有限公司，
类型：发明
国别省市：