增强现实显示装置以及记录介质制造方法及图纸

本发明专利技术提供一种能够在虚拟空间内实时的组合图像的增强现实技术。增强现实显示装置具有：获得现实世界的背景图像的拍摄部；控制虚拟空间内的二维或三维的模型的模型控制部；将模型与背景图像一起显示的显示部。模型具有能够与其它的模型连结的一个或多个联接部，模型控制部控制各模型，以使得在虚拟空间内第一模型的联接部和第二模型的联接部连结。型的联接部和第二模型的联接部连结。型的联接部和第二模型的联接部连结。

【技术实现步骤摘要】
增强现实显示装置以及记录介质


[0001]本专利技术涉及一种将虚拟模型重叠在现实世界的背景图像上进行显示的虚拟现实显示装置和记录有用于实现该虚拟现实显示装置的计算机程序的记录介质。

技术介绍

[0002]近年来，伴随着计算机图形的渲染技术的发展和智能手机及头戴式显示器等移动设备的普及，被称为VR(Virtual Reality：虚拟现实)或AR(Augmented Reality：增强现实)的体验型的影像内容备受瞩目。VR主要是针对穿戴有头戴式显示器的用户在屏蔽现实空间的视觉识别的基础上仅呈现虚拟空间的影像的技术，能够向该用户提供沉浸感高的影像内容。相对于此，AR则是针对智能手机或头戴式显示器的用户，一边将现实空间作为背景图像来呈现，一边在该背景图像上重叠显示二维模型或三维模型的技术，能够向该用户提供现实空间和虚拟模型混合在一起的真实感高的影像内容。本专利技术就是在这些体验型的影像技术之中特别涉及增强现实(AR)技术。
[0003]有关AR技术，在专利文献1中公开了能够将现实空间的影像和图像数据合成并进行显示的增强现实感呈现装置。专利文献1中记载的装置，根据通过摄影而获得的人物的三维图像数据来识别人物的规定的部位，根据识别结果，进行人物的三维图像数据与多个对象的三维图像数据的对位。专利文献1中记载的装置，设想例如利用于模拟体验衣服的试穿的服务。
[0004]另外，专利文献2中公开有车辆安装用的试配系统，识别车辆图像中的预先确定的车辆的基准部分，计算车辆安装用品的安装基准位置，在该基准位置合成适当调整了比例的车辆安装用品。根据该专利文献2中记载的系统，能够在画面上对应于用户的喜好而在车辆上试配并显示各种车辆安装用品(车顶行李箱、儿童座椅等)。
[0005]现有技术文献
[0006]专利文献
[0007]专利文献1：JP特开2012
‑
118948号公报；
[0008]专利文献2：JP特开2017
‑
220059号公报。
[0009]但是，专利文献1以及专利文献2中记载的专利技术，都是对现实空间的物体(人物或车辆等)的图像进行分析，在该物体的图像的特定部位合成三维图像。上述专利技术通过将现实的物体的图像和三维图像组合(合成)，从而吸引着用户的兴趣。但是，上述专利技术需要存在有成为在现实空间中合成三维图像的对象的物体，在这样的对象物体不存在的状况下，就不能向用户提供AR技术特有的乐趣。
[0010]另外，上述专利技术中，作为将现实空间的物体和三维图像合成的前阶段的处理，需要分析现实空间的图像，确认在该图像之中存在有规定的物体的情况，或者在规定的物体中识别形状等特征，确定合成三维图像的部位。因此，根据计算装置(智能手机等)的处理能力，使得图像处理的负荷过大，图像显示有可能产生延迟。在这种情况下，使得现实空间的物体与三维图像难以实时的重合，物体与图像产生偏差，也产生有损真实感这样的问题。

技术实现思路

[0011]本专利技术的主要目的在于提供一种增强现实技术，不依赖于是否存在有现实空间的规定的物体，能够给予用户在虚拟空间内实时组合图像的乐趣。
[0012]本专利技术的专利技术人针对实现上述目的的手段锐意研究的结果，确定在二维或三维的虚拟模型上预先设定一个或多个联接部(Joint Portion)，将使多个模型通过联接部而结合得到的影像与现实世界的背景图像重叠显示。由此，能够通过利用了虚拟空间的模型的增强现实技术来实时的实现组装模型或场景(Diorama)模型那样的游戏方法。本专利技术人想到只要根据上述想法就能够实现上述的目的，从而完成了本专利技术。若进行具体说明，则本专利技术具有以下的构成。
[0013]本专利技术的第一侧面涉及增强现实显示装置。本专利技术的增强现实显示装置具有拍摄部、控制部及显示部。拍摄部获得现实世界的背景图像。模型控制部控制虚拟空间内的二维或三维的模型。显示部将模型与背景图像一起显示。本专利技术中，模型具有能够与另外的模型连结的一个或多个联接部。模型控制部控制各模型，以使得在虚拟空间内第一模型的联接部与第二模型的联接部连结。另外，在本申请说明书中，现实空间和虚拟空间被组合在一起，虚拟的模型重叠于现实的背景图像上的空间，方便起见被称为“增强现实空间”。
[0014]如上述构成那样，通过在虚拟空间中使多个模型连结而得到的影像与现实的背景图像重叠并进行显示，从而能够通过增强现实技术来实现组装模型或场景模型那样的体验型的内容。另外，本专利技术是将虚拟的模型之间组合，并不依赖于在现实世界中存在的实际的物体，因此在任何状况下都能够向用户提供新的游戏方法。另外，本专利技术的模型上预先设定有联接部。因此，在连结多个模型时，不需要分析各模型的形状或特征这样的前处理。由此，能够减轻模型的连结处理中的负荷，所以，可抑制图像输出处理的延迟，即使是具有一般的处理能力的计算装置，也能够实时输出增强现实空间的影像。
[0015]在本专利技术的增强现实显示装置中，优选模型控制部在虚拟空间内第一模型的联接部与第二模型的联接部接近到规定范围内时，以使得第一模型与第二模型通过联接部而连结的方式控制各模型。像这样，通过以两个模型的联接部接近到规定范围内的情况为契机，之后使两个模型自动连结，从而用户能够简单的将模型连结。另一方面，通过要求用户进行使各模型的联接部接近到规定范围内的操作，从而能够提供模拟的将模型组装的享受乐趣方法。
[0016]在本专利技术的增强现实显示装置中，优选在各联接部被分配有确定能够连结于此的模型或联接部的元数据(Metadata)。在此情况下，模型控制部对在虚拟空间内接近的两个联接部的元数据进行分析。而模型控制部在判断接近的两个联接部能够相互连接的情况下，在这两个联接部将第一模型与第二模型连结。像这样，在本专利技术中，并不是使所有的联接部无限制的能够相互连结，只要针对每个联接部预先确定(限制)可连结的另外的联接部即可。由此，使得每个模型的个性变强，因此能够提供包含有寻找或收集能够与某个模型的联接部连结的模型这样的集合的要素的游戏方法。
[0017]本专利技术的增强现实显示装置也可以是进一步具有模型生成部。模型生成部对包含有现实的物体的图像进行分析，根据该图像中包含的现实的物体而生成二维或三维的模型。另外，模型生成部针对所生成的模型设定可与另外的模型连结的一个或多个联接部。像这样，通过根据从用户接受提供的任意的图像来生成具有联接部的模型，从而用户能够在
增强现实空间中进行将自己的独创的模型和另外的模型组合的游戏方法。
[0018]本专利技术的增强现实显示装置也可以是进一步具有模型获得部。模型获得部对包含有现实的物体的图像进行分析，根据从该图像中包含的现实的物体得到的信息，从存储部读取与该现实的物体对应的模型，或者通过通信线路而从服务器获得与该模型对应的模型。像这样，从图像之中所包含的现实的物体，例如获得该物体的形状以及颜色等特征信息或者附加于该物体的编码信息，根据这些信息，确定与该物体对应的二维或三维的已有的模型。只要将该已有的模型从增强现实显示装置本身所具有的存储部本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种增强现实显示装置，具有：获得现实世界的背景图像的拍摄部；控制虚拟空间内的二维或三维的模型的模型控制部；将所述模型和所述背景图像一起显示的显示部；其中，所述模型具有能够与另外的模型连结的一个或多个联接部，所述模型控制部以使得在虚拟空间内第一模型的联接部与第二模型的联接部连结的方式控制各模型。2.根据权利要求1所述的增强现实显示装置，其中，所述模型控制部在虚拟空间内第一模型的联接部与第二模型的联接部接近到规定范围内时，以使得第一模型与第二模型通过联接部进行连结的方式控制各模型。3.根据权利要求1所述的增强现实显示装置，其中，在所述联接部被分配有确定可连结的模型或联接部用的元数据，所述模型控制部对在虚拟空间内接近的两个联接部的所述元数据进行分析，在判断所述两个联接部相互能够连结的情况下，在所述两个联接部将第一模型与第二模型连结。4.根据权利要求1所述的增强现实显示装置，其中，还具有模型生成部，该模型生成部对包含有现实的物体的图像进行分析，根据该图像中所包含的现实的物体而生成二维或三维的模型，所述模型生成...

【专利技术属性】
技术研发人员：雷米，
申请(专利权)人：史克威尔，
类型：发明
国别省市：