显示控制装置、显示控制方法以及程序制造方法及图纸

[问题]为了有助于利用了AR技术的用户交互。[解决方案]提供了一种显示控制装置，该显示控制装置包括显示控制单元，当基于真实空间的捕获图像的图像被显示在显示单元上时，如果对捕获图像的注释的目标位置位于通过显示单元对用户可见的范围之外，则该显示控制单元向图像添加显示，以指示存在注释。

【技术实现步骤摘要】
【国外来华专利技术】
本公开内容涉及显示控制装置、显示控制方法以及程序。
技术介绍
近年来，人们注意到了一种称为增强现实(AR)的技术，通过该技术将叠加在真实世界上的附加信息呈现给用户。在AR技术中呈现给用户的信息也称为注释(annotation)，可以使用各种形式的虚拟对象如文本、图标、动画等将该信息可视化。例如，专利文献1公开了一种用于实现对这样的AR的虚拟对象进行操纵而不破坏用户在AR空间中的浸入的技术。引用列表专利文献专利文献1：JP2012-212345A
技术实现思路
技术问题专利文献1等中提出的AR技术是最近开发的，并且很难说已经充分提出了在各个方面中利用AR的技术。例如，已经提出的用于帮助使用AR技术的用户之间交互的技术的数量仍然只有一个，因此该技术并不充分。理想的是提供能够进一步帮助使用AR技术的用户之间交互的新颖的和改进的显示控制装置、新颖的和改进的显示控制方法以及新颖的和改进的程序。问题的解决方案根据本公开内容，提供有一种显示控制装置，包括显示控制单元，该显示控制单元被配置成对终端装置的显示单元进行控制。该显示控制单元执行控制以：基于真实空间中与虚拟对象相关联的位置信息来决定经由显示单元显示在真实空间中的虚拟对象的显示位置，并且基于该显示位置将虚拟对象显示在真实空间中，以及在虚拟对象的一部分或全部位于真实空间的可见范围之外时，在该真实空间中显示用于指示存在虚拟对象的通知。根据本公开内容，提供有一种显示控制方法，包括：由被配置成对终端装置的显示单元进行控制的处理器：基于真实空间中与虚拟对象相关联的位置信息来决定经由显示单元显示在真实空间中的虚拟对象的显示位置，并且基于该显示位置将虚拟对象显示在真实空间中；以及在虚拟对象的一部分或全部位于真实空间的可见范围之外时，在该真实空间中显示用于指示存在虚拟对象的通知。根据本公开内容，提供有一种程序，该程序使被配置成对终端装置的显示单元进行控制的计算机实现以下功能：基于真实空间中与虚拟对象相关联的位置信息来决定经由显示单元显示在真实空间中的虚拟对象的显示位置，并且基于该显示位置将虚拟对象显示在真实空间中；以及在虚拟对象的一部分或全部位于真实空间的可见范围之外时，在该真实空间中显示用于指示存在虚拟对象的通知。本专利技术的有益效果根据上述本公开内容的实施方式，可以进一步帮助使用AR技术的用户之间的交互。附图说明[图1]图1是示出了根据本公开内容的实施方式的系统的示意性配置的图。[图2]图2是示出了根据本公开内容的实施方式的装置的示意性配置的图。[图3A]图3A是示出了根据本公开内容的实施方式将捕获图像共享的示例的图。[图3B]图3B是示出了根据本公开内容的实施方式的注释输入的示例的图。[图4]图4是示出了根据本公开内容的实施方式将捕获图像共享的另一示例的图。[图5A]图5A是示出了根据本公开内容的实施方式的可使用的技术的处理的示例的流程图。[图5B]图5B是示出了根据本公开内容的实施方式的能够使用的技术的处理的示例的流程图。[图6]图6是示出了根据本公开内容的实施方式的第一人称图像的显示示例的图。[图7]图7是示出了根据本公开内容的实施方式的第三人称图像的显示示例的图。[图8]图8是示出了根据本公开内容的实施方式的第三人称图像的显示示例的图。[图9]图9是示出了根据本公开内容的实施方式的第三人称图像的显示示例的图。[图10A]图10A是示出了根据本公开内容的实施方式的第一第三人称图像的显示示例的图。[图10B]图10B是用于描述根据本公开内容的实施方式的第一第三人称图像的图。[图10C]图10C是用于描述根据本公开内容的实施方式的第一第三人称图像的图。[图11]图11是示出了根据本公开内容的实施方式将不同视点的图像同时显示的示例的图。[图12]图12是示出了根据本公开内容的实施方式将不同视点的图像同时显示的示例的图。[图13]图13是示出了根据本公开内容的实施方式的注释指示的第一示例的图。[图14]图14是示出了根据本公开内容的实施方式的注释指示的第二示例的图。[图15]图15是示出了根据本公开内容的实施方式的注释指示的第三示例的图。[图16]图16是示出了根据本公开内容的实施方式的注释指示的第四示例的图。[图17]图17是示出了根据本公开内容的实施方式的注释指示的第五示例的图。[图18]图18是示出了根据本公开内容的实施方式的注释指示的第六示例的图。[图19]图19是用于描述根据本公开内容的实施方式的注释布置的图。[图20]图20是示出了根据本公开内容的实施方式的注释布置的选择的示例的图。[图21]图21是示出了根据本公开内容的实施方式的可见范围之外的注释的显示的第一示例的图。[图22]图22是示出了根据本公开内容的实施方式的可见范围之外的注释的显示的第一示例的图。[图23]图23是示出了根据本公开内容的实施方式的可见范围之外的注释的显示的第一示例的图。[图24]图24是示出了根据本公开内容的实施方式的可见范围之外的注释的显示的第二示例的图。[图25]图25是示出了根据本公开内容的实施方式的可见范围之外的注释的显示的第二示例的图。[图26]图26是示出了根据本公开内容的实施方式的可见范围之外的注释的显示的第三示例的图。[图27]图27是示出了根据本公开内容的实施方式的可见范围之外的注释的显示的第三示例的图。[图28]图28是示出了根据本公开内容的实施方式的可见范围之外的注释的显示的第四示例的图。[图29]图29是示出了根据本公开内容的实施方式的可见范围之外的注释的显示的第五示例的图。[图30]图30是示出了根据本公开内容的实施方式的可见范围之外的注释的显示的第六示例的图。[图31]图31是示出了根据本公开内容的实施方式的可见范围之外的注释指示的应用示例的图。[图32]图32是示出了根据本公开内容的实施方式的可见范围之外的注释指示的应用示例的图。[图33]图33是示出了根据本公开内容的实施方式使用边缘检测的注释目标对象的显示示例的图。[图34]图34是示出了根据本公开内容的实施方式的流式帧(streami本文档来自技高网...

【技术保护点】
一种显示控制装置，包括：显示控制单元，所述显示控制单元被配置成对终端装置的显示单元进行控制，其中，所述显示控制单元执行控制以：基于真实空间中与虚拟对象相关联的位置信息来决定经由所述显示单元显示在所述真实空间中的所述虚拟对象的显示位置，并且基于所述显示位置将所述虚拟对象显示在所述真实空间中，以及在所述虚拟对象的一部分或全部位于所述真实空间的可见范围之外时，在所述真实空间中显示用于指示存在所述虚拟对象的通知。

【技术特征摘要】
【国外来华专利技术】2013.04.04 JP 2013-078892;2013.09.17 JP 2013-191461.一种显示控制装置，包括：
显示控制单元，所述显示控制单元被配置成对终端装置的显示单元进
行控制，
其中，所述显示控制单元执行控制以：
基于真实空间中与虚拟对象相关联的位置信息来决定经由所述显示
单元显示在所述真实空间中的所述虚拟对象的显示位置，并且基于所述显
示位置将所述虚拟对象显示在所述真实空间中，以及
在所述虚拟对象的一部分或全部位于所述真实空间的可见范围之外
时，在所述真实空间中显示用于指示存在所述虚拟对象的通知。
2.根据权利要求1所述的显示控制装置，其中，当所述虚拟对象全
部位于所述可见范围之外时，所述显示控制单元显示所述通知。
3.根据权利要求2所述的显示控制装置，其中，所述通知包括用于
表示从所述可见范围进行观察所述虚拟对象所存在的方向的指示。
4.根据权利要求3所述的显示控制装置，其中，所述通知被显示在
所述可见范围的与所述方向对应的边缘部分中。
5.根据权利要求3所述的显示控制装置，其中，所述通知包括用于
表示所述可见范围与所述虚拟对象之间的距离的指示。
6.根据权利要求3所述的显示控制装置，其中，所述通知包括：当
从所述可见范围进行观察所述虚拟对象所存在的方向与所述真实空间中
的光源方向相对应时，显示所述虚拟对象的影子。
7.根据权利要求6所述的显示控制装置，其中，所述显示控制单元
即使在所述虚拟对象进入所述可见范围之后也继续显示所述影子。
8.根据权利要求2所述的显示控制装置，还包括：
图像获取单元，所述图像获取单元被配置成获取所述真实空间的捕获
图像，
其中，所述通知包括与从所述捕获图像提取的位置信息相对应的位置
处的所述真实空间的图像。
9.根据权利要求8所述的显示控制装置，其中，所述通知包括图像，

\t在所述图像中，所述虚拟对象被叠加在与从先前获取的所述捕获图像中提
取的位置信息相对应的位置处的所述真实空间的图像上。
10.根据权利要求2所述的显示控制装置，其中，所述通知包括导航，
所述导航用于移动所述显示单元，使得与先前的虚拟对象所关联的位置信
息相对应的位置进入所述可见范围。
11.根据权利要求1所述的显示控制装置，其中，当所述虚拟对象的
一部分位于所述可见范围之外时，所述显示控制单元显示所述通知。

【专利技术属性】
技术研发人员：笠原俊一，历本纯一，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本;JP