一种方法，包括标识有形对象；以用户可见的方式在所述有形对象上建立虚拟覆盖物；检测所述用户与建立在所述有形对象上的所述虚拟覆盖物的交互；以及使用所述用户与所述虚拟覆盖物的交互作为到基于处理器的系统的输入的基础。一种系统包括显示器和与所述显示器通信的基于处理器的设备。还提供了一种存储一个或多个计算机程序的存储介质。多个计算机程序的存储介质。多个计算机程序的存储介质。
【技术实现步骤摘要】
【国外来华专利技术】在增强现实(AR)和虚拟现实(VR)中在有形对象上建立和使用虚拟资产
[0001]相关申请的交叉引用
[0002]本申请是2020年2月5日提交的名称为“ESTABLISHING AND USING VIRTUAL ASSETS ON TANGIBLE OBJECTS IN AUGMENTED REALITY(AR)AND VIRTUAL REALITY(VR)”的美国专利申请No.16/783,070的继续申请并要求其权益，该美国专利申请要求2019年3月22日提交的名称为“ESTABLISHING AND USING VIRTUAL ASSETS ON TANGIBLE OBJECTS IN AUGMENTED REALITY(AR)AND VIRTUAL REALITY(VR)”的美国临时专利申请No.62/822,712的权益，这两项申请的全部内容和公开内容均据此全文以引用方式完全并入本文。
技术介绍
1.
[0003]本专利技术的实施方案整体涉及计算机增强和模拟技术，并且更具体地涉及增强现实(AR)和虚拟现实(VR)技术。
[0004]2.相关技术说明
[0005]增强现实(AR)是现实世界环境的交互式体验，其中现实视图被计算机生成的信息修改或增强。例如，如智能电话上的相机所看到的现实世界的实时视图可具有添加到其的计算机生成的信息、特征和/或元素。
[0006]虚拟现实(VR)是完全沉浸交互式计算机生成的体验。例如，VR头戴式设备可用于让用户沉浸在完全人工模拟的环境中。
[0007]混合现实(MR)是AR和VR两者的混合，并且可用于创建允许用户与现实世界中的虚拟对象进行交互的环境。
技术实现思路
[0008]一个实施方案提供了一种方法，包括：标识有形对象；以用户可见的方式在有形对象上建立虚拟覆盖物；检测用户与建立在有形对象上的虚拟覆盖物的交互；以及使用用户与虚拟覆盖物的交互作为到基于处理器的系统的输入的基础。
[0009]另一个实施方案提供了一种系统，包括：显示器；以及与显示器通信的基于处理器的设备；其中基于处理器的设备被配置为执行包括以下的步骤：标识有形对象；以在显示器上可见的方式在有形对象上建立虚拟覆盖物；检测用户与建立在有形对象上的虚拟覆盖物的交互；以及使用用户与虚拟覆盖物的交互作为到基于处理器的设备的输入的基础。
[0010]另一个实施方案提供了一种存储一个或多个计算机程序的非暂时性计算机可读存储介质，这些计算机程序被配置为使基于处理器的系统执行包括以下的步骤：标识有形对象；以用户可见的方式在有形对象上建立虚拟覆盖物；检测用户与建立在有形对象上的虚拟覆盖物的交互；以及使用用户与虚拟覆盖物的交互作为到基于处理器的系统的输入的基础。
[0011]通过参考以下详细描述和附图将获得对本专利技术各种实施方案的特征和优点的更好理解，这些附图阐述了其中利用本专利技术的实施方案的原理的说明性实施方案。
附图说明
[0012]本专利技术的实施方案的上述和其他方面、特征和优点将通过结合以下附图呈现的以下对本专利技术的更具体的描述变得更加明显，在附图中：
[0013]图1是示出根据本专利技术的一些实施方案的查看现实世界场景的装置的图；
[0014]图2是示出根据本专利技术的一些实施方案的方法的流程图；
[0015]图3是示出根据本专利技术的一些实施方案的查看现实世界场景的装置的图；
[0016]图4是示出根据本专利技术的一些实施方案的查看现实世界场景的装置的图；
[0017]图5是示出根据本专利技术的一些实施方案的查看现实世界场景的装置的图；
[0018]图6是示出根据本专利技术的一些实施方案的方法的流程图；并且
[0019]图7是示出根据本专利技术的实施方案的可用于运行、实施和/或执行本文示出和描述的方法、方案和技术中的任一者的基于处理器的设备/系统的框图。
具体实施方式
[0020]一些增强现实(AR)系统包括生成包括在现实世界视图中的虚拟用户界面(UI)的能力。类似地，一些虚拟现实(VR)系统包括生成包括在虚拟世界视图中的虚拟UI的能力。然而，此类UI的缺点是没有物理体验，因为用户只是在空中按下键。例如，如果用户的面前投影了电话小键盘，那么在空中按下键并不是很令人满意。
[0021]本专利技术的实施方案中的一些实施方案提供了可用于通过向用户提供用户在与UI交互时可触摸和感觉到的有形和物理对象来改进AR、VR和混合现实(MR)中的UI的方法、系统和技术。使用现实世界中的实际有形和物理对象，因此用户可在他或她的手中握住并感觉到对象的实际几何形状。据信，触摸、握住和感觉有形物理对象的能力提供了更加令人满意的AR、VR和MR体验。
[0022]参见图1，示出了根据本专利技术的实施方案正在操作的系统100。系统100包括具有显示器104和在背侧上的相机(未示出)的智能电话102。
[0023]在一些实施方案中，例如，用户可在AR模式下操作智能电话102。用户可决定他或她需要小键盘，诸如用于输入电话号码或用于输入口令或密码以获得对某种类型的安全区域的访问。因此，用户抓取可能在附近的任何有形对象，例如，诸如有形对象108，其在该示例中是书。该书是用户可实际握住的某物。智能电话102的背面上的相机捕获包括有形对象108的现实世界的视图。因此，有形对象108显示在智能电话102的显示器104上。
[0024]在一些实施方案中，用户然后通过说出单词“小键盘”来向系统100提供口头命令。单词“小键盘”可包括具有与其相关联的UI的关键词，在这种情况下是小键盘。在一些实施方案中，响应于口头命令，虚拟覆盖物110然后以通过在显示器104上可见而对用户可见的方式建立或投影到有形对象108的表面上。在该示例中，虚拟覆盖物110包括UI，并且特别是小键盘，其为可用于许多不同类型的应用的资产。在有形对象108上建立虚拟覆盖物110创建虚拟小键盘，该虚拟小键盘包括一种类型的虚拟资产。举例来说，小键盘可用作电话的一部分，用于输入电话号码，或用于输入口令或密码，如上所述。但是应当很好地理解，虚拟覆
盖物110可包括任何类型的UI、特征或其他虚拟资产。
[0025]随着在有形对象108的表面上建立了小键盘虚拟覆盖物110，用户然后能够与有形的某物交互，使得用户可实际握住并感觉到物理对象而不仅仅是在空中按下键。例如，如图所示，用户的手指112的指尖正在触摸现实世界中的有形对象108。如显示器104上所示，用户的手指112正在与建立在有形对象108上的虚拟覆盖物110进行交互。在该示例中，通过触摸有形对象108并查看显示器104，用户能够将电话号码输入到包括虚拟覆盖物110的小键盘中。
[0026]在一些实施方案中，包括在智能电话100中的基于处理器的系统检测用户与在有形对象108上建立的虚拟覆盖物110的交互。在一些实施方案中，可通过跟踪用户的手指112来执行检测。在一些实施方案中，可通过使用一个或多个相机(诸如智能电话相机)或任何其他图本文档来自技高网...
【技术保护点】
【技术特征摘要】
【国外来华专利技术】1.一种方法，包括：标识有形对象；以用户可见的方式在所述有形对象上建立虚拟覆盖物；检测所述用户与建立在所述有形对象上的所述虚拟覆盖物的交互；以及使用所述用户与所述虚拟覆盖物的交互作为到基于处理器的系统的输入的基础。2.如权利要求1所述的方法，其中在所述有形对象上建立虚拟覆盖物包括自动缩放所述虚拟覆盖物以适合所述有形对象。3.如权利要求1所述的方法，其中响应于来自所述用户的命令执行在所述有形对象上建立虚拟覆盖物。4.如权利要求3所述的方法，其中来自所述用户的所述命令包括音频命令。5.如权利要求3所述的方法，其中来自所述用户的所述命令确定所述虚拟覆盖物的配置。6.如权利要求1所述的方法，其中响应于确定所述有形对象适合于所述虚拟覆盖物来执行在所述有形对象上建立虚拟覆盖物。7.如权利要求1
‑
6中任一项所述的方法，其中所述虚拟覆盖物包括虚拟用户界面。8.如权利要求7所述的方法，其中在所述有形对象上建立虚拟覆盖物包括将所述有形对象上的一个或多个有形输入机构映射到所述虚拟用户界面上的一个或多个虚拟输入装置。9.如权利要求1
‑
6中任一项所述的方法，其中标识有形对象包括用一个或多个图像捕获装置标识所述有形对象。10.如权利要求1
‑
6中任一项所述的方法，其中标识有形对象包括标识所述有形对象的几何形状。11.如权利要求1
‑
6中任一项所述的方法，其中标识有形对象包括基于确定所述有形对象最佳适合于所述虚拟覆盖物来从两个或更多有形对象中选择所述有形对象。12.如权利要求1
‑
6中任一项所述的方法，其中检测所述用户与所述虚拟覆盖物的交互包括检测所述用户的一部分与所述虚拟覆盖物的几何形状的相交。13.如权利要求1
‑
6中任一项所述的方法，其中检测所述用户与所述虚拟覆盖物的交互包括声学感测。14.一种系统，包括：显示器；和基于处理器的设备，所述基于处...
【专利技术属性】
技术研发人员：M泰勒，G布莱克，
申请(专利权)人：索尼互动娱乐股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。