用于虚拟现实显示器的真实世界门户制造技术

虚拟现实场景经由显示设备被显示。外围控制设备的真实世界定位相对于显示设备被标识。物理环境的位于显示设备的显示区域后面的真实世界场景的视频经由相机被捕获。真实世界门户经由显示设备被选择性地显示，真实世界门户包括真实世界场景的一部分并且在显示区域内的一个位置处通过虚拟现实场景模拟视图，该位置追踪外围控制设备的真实世界定位。

【技术实现步骤摘要】
【国外来华专利技术】用于虚拟现实显示器的真实世界门户
技术介绍
虚拟现实通常是通过使用遮挡周围物理环境的用户视图的图形显示器在视觉域中实现的。利用近眼图形显示器的头戴式显示器(HMD)设备可以用于提供完全沉浸式的虚拟现实体验。HMD设备可能会附带手持式控制器，其使用户能够与虚拟现实环境进行交互。
技术实现思路
提供该
技术实现思路
来以简化的形式介绍对于在下面的详细说明中进一步描述的构思的选择。该
技术实现思路
不旨在标识所要求保护的主题的关键特征或者必要特征，也不旨在用于限制所要求保护的主题的范围。此外，所要求保护的主题并不限于解决在本公开的任何部分中提到的任何或全部缺点的实现。根据本公开的一个方面，虚拟现实场景经由显示设备被显示。例如，显示设备可以采取近眼HMD设备的形式。外围控制设备的真实世界定位相对于显示设备被标识。例如，外围控制设备可以采取手持式控制器的形式。物理环境的位于显示设备的显示区域后面的真实世界场景的视频经由相机被捕获。例如，相机可以采取HMD设备的朝外(outwardfacing)相机的形式，该朝外相机近似于穿戴HMD设备的人的视觉视角。真实世界门户经由显示设备被选择性地显示，该真实世界门户包括真实世界场景的一部分并且在显示区域内的一个位置处通过虚拟现实场景模拟视图，该位置追踪外围控制设备的真实世界定位。用户可以选择真实世界门户是否在给定的时间点被显示，并且可以在以闪光灯操作模式进行操作的同时操纵外围控制设备，以经由显示设备可视化周围环境，同时维持虚拟现实上下文。附加操作模式包括：视图锁定模式，在该视图锁定模式中，即使外围控制设备被重新定位，物理空间中的点也可以被维持在真实世界门户内；以及门户锁定模式，该门户锁定模式使得在不继续追踪外围控制设备的真实世界定位的情况下，真实世界门户在显示区域内的位置能够被重新定位。附图说明图1描绘了用户被呈现包括真实世界门户的虚拟现实体验的示例使用环境。图2描绘了用于在虚拟现实体验的上下文内显示真实世界门户的示例方法200。图3A-图3K示意性地描绘了相机和/或外围控制设备在包含物理对象的物理环境内被操作的示例。图4是描绘了示例计算系统的示意图。具体实施方式图1描绘了用户110被呈现包括真实世界门户的虚拟现实体验的示例使用环境100。在该示例中，用户110正穿戴显示图形内容的头戴式显示器(HMD)设备120。HMD设备120的第一示例视图130还在图1中被描绘。视图130包括虚拟现实场景132，其可以由用户110经由HMD设备120观看。在图1中，用户110还持有至少一个外围控制设备122，该外围控制设备122使用户能够与虚拟现实环境进行交互。例如，用户110正操纵外围控制设备122以将虚拟火球对准虚拟巫师(wizard)，如通过虚拟现实场景132所描绘的。例如，外围控制设备可以采取手持式控制器的形式。在至少一些实现中，用户可以左手持有第一外围控制设备并且右手持有第二外围控制设备以提供独立的基于手的控制。HMD设备120的第二示例视图134还在图1中被描绘，其可以在真实世界观看模式被占用(engage)时选择性地被呈现给用户110。在该示例视图134中，物理环境的位于HMD设备120的显示区域后面的真实世界场景138的视频经由相机被捕获。相机可以采取HMD设备120的朝外相机的形式，朝外相机近似于用户110的视觉视角。真实世界门户136还经由包括至少一部分真实世界场景的HMD设备120来显示。例如，真实世界门户136描绘了搁在桌子142上的用户110的啤酒杯140。在一些实现中，用户110可以通过占用真实世界观看模式来选择视图134的真实世界门户136是否在给定的时间点被显示。用户110也可以脱离(disengage)真实世界观看模式以返回到视图130，其中虚拟现实场景被显示，而真实世界门户没有被显示。在其他实现中，真实世界观看模式的占用(engagement)/脱离(disengagement)可以通过虚拟现实系统的逻辑(例如，HMD设备120)来自动进行。在真实世界观看模式内，几种不同的操作模式可以供用户使用。在至少一种操作模式(称为闪光灯模式)下，真实世界门户136在显示区域内的一个位置处通过虚拟现实场景132模拟视图，该位置追踪外围控制设备122的真实世界定位。一旦真实世界观看模式被占用，用户110就可以用类似于闪光灯的方式操纵外围控制设备122，以经由HMD设备可视化周围物理环境的一部分，同时维持虚拟现实场景的视图。例如，用户110可以将外围控制设备122从啤酒杯140对准人146，以使真实世界门户136移动并显示该人。在真实世界观看模式内，存在于真实世界场景内的物理对象可以以与实际存在于物理环境中的用户视角相同的表观的(apparent)真实世界尺度被显示在真实世界门户136中。其他操作模式可以得到支持，包括在物理空间中维持对固定点/区域/对象的视图的视图锁定模式和将真实世界门户的位置锁定在显示区域的所选部分的门户锁定模式，如将参照图2和图3进一步详细描述的。本文所公开的真实世界门户使参与(engagein)沉浸式虚拟现实体验的用户能够例如观看该用户周围的人以标识和参与对话，使用物理键盘观看和执行文本输入，定位周围对象(诸如，家具或其他障碍物)，将外围控制设备或其他对象放置在桌子或其他表面上，定位并拿起啤酒杯或其他物理对象，定位并静音电话或其他通信设备等。在至少一些实现中，被包括在真实世界门户内的真实世界场景可以以高质量和真实色彩来呈现，以向用户提供对他们的物理环境的直观且准确的描绘。此外，真实世界场景可以在门户内被准确地定位和缩放，使得门户模拟用户在用他/她自己的眼睛直接观看真实世界场景的那部分时用户将拥有的视图。而且在环境100内，存在多种其他硬件组件，包括计算设备150、一个或多个光学传感器152和显示设备154。在一些示例中，计算设备150可以采取游戏控制台的形式，并且HMD设备120和外围控制设备122可以在游戏控制台的外围。在其他示例中，外围控制设备122可以在HMD设备120的外围，并且HMD设备120可以不在另一计算设备的外围。HMD设备120和外围控制设备122可以经由有线和/或无线通信链路与计算设备150通信。而且在该示例中，显示设备154正在显示常规视图156，该视图156针对未沉浸于虚拟现实体验中的其他人(例如，人146)模拟用户110的视图。与包括真实世界门户136的视图134相比，即使真实世界观看模式由用户110占用，视图156也可能不包含真实世界门户。视图156实际上可以被显示在任何本地或远程显示设备上。图2描绘了用于在虚拟现实体验的上下文内显示真实世界门户的示例方法200。方法200可以由一个或多个计算设备(例如，HMD设备120、计算设备150、图4的HMD设备430和/或图4的计算设备410)的计算系统执行。在210中，该方法包括经由显示设备显示虚拟现实场景。虚拟现实场景可以包括任何形式的虚拟现实内容，包括虚拟三维世界、游戏内容、用户接口内容等本文档来自技高网...

【技术保护点】
1.一种方法，包括：/n经由显示设备显示虚拟现实场景；/n标识外围控制设备相对于所述显示设备的真实世界定位；/n经由相机捕获物理环境的位于所述显示设备的显示区域后面的真实世界场景的视频；以及/n经由所述显示设备显示真实世界门户，所述真实世界门户包括所述真实世界场景的一部分并且在所述显示区域内的一个位置处通过所述虚拟现实场景模拟视图，所述位置追踪所述外围控制设备的所述真实世界定位。/n

【技术特征摘要】
【国外来华专利技术】20180105 US 62/614,142;20180201 US 15/886,7641.一种方法，包括：
经由显示设备显示虚拟现实场景；
标识外围控制设备相对于所述显示设备的真实世界定位；
经由相机捕获物理环境的位于所述显示设备的显示区域后面的真实世界场景的视频；以及
经由所述显示设备显示真实世界门户，所述真实世界门户包括所述真实世界场景的一部分并且在所述显示区域内的一个位置处通过所述虚拟现实场景模拟视图，所述位置追踪所述外围控制设备的所述真实世界定位。


2.根据权利要求1所述的方法，其中所述真实世界场景的所述一部分是所述相机的有限视野，所述有限视野小于所述相机的整个视野；并且
其中所述有限视野由虚拟观看窗口定义，所述虚拟观看窗口与所述外围控制设备的所述真实世界定位间隔开并且在空间上被锁定至所述真实世界定位。


3.根据权利要求2所述的方法，其中所述虚拟观看窗口是一个圆锥体的截面，所述截面表示所述外围控制设备的虚拟视野。


4.根据权利要求2所述的方法，其中所述虚拟观看窗口在物理空间中与所述外围控制设备间隔开预定义距离。


5.根据权利要求2所述的方法，还包括：
响应于视图锁定模式的占用，锁定所述虚拟观看窗口相对于所述物理环境的真实世界定位，在所述视图锁定模式中，所述虚拟观看窗口不再在空间上被锁定至所述外围控制设备的所述真实世界定位。


6.根据权利要求2所述的方法，还包括：
响应于门户锁定模式的占用，锁定所述真实世界门户被显示在所述显示区域内的所述位置，在所述门户锁定模式中，所述显示区域内的所述位置不再追踪所述外围控制设备的所述真实世界定位。


7.根据权利要求1所述的方法，其中应用提供所述虚拟现实场景以进行显示，并且...

【专利技术属性】
技术研发人员：A·O·巴兰，朱有丁，朴敏植，
申请(专利权)人：微软技术许可有限责任公司，
类型：发明
国别省市：美国;US