在光学透传显示器上的注意力方向制造技术

本公开涉及在光学透传显示器上的注意力方向。在一个具体实施中，一种引导用户注意力的方法由包括一个或多个处理器、非暂态存储器、场景摄像机和光学透传显示器的设备执行。该方法包括使用场景摄像机捕获场景的图像。该方法包括使用一个或多个处理器基于场景的图像来确定一个或多个非注意力方向区域。该方法包括在光学透视显示器上显示包括位于一个或多个非注意力方向区域中的掩蔽图案的掩蔽图像。

【技术实现步骤摘要】
在光学透传显示器上的注意力方向
本公开整体涉及计算机生成的现实环境，并且具体地涉及用于在计算机生成的现实环境中引导用户注意力的系统、方法和设备。
技术介绍
如本文所述，为了向用户提供沉浸式媒体体验，计算设备呈现计算机生成的现实(CGR)，该CGR将计算机生成的媒体内容(例如，包括图像、视频、音频、嗅觉、触觉等)与真实世界刺激以不同程度交织在一起——从完全合成体验到叠加在真实世界刺激上的几乎无法察觉的计算机生成的媒体内容。为此，根据本文所述的各种具体实施，CGR系统、方法和设备包括混合现实(MR)和虚拟现实(VR)系统、方法和设备。此外，MR系统、方法和设备包括增强现实(AR)系统和合成现实(CR)系统，其中在AR系统中，计算机生成的内容叠加(例如，经由透明显示器)在用户的视野上，并且在CR系统中，计算机生成的内容与真实世界环境的图像合成或合并在一起。虽然本说明书仅为了清楚起见提供了AR、CR、MR和VR之间的描述，但本领域的普通技术人员将从本公开中认识到，此类描述对于任何特定CGR系统、方法和/或设备的具体实施既不是绝对的也不是限制性的。因此，在各种具体实施中，CGR环境包括来自AR、CR、MR和VR的适当组合的元件，以便产生任何数量的所需沉浸式媒体体验。在各种具体实施中，用户物理地或由化身(其可为虚拟的或真实的，例如，无人机或机器人化身)代表地存在于CGR环境中。在各种具体实施中，化身模拟用户的一部分或全部物理运动。基于VR的CGR环境可完全沉浸到使得用户的特定感觉(例如，视觉和/或听觉)的真实世界感官输入完全被计算机生成的感官输入所取代的程度。因此，用户无法看到和/或听到他/她的真实世界环境。除了计算机生成的图像之外，基于VR的CGR环境还可利用(空间)音频、触觉等来增强体验的现实性。因此，在各种具体实施中，提供给用户的特定感觉的真实世界信息限于深度、形状、取向和/或布局信息；并且此类真实世界信息被间接传递给用户。例如，真实世界房间的墙壁完全被数字内容所遮盖，使得用户无法看到现实中存在的真实世界墙壁。除了计算机生成的媒体内容之外，基于混合现实(MR)的CGR环境还包括由用户在基于增强现实(AR)的CGR环境的情况下直接接收的、或在基于合成现实(CR)的CGR环境的情况下间接接收的真实世界刺激。基于增强现实(AR)的CGR环境包括真实世界光透传，使得真实世界光进入用户的眼睛。例如，在AR系统中，用户能够通过透明表面看到真实世界，并且计算机生成的媒体内容(例如，图像和/或视频)被可视化到该表面上。在特定具体实施中，媒体内容被可视化到表面上以提供计算机生成的媒体内容是真实世界的一部分和/或固定到真实世界的视觉印象。除此之外或另选地，计算机生成的图像数据可直接投射到用户的眼睛，使得真实世界光和计算机生成的媒体内容的投射光同时到达用户的视网膜。基于合成现实(CR)的CGR环境包括从适当的传感器获得真实世界刺激数据，以及将真实世界刺激数据与计算机生成的媒体内容合成(例如，将刺激数据与计算机生成的内容合并，将计算机生成的内容叠加在刺激数据的部分上，或者在将真实世界刺激数据呈现给用户之前以其他方式对其进行变更)以生成合成数据。然后将合成数据提供给用户，从而用户间接地接收到真实世界刺激(如果有的话)。例如，对于基于CR的CGR环境的视觉部分，使用图像传感器获得真实世界图像数据，并且通过显示器提供合成图像数据。在各种具体实施中，可能期望将用户在CGR环境中的注意力引导至CGR环境的某一对象或区域上或远离CGR环境的某一对象或区域。在各种具体实施中，用户的注意力是通过在CGR环境中的某些区域中显示视觉遮蔽结构(诸如噪声)来引导的，在这些区域中用户的注意力将不被引导。附图说明因此，本公开可被本领域的普通技术人员理解，更详细的描述可参考一些例示性具体实施的方面，其中一些具体实施在附图中示出。图1A是根据一些具体实施的示例性操作架构的框图。图1B是根据一些具体实施的CGR环境的透视图。图2是根据一些具体实施的示例性控制器的框图。图3A是根据一些具体实施的示例性头戴式设备(HMD)的框图。图3B是根据一些具体实施的示例性CGR显示器的放大视图。图4A示出了根据一些具体实施的真实环境。图4B至图4E示出了根据一些具体实施的基于图4A的真实环境的引导用户注意力的CGR环境。图5示出了根据一些具体实施的引导用户注意力的方法的流程图表示。根据通常的做法，附图中示出的各种特征部可能未按比例绘制。因此，为了清楚起见，可以任意地扩展或减小各种特征部的尺寸。另外，一些附图可能未描绘给定的系统、方法或设备的所有部件。最后，在整个说明书和附图中，类似的附图标号可用于表示类似的特征部。
技术实现思路
本文所公开的各种具体实施包括用于引导用户注意力的设备、系统和方法。在各种具体实施中，方法由具有一个或多个处理器、非暂态存储器、场景摄像机和光学透传显示器的设备执行。该方法包括使用场景摄像机捕获场景的图像。该方法包括使用一个或多个处理器基于场景的图像来确定一个或多个非注意力方向区域。该方法包括在光学透传显示器上显示包括位于一个或多个非注意力方向区域中的掩蔽图案的掩蔽图像。根据一些具体实施，一种设备包括一个或多个处理器、非暂态存储器以及一个或多个程序；一个或多个程序被存储于非暂态存储器中并且被配置为由一个或多个处理器执行。一个或多个程序包括用于执行或促使执行本文描述的任何方法的指令。根据一些具体实施，一种非暂态计算机可读存储介质中存储有指令，当由设备的一个或多个处理器执行时，这些指令使得该设备执行或导致执行本文所述方法中的任一种。根据一些具体实施，一种设备包括：一个或多个处理器、非暂态存储器，以及用于执行或使得执行本文所述方法中的任一种的装置。具体实施方式描述了许多细节以便提供对附图中所示的示例具体实施的透彻理解。然而，附图仅示出了本公开的一些示例方面，因此不应被视为限制。本领域的普通技术人员将理解，其他有效方面和/或变体不包括本文所述的所有具体细节。此外，没有详尽地描述众所周知的系统、方法、部件、设备和电路，以免模糊本文所述的示例性具体实施的更多相关方面。在各种具体实施中，可能期望将用户在CGR环境中的注意力引导至CGR环境的某一对象或区域。例如，由呈现CGR环境的HMD执行的游戏可能希望将用户的注意力引导至游戏目标上。又如，由HMD执行的地图应用程序可能希望将用户的注意力引导至地图目的地。在各种其他具体实施中，可能期望将用户的注意力引离CGR环境的对象或区域，诸如广告或不适当的情景。在各种具体实施中，用户的注意力是通过在CGR环境中的某些区域中显示噪声来引导的，在这些区域中用户的注意力将不被引导。图1A是根据一些具体实施的示例性操作架构100的框图。尽管示出了相关特征，但本领域的普通技术人员将从本公开中认识到，为简洁起见并且为了不模糊本文所公开的示例性具体实施的更多相关方面，未示出各种其他特本文档来自技高网...

【技术保护点】
1.一种方法，包括：/n在包括一个或多个处理器、非暂态存储器、场景摄像机和光学透传显示器的头戴式设备处：/n使用所述场景摄像机捕获场景的图像；/n使用所述一个或多个处理器基于所述场景的所述图像来确定一个或多个非注意力方向区域；以及/n在所述光学透传显示器上显示包括位于所述一个或多个非注意力方向区域中的掩蔽图案的掩蔽图像。/n

【技术特征摘要】
20190315 US 62/818,8401.一种方法，包括：
在包括一个或多个处理器、非暂态存储器、场景摄像机和光学透传显示器的头戴式设备处：
使用所述场景摄像机捕获场景的图像；
使用所述一个或多个处理器基于所述场景的所述图像来确定一个或多个非注意力方向区域；以及
在所述光学透传显示器上显示包括位于所述一个或多个非注意力方向区域中的掩蔽图案的掩蔽图像。


2.根据权利要求1所述的方法，其中确定所述一个或多个非注意力方向区域包括在所述场景的所述图像中检测广告、不适当内容或专有内容。


3.根据权利要求1所述的方法，其中确定所述一个或多个非注意力方向区域包括确定一个或多个注意力方向区域并且基于所述一个或多个注意力方向区域来确定所述一个或多个非注意力方向区域。


4.根据权利要求3所述的方法，其中确定所述一个或多个注意力方向区域包括在所述场景的所述图像中检测游戏目标、地图目的地或安全问题。


5.根据权利要求1-4中任一项所述的方法，其中所述掩蔽图像不包括所述一个或多个非注意力方向区域之外的元件。


6.根据权利要求1-5中任一项所述的方法，其中所述一个或多个非注意力方向区域中的所述掩蔽图案是基于一个或多个噪声参数的随机噪声。


7.根据权利要求6所述的方法，其中所述一个或多个掩蔽参数包括空间频率和/或时间频率。


8.根据权利要求6或7所述的方法，其...

【专利技术属性】
技术研发人员：A·格伦德赫费尔，D·W·查默斯，
申请(专利权)人：苹果公司，
类型：发明
国别省市：美国;US