量化增强现实交互的系统和方法技术方案

用于量化增强现实交互的系统、方法和计算机可读存储介质。示例性系统可以被配置为经由移动计算设备的相机捕获视频馈送，并且经由移动计算设备的处理器从视频馈送提取图像。然后，该系统可以经由处理器确定该图像与存储在图像数据库中的多个存储图像中的一存储图像相对应，从而产生一确定，并且经由处理器基于该确定来检索与存储图像相关联的交互式内容。然后，该系统可以经由移动计算设备的显示器，将交互式内容显示为增强现实覆盖。将交互式内容显示为增强现实覆盖。将交互式内容显示为增强现实覆盖。

【技术实现步骤摘要】
【国外来华专利技术】量化增强现实交互的系统和方法
[0001]相关申请的交叉引证
[0002]本申请要求于2019年5月3日提交的美国临时专利申请号62/842,828和2019年12月23日提交的美国非临时专利申请号16/725,438的申请日的优先权，其全部内容通过引用并入本文。


[0003]本公开涉及增强现实，并且更具体地，涉及提供增强现实显示并量化与那些增强现实显示的交互。

技术介绍

[0004]增强现实(AR)是将图像叠加在用户对现实世界的视图上，从而形成合成视图。例如，智能手机可以使用相机捕获现实世界的视频馈送，在智能手机显示器上显示视频馈送，并在视频馈送上添加额外的视觉效果或信息。随着AR变得越来越普遍，识别用户如何与AR显示和模型交互可能是一个挑战。例如，广告商、赞助商或帮助生成AR内容的其他实体希望知道用户何时以及如何与AR内容交互。

技术实现思路

[0005]本公开的附加特征和优点将在下面的描述中阐述，并且部分地从描述中将是显而易见的，或者可以通过实践本文公开的原理来学习。本专利技术的特征和优点可以借助于所附权利要求中特别指出的设备和组合来实现和获得。本专利技术的这些和其他特征将从下面的描述和所附权利要求中变得更加明显，或者可以通过实践本文的原理来学习。
[0006]根据本公开执行的示例性方法可以包括：经由移动计算设备的相机捕获视频馈送；经由移动计算设备的处理器从视频馈送提取图像；经由处理器确定图像与存储在图像数据库中的多个存储图像中的一存储图像相对应，从而产生一确定；经由处理器基于该确定来检索与存储图像相关联的交互式内容；并且经由移动计算设备的显示器，将交互式内容显示为增强现实覆盖。
[0007]根据本公开配置的示例性系统可以包括：处理器；相机；显示器；以及非暂时性计算机可读存储介质，具有存储在其中的指令，当由处理器执行时，使处理器执行操作，该操作包括：经由相机捕获视频馈送；从视频馈送中提取图像；确定图像与存储在图像数据库中的多个存储图像中的一存储图像相对应，从而产生一确定；基于该确定来检索与存储图像相关联的交互式内容；并且经由显示器，将交互式内容显示为增强现实覆盖。
[0008]根据本公开配置的示例性非暂时性计算机可读存储介质可以存储有指令，该指令在由计算设备执行时使该计算设备执行操作，该操作包括：从相机接收视频馈送；从视频馈送中提取图像；确定图像与存储在图像数据库中的多个存储图像中的一存储图像相对应，从而产生一确定；基于该确定，检索与存储图像相关联的交互式内容；并且经由显示器，将交互式内容显示为增强现实覆盖。
附图说明
[0009]图1示出了用于与AR交互的第一示例系统；
[0010]图2示出了用于与AR交互的第二示例系统；
[0011]图3示出了AR的示例后端处理；
[0012]图4A示出了确定设备相对已知对象的取向的第一示例；
[0013]图4B示出了确定设备相对已知对象的取向的第二示例；
[0014]图5示出了路线规划的示例；
[0015]图6示出了示例方法实施例；以及
[0016]图7示出了示例计算机系统。
具体实施方式
[0017]下面详细描述本公开的各种实施例。虽然描述了具体的实施方式，但应该理解，这仅是为了说明的目的。在不脱离本公开的精神和范围的情况下，可以使用其他部件和配置。
[0018]所公开的系统、方法和计算机可读存储介质使用增强现实(AR)来改进提供给用户的信息的定制。显示给用户的图形和动画可以根据位置以及用户的特定环境、偏好和需求而变化。随着用户的移动、或者随着时间的推移，呈现给该用户的交互式内容可以被修改和调整。用户可以使用其部署本文公开的AR配置的示例性、非限制性设备可以包括智能手机、平板电脑、智能眼镜(具有眼镜形状的光学头戴式显示器的眼镜)、智能隐形眼镜(具有投影图形能力的隐形眼镜)、或具有相机、处理器和显示机构的其他移动计算设备。
[0019]考虑下面的示例。用户在会议上收到一张名片。名片与交互式AR内容相关联，这意味着当通过AR配置的移动计算设备观看时，交互式AR内容出现在移动计算设备显示器上。用户使用他们的智能手机(其被配置为查看AR内容)查看名片，并且智能手机以图形方式显示与名片相关联的AR内容。例如，如果名片的所有者是狮子训练师，则当通过AR配置的设备观看名片时，名片可以使AR配置的设备在设备显示器中名片的顶部显示动画狮子。当设备的用户在绕卡片周围行走或旋转卡片时，所显示的狮子的方向也可以旋转。换句话说，在该示例中，所显示的狮子的取向可以基于AR配置的设备对名片的相应取向而变化。
[0020]作为另一示例，会议上的用户可以接近一张海报，在“现实生活”中，“我的下一次会话是什么时候？”随着AR设备相机在海报上平移，AR设备识别海报的图像，并且在AR设备显示器上显示与海报相关联的交互式内容。在本示例中，交互式内容是专门为用户定制的地图，并且该地图示出了用户到下一个预定会话应该遵循的路线。
[0021]作为又一示例，用户可以接近小型三维(3D)饰品、玩具或其他对象。当AR设备相机在3D饰品上平移时，可以显示与3D饰品相关联的交互式内容。例如，如果3D装饰是微型拖拉机，则可以在AR设备显示器上显示交互式3D拖拉机。随着用户围绕小饰品行走、旋转或以其他方式移动，AR设备显示器上显示的3D拖拉机的角度会旋转或移动。如果用户靠近或远离，则显示的3D拖拉机的比例可以相应增加或减少。
[0022]作为又一示例，用户可以接近对象(例如海报、标志或其他对象)，并且AR设备在检测到海报时，可以显示基于特定环境而改变或变化的内容。例如，内容可以根据AR设备的用户、一天中的时间、位置、与对象的角度、伪随机变量等而改变。
[0023]可以显示的交互式内容的一个示例可以是电视、电影或其他视频内容。随着用户
移动或调整位置，仅在他们的AR设备上显示的“虚拟”视频内容的角度可以同样移动。实际上，用户正在通过他们的设备观看其他人看不到的个性化电影。在一些配置中，用户然后可以暂停、倒带或以其他方式控制正在显示的视频内容。
[0024]可以显示的交互式内容的另一示例是实时的TWITTER馈送。例如，如果用户在会议上并且观看了在AR设备上激发AR内容显示的对象，则所显示的AR内容可以是与会议相关联的实时TWITTER馈送。随着用户继续通过AR设备查看对象，用户可以与显示的馈送进行交互(滚动、高亮显示、查看特定推文等)。
[0025]交互式内容的另一示例可以是目的地或位置的方向。例如，用户可以查看使用AR设备的当前位置和航向(例如，方位的基本方向)生成供用户跟随到目的地的AR地图的对象。当用户转向跟随方向时，AR设备可以生成AR箭头(虚拟地显示在地面上、墙上、空中等)，供用户跟随以到他们的目的地。如果用户在途中偏离预定路线，则系统可以基于更新的位置自动调整虚拟箭头。如果用户要离开导致生成地图的激发对象，然后又转向激发对象，则地图可以基于AR设备本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种方法，包括：经由移动计算设备的相机捕获视频馈送；经由所述移动计算设备的处理器从所述视频馈送提取图像；经由所述处理器确定所述图像与存储在图像数据库中的多个存储图像中的一存储图像相对应，从而产生一确定；经由所述处理器基于所述确定来检索与该存储图像相关联的交互式内容；并且经由所述移动计算设备的显示器，将所述交互式内容显示为增强现实覆盖。2.根据权利要求1所述的方法，其中，所述图像数据库位于所述移动计算设备内。3.根据权利要求1所述的方法，其中，所述图像数据库远离所述移动计算设备定位；并且所述方法还包括：通过网络从所述移动计算设备向包括所述图像数据库的远程计算系统发送所述图像；并且从所述远程计算系统接收所述图像存储在所述图像数据库中的确认。4.根据权利要求1所述的方法，还包括：经由所述移动计算设备的机载罗盘识别所述移动计算设备的当前航向；经由所述处理器识别所述图像相对于该存储图像的比例；并且经由所述处理器基于所述当前航向和所述比例来修改显示在所述显示器上的所述交互式内容。5.根据权利要求4所述的方法，其中，通过以下中的至少一项来修改所述交互式内容：基于所述比例改变显示的所述交互式内容的尺寸、以及基于所述当前航向改变显示的所述交互式内容的角度。6.根据权利要求1所述的方法，其中，所述交互式内容包括到后续目的地的地图和方向；并且其中，所述方法还包括：检测所述移动计算设备的移动，所述移动包括位置改变以及方向改变中的至少一项；并且基于所述位置改变以及所述方向改变中的所述至少一项来修改所述地图以及所述方向中的至少一项。7.根据权利要求1所述的方法，还包括：经由所述处理器跟踪所述移动计算设备的用户与所述交互式内容的交互；并且从所述移动计算设备向服务器发送所述交互，其中：所述服务器将所述交互与其他用户的交互聚集，从而产生聚集的用户交互；并且基于所述聚集的用户交互，修改所述移动计算设备上的所述交互式内容。8.根据权利要求7所述的方法，其中，所述交互式内容存储在所述服务器内；并且其中，经由所述处理器检索所述交互式内容还包括：通过网络从所述处理器向所述服务器发送针对所述交互式内容的请求；并且响应于所述请求，在所述处理器处通过所述网络从所述服务器接收所述交互式内容。
9.根据权利要求1所述的方法，其中，所述交互式内容存储在所述移动计算设备的数据库内。10.根据权利要求1所述的方法，其中，所述移动计算设备包括智能手机、智能眼镜以及智能隐形眼镜中的至少一项。11.一种系统，包括：处理器；相机；显示器；以及非暂时性计算机可读存储介质，存储有指令，所述指令在由所述处理器执行时使所述处理器执行操作，所述操作包括：经由所述相机捕获视频馈送；从所述视频馈送中提取图像；确定所述图像与存储在图像数据库中的多个存储图像中的一存储图像相对应，从而产生一确定；基于所述确定来检索与...

【专利技术属性】
技术研发人员：查德，
申请(专利权)人：思文特公司，
类型：发明
国别省市：