可寻址的增强现实内容制造技术

一种用于执行操作的可寻址媒体系统，该操作包括：访问描绘在客户端设备处的环境中对象的图像数据；导致在客户端设备处的图形用户界面内显示图像数据的呈现；基于对象的显示的多个图像特征的至少一部分，检测在图像数据的呈现内对象的显示；基于对象的显示的图像特征的至少一部分来识别对象类；从客户端设备接收选择对象的显示的输入；以及响应于选择对象的显示的输入，将与对象对应的对象类与用户配置文件相关联。件相关联。件相关联。

【技术实现步骤摘要】
【国外来华专利技术】可寻址的增强现实内容
[0001]优先权要求
[0002]本申请要求于2019年6月28日提交的美国专利申请序列号16/457,505的优先权，该申请通过引用整体并入本文。


[0003]本公开的实施例大致上涉及增强现实(AR)媒体，并且更具体地，涉及实现AR媒体的可寻址性的系统。

技术介绍

[0004]增强现实(AR)是真实世界环境的交互式体验，其中驻留在真实世界环境中的对象通过计算机生成的感知信息得到增强，有时跨越多个感官模态。叠加的感官信息(即媒体内容)可以是建设性的(即对自然环境的添加)或破坏性的(即对自然环境的掩饰)，并且与物理世界无缝交织，使得其被感知为真实世界环境的沉浸式方面。
附图说明
[0005]为了轻松识别任何特定元素或行为的讨论，参考编号中的一个或多个最高位是指首次引入该元素的图编号。
[0006]图1是示出根据一些实施例的用于通过网络交换数据(例如，消息和相关联内容)的示例消息传递系统的框图，其中消息传递系统包括可寻址媒体系统。
[0007]图2是示出根据示例实施例的关于消息传递系统的进一步细节的框图。
[0008]图3是示出根据某些示例实施例的可寻址媒体系统的各种模块的框图。
[0009]图4是示出根据某些示例实施例的用于将对象类与用户配置文件相关联的方法的流程图。
[0010]图5是示出根据某些示例实施例的用于呈现AR内容的方法的流程图。
[0011]图6是示出根据某些示例实施例的用于将对象类与用户配置文件相关联的方法的流程图。
[0012]图7是示出根据某些示例实施例的用于寻址对象的方法的流程图。
[0013]图8是描绘根据某些示例实施例的地理围栏区域的图。
[0014]图9是描绘根据某些示例实施例的在客户端设备处呈现的AR内容的界面图。
[0015]图10是描绘根据某些示例实施例的在客户端设备处呈现的AR内容的界面图。
[0016]图11是示出可结合在此描述的各种硬件架构使用并用于实现各种实施例的代表性软件架构的框图。
[0017]图12是示出根据一些示例实施例的能够从机器可读介质(例如，机器可读存储介质)读取指令并执行在此讨论的任何一种或多种方法的机器的组件的框图。
具体实施方式
[0018]如上所述，AR是真实世界环境的交互式体验，其中驻留在真实世界环境中的对象可以通过计算机生成的感知信息的添加来增强，有时跨越多个感官模态。叠加的感官信息(即媒体内容)可以通过添加媒体内容成为对自然环境的添加，或者通过掩盖自然环境对自然环境是破坏性的。因此，AR媒体与物理世界无缝交织，使得其被感知为真实世界环境的沉浸式方面。
[0019]在在此讨论的某些示例实施例中，AR系统可以为了对象检测的目的而采用计算机视觉和图像处理技术，以便检测在数字图像和视频中某些类的语义对象，使AR系统能够在真实世界环境的呈现内更准确地并无缝呈现AR媒体。
[0020]根据在此描述的一些实施例，可寻址媒体系统可以是或包括可操作以计算、处理、存储、显示、生成、通信或应用用于执行操作的各种形式的数据的任何工具或工具的集合，该操作包括：访问描绘在客户端设备处的环境中的对象的图像数据，其中所述客户端设备与用户配置文件相关联；导致在客户端设备处显示图形用户界面(GUI)内图像数据的呈现，其中图像数据的呈现包括在图像数据的呈现内的位置处的对象的显示，并且对象的显示包括多个图像特征；基于对象的显示的多个图像特征中的至少一部分，检测在图像数据的呈现内所述对象的显示；响应于在图像数据的呈现内检测到对象的显示，至少基于对象的显示的图像特征的一部分来识别对象类；通过GUI，从客户端设备接收选择对象的显示的输入；以及响应于选择对象的显示的输入，将与对象对应的对象类与用户配置文件相关联。
[0021]在一些实施例中，可寻址媒体系统可以执行一种或多种计算机视觉和图像处理技术来检测和识别在GUI内的图像数据的呈现内显示的对象的属性。例如，在此类实施例中，多个对象类可以与对类进行分类的对应特征相关联(即，圆圈是圆形的)。因此，可寻址媒体系统可以维护包括对象类的数据库，其中每个对象类包括识别对象类的对应图像特征集。在某些实施例中，可寻址媒体系统的用户或管理员可以通过提供识别和定义与对象类相关联的特征的输入来定义定制的对象类。例如，用户可以提供在空间的呈现内选择对象的输入，并且作为响应，可寻址媒体系统可以解析图像数据的呈现内的对象的显示以便识别该识别特征。
[0022]在一些实施例中，响应于检测和识别在图像数据的呈现内的对象的显示，可寻址媒体系统致使图形指示符的显示以突出该对象的显示。图形指示符可以包括与该对象的对象类对应的图形特性。例如，图形指示符的颜色、大小和形状可以与每个对象类相关联。
[0023]在一些实施例中，响应于接收选择在客户端设备处的呈现内的对象的显示的输入，可寻址媒体系统将对象的对象类与关联于该客户端设备的用户配置文件相关联。例如，将对象的对象类与用户配置文件相关联可以包括：将与用户配置文件相关联的用户标识符与对象类及其在可寻址媒体系统的媒体储存库或数据库内的对应图像特征相关联。
[0024]在某些示例实施例中，用户可以提供修改对象的显示的输入，该对象的显示与关联于他们的用户配置文件的对象类相对应。例如，可寻址媒体系统可以在客户端设备处向用户提供界面，其中用户可以提供输入以将AR媒体应用于对象类的对象。因此，当对象被显示给其他用户时，可以基于由用户应用的AR媒体来修改对象的显示。作为说明性示例，用户可以提供选择汽水罐的输入，这致使可寻址媒体系统将与“汽水罐”对应的对象类关联到他们的用户配置文件。然后，用户可以提供输入以将AR媒体应用于与对象类对应的对象。例
如，AR媒体可以包括在与对象类对应的对象的显示上显示用户的用户名的覆盖物。因此，第二用户可能在他们的设备(第二设备)处遇到并显示与汽水罐对应的对象。响应于检测和识别对象，可寻址媒体系统将由用户定义的与对应对象类相关联的AR媒体应用于第二设备处对象的显示。
[0025]在一些实施例中，除了接收对对象类的对象的显示的选择之外，可寻址媒体系统还可以具有将对象类与用户配置文件相关联所需的一个或多个条件。例如，在一些实施例中，条件可以包括对象类的对象的显示的多个选择，使得为了接收对象类的关联，用户必须选择对象类的阈值数量的对象。对象的阈值数量可以基于预定义的值来定义，或者在一些实施例中可以是相对值，使得从他们的社交网络中或者在地理围栏区域内具有“最多”选择的用户可以接收到关联。因此，在另一个用户选择更多数量的对象之后，或者在一些实施例中，基于用户离开地理围栏区域，用户可能会失去对象类与其用户配置文件的关联。
[0026]图1是示出用于通过网络交换数据(例如，消息和相关联的内容)的示例消息传递系统100的框图。消息传递系统100包括多个客户端设备102，每个客户端设备托管包括消息传递客户端应用104的多个应用。每个本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种方法，包括：访问描绘在客户端设备处的环境中的对象的图像数据，所述客户端设备与用户配置文件相关联；导致在所述客户端设备处的图形用户界面(GUI)内显示所述图像数据的呈现，所述图像数据的所述呈现包括在所述图像数据的所述呈现内的位置处的所述对象的显示，所述对象的所述显示包括图像特征；基于所述对象的所述显示的所述图像特征，检测在所述图像数据的所述呈现内所述对象的所述显示；响应于在所述图像数据的所述呈现内检测到所述对象的所述显示，至少基于所述对象的所述显示的所述图像特征来识别对象类；从所述客户端设备接收选择所述对象的所述显示的输入；以及响应于选择所述对象的所述显示的所述输入，将与所述对象对应的所述对象类与所述用户配置文件相关联。2.根据权利要求1所述的方法，其中，所述方法进一步包括：响应于所述检测到所述对象的所述显示，基于所述对象的所述显示的所述位置，导致在所述图像数据的所述呈现内显示边界框。3.根据权利要求2所述的方法，其中，所述边界框包括至少基于所述对象的所述对象类的视觉特性。4.根据权利要求1所述的方法，其中，将与所述对象对应的所述对象类与所述用户配置文件相关联包括：将所述对象的所述显示的所述图像特征与数据库内的所述用户配置文件相关联。5.根据权利要求1所述的方法，其中，所述客户端设备是第一客户端设备，所述对象的所述显示是所述对象的第一显示，并且所述方法进一步包括：检测在第二客户端设备处所述对象的第二显示；识别所述对象的所述对象类；取得与关联于所述对象类的所述用户配置文件相关联的标识符；以及响应于所述检测到所述对象的所述第二显示，导致在所述第二客户端设备处显示与所述用户配置文件相关联的所述标识符。6.根据权利要求1所述的方法，其中，所述客户端设备是第一客户端设备，所述用户配置文件是第一用户配置文件，所述显示是第一显示，所述输入是第一输入，并且所述方法进一步包括：从第二客户端设备接收选择所述对象的第二显示的第二输入；以及解除所述对象类与所述第一用户配置文件的关联；以及响应于所述第二输入，将与所述对象对应的所述对象类与第二用户配置文件相关联。7.根据权利要求1所述的方法，其中，将与所述对象对应的所述对象类与所述用户配置文件相关联包括：将所述对象的所述显示的所述图像特征与服务器处数据库内的所述用户配置文件相关联。8.一种系统，包括：
存储器；以及至少一个硬件处理器，其耦合到所述存储器并包括使所述系统执行操作的指令，所述操作包括：访问描绘在客户端设备处的环境中的对象的图像数据，所述客户端设备与用户配置文件相关联；导致在所述客户端设备处的图形用户界面(GUI)内显示所述图像数据的呈现，所述图像数据的所述呈现包括在所述图像数据的所述呈现内的位置处的所述对象的显示，所述对象的所述显示包括图像特征；基于所述对象的所述显示的所述图像特征，检测在所述图像数据的所述呈现内所述对象的所述显示；响应于在所述图像数据的所述呈现内检测到所述对象的所述显示，至少基于所述对象的所述显示的所述图像特征来识别对象类；从所述客户端设备接收选择所述对象的所述显示的输入；以及响应于选择所述对象的所述显示的所述输入，将与所述对象对应的所述对象类与所述用户配置文件相关联。9.根据权利要求8所述的系统，其中，所述操作进一步包括：响应于所述检测到所述对象的所述显示，基于所述对象的所述显示的所述位置，导致在所述图像数据的所述呈现内显示边界框。10.根据权利要求9所述的系统，其中，所述边界框包括至少基于所述对象的所述对象类的视觉特性。11.根据权利要求8所述的系统，其中，将与...

【专利技术属性】
技术研发人员：P，
申请(专利权)人：斯纳普公司，
类型：发明
国别省市：