虚拟现实因果概要内容制造技术

一种装置，该装置被配置为：关于包括视频图像的虚拟现实内容，该视频图像被配置为提供用于在虚拟现实中查看的虚拟现实空间，其中，呈现给用户的虚拟现实视图提供对虚拟现实内容的查看，虚拟现实视图包括视频图像的空间部分，视频图像的空间部分形成虚拟现实空间，并且虚拟现实视图的空间范围小于虚拟现实空间的视频图像的空间范围，以及基于以下中的一个或多个：i)被提供给用户的至少一个虚拟现实视图的虚拟现实空间中的查看方向；以及ii)视频图像中的所选对象，至少在由用户当前查看的虚拟现实内容中的时间点之前，提供包括来自虚拟现实内容的所选内容的因果概要内容的生成或显示中的一种或多种，因果概要内容至少集中于出现在至少一个虚拟现实视图中的对象或事件、或者所选对象，以示出对象或事件或者所选对象在虚拟现实内容中的历史发生。

【技术实现步骤摘要】
【国外来华专利技术】虚拟现实因果概要内容
本公开涉及虚拟现实领域，并且具体地，涉及从虚拟现实内容生成或显示因果概要内容。还公开了关联方法、计算机程序和装置。某些所公开的方面/示例涉及便携式电子设备。
技术介绍
虚拟现实可以使用围绕用户的耳机(诸如，眼镜或护目镜)或者一个或多个显示器来向用户提供沉浸式虚拟体验。虚拟现实装置可以向用户呈现表示虚拟现实空间的多媒体虚拟现实内容，以模拟存在于虚拟现实空间内的用户。虚拟现实空间可以由全景视频提供，诸如，具有较宽视野或360°视野的视频(这可以包括水平定向视野的上方和/或下方)。形成虚拟现实空间的视频图像大于用户在任一时间能够查看的视频图像的结果是可能会错过对象或事件。本说明书中对先前公布的文档或任何
技术介绍
的列举或讨论不应当被视为承认该文档或
技术介绍
是现有技术的一部分或者是公知常识。本公开的一个或多个方面/示例可以或可以不解决一个或多个
技术介绍
问题。
技术实现思路
在第一示例方面中，提供了一种装置，该装置包括：至少一个处理器；以及至少一个存储器，该至少一个存储器包括计算机程序代码，至少一个存储器和计算机程序代码配置为与至少一个处理器一起使装置至少执行以下操作：关于包括视频图像的虚拟现实内容，该视频图像被配置为提供用于在虚拟现实中查看的虚拟现实空间，其中，呈现给用户的虚拟现实视图提供对虚拟现实内容的查看，虚拟现实视图包括视频图像的空间部分，视频图像的空间部分形成虚拟现实空间，并且虚拟现实视图的空间范围小于虚拟现实空间的视频图像的空间范围，以及基于以下中的一个或多个：i)被提供给用户的至少一个虚拟现实视图的虚拟现实空间中的查看方向；以及ii)视频图像中的所选对象，至少在由用户当前查看的虚拟现实内容中的时间点之前，提供包括来自虚拟现实内容的所选内容的因果概要内容的生成或显示中的一种或多种，因果概要内容至少集中于出现在至少一个虚拟现实视图中的对象或事件、或者所选对象，以示出对象或事件或者所选对象在虚拟现实内容中的历史发生。这是有利的，因为由于虚拟现实内容的视频图像的大空间范围，当消费VR内容时，用户不可能在任意一个时间点查看视频图像的整个空间范围，并且因此没有见证用户的虚拟现实视图外部的事件和对象。当提供对象或事件以用于在VR视图中显示，但是用户未查看(或者已经查看但未注意到)导致存在对象或事件发生的视频图像中的一些或所有视频图像时，这可能会导致混淆或困惑。相应地，该装置有利地提供从示出视频图像中的对象的历史存在或者与特定对象/事件有关的(多个)事件的历史发生的VR内容导出的因果概要内容的生成或显示。在一个或多个实施例中，因果概要内容的生成或显示中的一种或多种的提供进一步基于在至少预定时间段内被提供给用户的、在历史上不包括对象或事件或者所选对象的虚拟现实视图，从而仅提供针对由用户在观看虚拟现实内容时错过的对象或事件的因果概要内容。在一个或多个实施例中，基于以下选择所选内容：预定义因果数据，包括对视频图像的空间部分随着时间的参考，在视频图像的空间部分中，对象或所选对象存在或者事件发生，其中，所述空间部分中的至少一个所述空间部分的查看方向与被提供给用户的所述至少一个虚拟现实视图的查看方向或者所选对象的查看方向相同。在一个或多个实施例中，基于以下选择所选内容：视频图像的图像分析，以标识所选对象、或在虚拟现实内容的至少时间上先前的视频图像中被提供给用户的所述至少一个虚拟现实视图中的对象。这种因果概要内容的生成/显示可以有利地基于用户正在观看的虚拟现实空间中的位置(即，用户正在其虚拟现实视图中观看的视频图像的哪个部分)或者用户已经选择的内容(例如，对象、人、人物或者对象或人物组)，使得用户可以看到导致生成/显示因果概要内容的时间点的虚拟现实内容中的过去事件、一连串事件或者对象的先前发生(即，因果概要内容)。因此，因果概要内容可以基于对用户已经查看的内容的分析来向用户建议，或者可以响应于对象的用户选择来提供。相应地，通过因果概要内容，用户可以看到特定对象(例如，人)进入场景的位置以及它/他们如何到达其虚拟现实视图。那些过去事件(而不是特定于对象)可以追踪导致被呈现在虚拟现实视图中的场景的一系列事件或人。例如，如果在用户注意到倒在地板上的被攻击人物时，用户请求查看因果概要内容，则过去事件可能涉及该人物的攻击者和导致该人物被攻击的其它相关事件。此外，有利地，可以以多种方式确定是否要提供因果概要内容的生成/显示。虚拟现实内容或与其相关联的信息可以包括预定义因果数据，该预定义因果数据包括随时间在空间上追踪视频图像中的对象和/或事件的数据。因此，虚拟现实视图的查看方向(即，用户在消费VR内容时正在观看的位置)与预定义因果数据之间的比较可以标识用户可能错过的对象或事件，该对象或事件的空间位置由预定义因果数据定义。如果VR视图的查看方向与在因果概要内容中定义的至少一个查看方向相同(即，在彼此的阈值角度内)，那么用户可能希望查看与其VR视图中的事件/对象相关联的因果概要内容。进一步地，使用VR视图的多个查看方向并且通过与预定义因果数据的比较，该装置可以标识用户已经错过的对象或事件，该对象或事件的空间位置由预定义因果数据定义。因此，用户可能感兴趣并且可以作为因果概要内容而被提供的对象或事件可以包括用户在至少第一预定时间段内(假定足以注意到对象/事件)已经查看并且在至少第二预定时间段内尚未查看的那些对象或事件。第一预定时间可以是至少5、10、15、30、60、90秒或更多。第二预定时间可以是至少5、10、15、30、60、90秒或更多或者对象/事件出现在虚拟现实内容中的时间的预定百分比。因此，如果对象或事件在30秒的时间段内出现，则如果用户的VR视图仅在短时间内未集中于对象或事件，则理解这种对象或事件的存在可能是困难的。在一个或多个实施例中，因果概要内容的提供基于被提供给用户的虚拟现实视图的查看方向与预定义因果数据之间的比较，以及对用户在至少第一预定时间段内已经查看并且在至少第二预定时间段内尚未查看的对象、事件或一连串事件的标识。因此，预定义因果数据可以定义对象和/或事件的查看方向，并且利用被提供给用户的VR视图的查看方向，可以确定用户是否查看了这些对象和事件。因此，该装置可以被配置为使用近期的查看方向子集来标识用户在其VR视图中正在查看的特定对象或事件，并且使用较近的查看方向子集来确定用户在VR内容的早期消费期间尚未查看相同的对象或事件(或相关的一连串事件)，并且因此可以相对于该对象或事件(或相关的一连串事件)生成或显示因果概要内容。例如，可以标识近期出现在用户的虚拟现实视图中但用户因为没有在适当方向上观看(即，他们的虚拟现实视图被指向适当方向)而可能不知道它来自何处的对象，并且提供对应的因果概要内容。在一个或多个实施例中，视频图像中的所选对象是用户选择的。这是有利的，因为用户可以选择对象，诸如，出现在视频图像中的事物、人物或事物/人物的组合，并且可以提供因果概要内容以用于所选对象。相应地，在一个或多个示例中，该装置可以确定预定义因果数据是否可用于所选对象，并且如果可用，则基于预定义因果数据提供因果概要内容。在一个或多个示例中，该装置可以诸如通过视频图像的图像分析(诸如，如果预定义因果数据不可用于所选对象)来本文档来自技高网...

【技术保护点】
1.一种装置，包括：至少一个处理器；以及至少一个存储器，包括计算机程序代码，所述至少一个存储器和所述计算机程序代码被配置为与所述至少一个处理器一起使得所述装置至少执行以下操作：关于包括视频图像的虚拟现实内容，所述视频图像被配置为提供用于在虚拟现实中查看的虚拟现实空间，其中呈现给用户的虚拟现实视图提供对所述虚拟现实内容的查看，所述虚拟现实视图包括所述视频图像的空间部分，所述视频图像的所述空间部分形成所述虚拟现实空间，并且所述虚拟现实视图的空间范围小于所述虚拟现实空间的所述视频图像的空间范围，以及基于以下中的一个或多个：i)被提供给所述用户的至少一个虚拟现实视图的所述虚拟现实空间中的查看方向；以及ii)所述视频图像中的所选对象，至少在由所述用户当前查看的所述虚拟现实内容中的时间点之前，提供包括来自所述虚拟现实内容的所选内容的因果概要内容的生成或显示中的一种或多种，所述因果概要内容至少集中于出现在所述至少一个虚拟现实视图中的对象或事件、或者所述所选对象，以示出所述对象或事件或者所选对象在所述虚拟现实内容中的历史发生，其中，因果概要内容的生成或显示中的一种或多种的提供进一步基于在至少预定时间段内被提供给所述用户的、在历史上不包括所述对象或事件或者所选对象的所述虚拟现实视图，从而提供针对由所述用户在观看所述虚拟现实内容时错过的对象或事件的因果概要内容。...

【技术特征摘要】
【国外来华专利技术】2016.04.21 EP 16166501.31.一种装置，包括：至少一个处理器；以及至少一个存储器，包括计算机程序代码，所述至少一个存储器和所述计算机程序代码被配置为与所述至少一个处理器一起使得所述装置至少执行以下操作：关于包括视频图像的虚拟现实内容，所述视频图像被配置为提供用于在虚拟现实中查看的虚拟现实空间，其中呈现给用户的虚拟现实视图提供对所述虚拟现实内容的查看，所述虚拟现实视图包括所述视频图像的空间部分，所述视频图像的所述空间部分形成所述虚拟现实空间，并且所述虚拟现实视图的空间范围小于所述虚拟现实空间的所述视频图像的空间范围，以及基于以下中的一个或多个：i)被提供给所述用户的至少一个虚拟现实视图的所述虚拟现实空间中的查看方向；以及ii)所述视频图像中的所选对象，至少在由所述用户当前查看的所述虚拟现实内容中的时间点之前，提供包括来自所述虚拟现实内容的所选内容的因果概要内容的生成或显示中的一种或多种，所述因果概要内容至少集中于出现在所述至少一个虚拟现实视图中的对象或事件、或者所述所选对象，以示出所述对象或事件或者所选对象在所述虚拟现实内容中的历史发生，其中，因果概要内容的生成或显示中的一种或多种的提供进一步基于在至少预定时间段内被提供给所述用户的、在历史上不包括所述对象或事件或者所选对象的所述虚拟现实视图，从而提供针对由所述用户在观看所述虚拟现实内容时错过的对象或事件的因果概要内容。2.根据权利要求1所述的装置，其中，所述所选内容基于以下而被选择：预定义因果数据，包括对所述视频图像的空间部分随着时间的参考，在所述视频图像的所述空间部分中，所述对象或所选对象存在或者所述事件发生，其中所述空间部分中的至少一个空间部分的查看方向与被提供给所述用户的所述至少一个虚拟现实视图的所述查看方向或者所述所选对象的所述查看方向相同。3.根据任何前述权利要求所述的装置，其中，所述所选内容基于以下而被选择：所述视频图像的图像分析，以标识所述所选对象、或在所述虚拟现实内容的至少时间上先前的视频图像中被提供给所述用户的所述至少一个虚拟现实视图中的对象。4.根据权利要求2所述的装置，其中，所述因果概要内容的所述提供基于被提供给所述用户的所述虚拟现实视图的所述查看方向与所述预定义因果数据之间的比较，以及对用户在至少第一预定时间段内已经查看、并且在至少第二预定时间段内尚未查看的对象、事件或一连串事件的标识。5.根据任何前述权利要求所述的装置，其中，所述视频图像中的所述所选对象是用户选择的。6.根据任何前述权利要求所述的装置，其中，基于在阈值内与所述对象对齐的当前虚拟现实视图的所述查看方向，所述视频图像中的对象被自动选择为所述所选对象。7.根据权利要求2所述的装置，其中，所述预定义因果数据包括至少所述虚拟现实空间中的所述查看方向与时间的数据集合，从而提供对所述视频图像的部分的参考，以追踪随着时间出现在所述视频图像中的对象或事件或一连串事件在所述虚拟现实空间中的空间位置。8.根据权利要求2、4或7所述的装置，其中，所述预定义因果数据包括一个或多个预定义因果数据集合，每个预定义因果数据集合提供所述视频图像中随着时间的对象、事件或一连串事件中的一个或多个的空间追踪，并且所选择的所述视频图像基于对所述多个预定义因果数据集合中的一个预定义因果数据集合的选择来确定，所述选择基于被提供给所述用户的所述虚拟现实视图的查看方向与所述多个预定义因果数据集合中的每一个预定义因果数据集合的所述查看方向之间的比较。9.根据任何前述权利要求所述的装置，其中，所述因果概要内容包括以下中的一个或多个：i)从所述虚拟现实内容的所述视频图像提取的概要视频图像；ii)从所述...

【专利技术属性】
技术研发人员：J·勒帕南，A·勒蒂涅米，A·埃罗南，F·克里克里，
申请(专利权)人：诺基亚技术有限公司，
类型：发明
国别省市：芬兰,FI