一种XR环境中进行拍摄的方法、装置、设备及存储介质制造方法及图纸

本说明书涉及人机交互领域，尤其涉及一种XR环境中进行拍摄的方法、装置、设备及存储介质。其方法包括，接收用户的拍摄请求，根据拍摄请求在虚拟空间中设置虚拟相机，获取来自用户的调整虚拟相机的指令，根据用户的调整指令确定取景区域及观察角度，然后根据实时眼动信息以及所述取景区域，调整所述虚拟相机的拍摄信息，最后根据所述拍摄信息生成照片或视频。通过本说明书实施例，实现了在XR环境中进行全场景的交互拍摄，增加XR设备中进行全方位可选区域的拍照和第三视角自拍的功能，提升用户的体验。验。验。

【技术实现步骤摘要】
一种XR环境中进行拍摄的方法、装置、设备及存储介质


[0001]本说明书涉及图像数据处理领域，尤其涉及一种XR环境中进行拍摄的方法、装置、设备及存储介质。

技术介绍

[0002]扩展现实(Extended Reality，XR)是指通过计算机将真实与虚拟相结合，打造一个可人机交互的环境，这也是增强现实(Augmented Reality，AR)、虚拟现实(Virtual Reality，VR)、混合现实(Mixed Reality，MR)等多种技术的统称。通过将三者的视觉交互技术相融合，为体验者带来虚拟世界与现实世界之间无缝转换的“沉浸感”。现有技术中，在XR中的用户FOV限制了可拍摄的内容，只能根据用户在XR环境中所处的位置来限制拍摄的内容，并且眼动追踪中实时的眼动轨迹频繁跳跃抖动且无规律。如果将焦点直接绑定在未经处理的实时眼动轨迹上，则焦点会随之频繁的跳跃，不能在XR环境中自由拍摄，也无法进行自拍。
[0003]现在亟需一种XR环境中进行拍摄的方法，从而解决不能在XR环境中进行全场景的自主交互且不受当前用户FOV限制的拍摄，同时无法进行第三视角的自拍，导致XR拍摄自由度差，用户体验差的问题。

技术实现思路

[0004]为解决现有技术中不能在XR环境中进行全场景的自主交互拍摄，同时无法进行第三视角的自拍，导致XR拍摄自由度差，用户体验差的问题，本说明书实施例提供一种XR环境中进行拍摄的方法、装置、设备及存储介质，能够利用头动追踪以及眼动追踪以及用户的相关指令，生成拍摄信息，从而实现在XR环境中进行全场景的交互拍摄，增加XR设备中进行全方位拍照和第三视角自拍的功能，提升用户的体验。
[0005]为了解决上述技术问题，本说明书的具体技术方案如下：
[0006]一方面，本说明书实施例提供了一种XR环境中进行拍摄的方法，包括，
[0007]接收用户的拍摄请求，根据所述拍摄请求在虚拟空间中设置虚拟相机；
[0008]获取用户的指令信息，根据所述指令信息确定所述虚拟相机取景区域；
[0009]根据眼动信息以及所述取景区域，调整所述虚拟相机的拍摄信息；
[0010]根据所述拍摄信息生成照片或视频。
[0011]进一步地，获取用户的指令信息进一步包括，所述指令信息包括以下的一种或多种，用户的头动信息、眼动信息以及操作指令。
[0012]进一步地，根据眼动信息以及所述取景区域，调整所述虚拟相机的拍摄信息进一步包括，
[0013]所述眼动信息包括用户的实时视觉焦点；
[0014]根据所述实时视觉焦点调整画面参数。
[0015]进一步地，接收用户的拍摄请求还包括，
[0016]根据所述拍摄请求生成预览框，在所述预览框中显示从所述虚拟相机观察到的XR环境。
[0017]进一步地，根据所述实时视觉焦点调整画面参数进一步包括，
[0018]根据所述实时视觉焦点的初始位置生成聚焦区域；
[0019]若用户的实时视觉焦点位于聚焦区域内，则保持所述聚焦区域不移动；
[0020]根据所述实时视觉焦点变化产生的画面参数同步所述预览框中显示的内容；
[0021]若用户的实时视觉焦点移动至聚焦区域外，则将实时视觉焦点与聚焦区域边界的交点作为新的聚焦区域的中心，得到新的聚焦区域；
[0022]根据所述实时视觉焦点和所述新的聚焦区域变化产生的画面参数同步所述预览框中显示的内容。
[0023]进一步地，根据所述拍摄请求生成预览框进一步包括，
[0024]根据所述指令信息，移动、旋转或缩放所述预览框；
[0025]将所述预览框设定于用户视野中的固定位置和角度；
[0026]根据所述头动信息移动所述预览框，使所述预览框在用户视野范围内。
[0027]进一步地，根据所述指令信息确定所述虚拟相机取景区域进一步包括，
[0028]根据所述头动信息生成取景区域；
[0029]根据实时头动信息以及所述操作指令调整所述取景区域；
[0030]所述虚拟相机的取景区域完成调整后，根据所述指令信息将所述取景区域锁定。
[0031]进一步地，根据眼动信息以及所述取景区域，调整所述虚拟相机的拍摄信息进一步包括，
[0032]根据所述眼动信息判断用户实时聚焦区域所在的焦点物体；
[0033]将所述焦点物体以外的内容虚化处理。
[0034]进一步地，所述眼动信息还包括用户的眼部状态信息。
[0035]进一步地，将所述焦点物体以外的内容虚化处理进一步包括，
[0036]用户的眼部状态信息进一步包括用户眯眼程度，根据眯眼程度的变化调整所述拍摄信息的景深范围；
[0037]根据所述景深范围将所述焦点物体景深以外的内容虚化处理。
[0038]进一步地，调整所述虚拟相机的拍摄信息进一步包括，
[0039]完成所述拍摄信息的调整后，根据所述指令信息锁定当前拍摄信息。
[0040]进一步地，根据所述拍摄请求在虚拟空间中设置虚拟相机进一步包括，
[0041]所述设置虚拟相机包括将所述虚拟相机设置在XR环境中任意的位置及任意角度。
[0042]进一步地，根据所述拍摄请求在虚拟空间中设置虚拟相机进一步包括，
[0043]所述设置虚拟相机还包括设置所述虚拟相机的运动状态；
[0044]所述运动状态包括在指定位置进行固定拍摄，以及移动拍摄。
[0045]进一步地，其特征在于，所述固定拍摄进一步包括，
[0046]所述虚拟相机固定在XR场景中任意位置任意角度，根据所述指令信息进行静止或旋转。
[0047]进一步地，所述移动拍摄进一步包括，
[0048]以任意物体作为焦点物体进行跟踪移动；
[0049]或根据所述拍摄请求设定移动轨迹进行轨迹移动。
[0050]进一步地，根据所述拍摄信息生成照片或视频进一步包括，
[0051]所述拍摄信息还包括在实时取景区域中生成的用户虚拟形象；
[0052]根据所述拍摄信息将所述虚拟形象设置在取景区域内任意的位置、角度以及姿势；
[0053]根据所述实时取景区域以及所述虚拟形象生成照片或视频。
[0054]另一方面，本说明书实施例还提供了一种XR环境中进行拍摄的装置，包括，
[0055]拍摄请求单元，用于接收用户的拍摄请求，根据所述拍摄请求在虚拟空间中设置虚拟相机；
[0056]指令信息单元，用于获取用户的指令信息，根据所述指令信息确定所述虚拟相机取景区域；
[0057]拍摄信息单元，用于根据眼动信息以及所述取景区域，调整所述虚拟相机的拍摄信息；
[0058]照片视频生成单元，用于根据所述拍摄信息生成照片或视频。
[0059]另一方面，本说明书实施例还提供了一种计算机设备，包括存储器、处理器、以及存储在存储器上的计算机程序，处理器执行所述计算机程序时实现上述的方本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种XR环境中进行拍摄的方法，其特征在于，所述方法包括，接收用户的拍摄请求，根据所述拍摄请求在虚拟空间中设置虚拟相机；获取用户的指令信息，根据所述指令信息确定所述虚拟相机取景区域；根据眼动信息以及所述取景区域，调整所述虚拟相机的拍摄信息；根据所述拍摄信息生成照片或视频。2.根据权利要求1所述的XR环境中进行拍摄的方法，其特征在于，获取用户的指令信息进一步包括，所述指令信息包括以下的一种或多种，用户的头动信息、眼动信息以及操作指令。3.根据权利要求2所述的XR环境中进行拍摄的方法，其特征在于，根据眼动信息以及所述取景区域，调整所述虚拟相机的拍摄信息进一步包括，所述眼动信息包括用户的实时视觉焦点；根据所述实时视觉焦点调整画面参数。4.根据权利要求3所述的XR环境中进行拍摄的方法，其特征在于，接收用户的拍摄请求还包括，根据所述拍摄请求生成预览框，在所述预览框中显示从所述虚拟相机观察到的XR环境。5.根据权利要求4所述的XR环境中进行拍摄的方法，其特征在于，根据所述实时视觉焦点调整画面参数进一步包括，根据所述实时视觉焦点的初始位置生成聚焦区域；若用户的实时视觉焦点位于聚焦区域内，则保持所述聚焦区域不移动；根据所述实时视觉焦点变化产生的画面参数同步所述预览框中显示的内容；若用户的实时视觉焦点移动至聚焦区域外，则将实时视觉焦点与聚焦区域边界的交点作为新的聚焦区域的中心，得到新的聚焦区域；根据所述实时视觉焦点和所述新的聚焦区域变化产生的画面参数同步所述预览框中显示的内容。6.根据权利要求4所述的XR环境中进行拍摄的方法，其特征在于，根据所述拍摄请求生成预览框进一步包括，根据所述指令信息，移动、旋转或缩放所述预览框；将所述预览框设定于用户视野中的固定位置和角度；根据所述头动信息移动所述预览框，使所述预览框在用户视野范围内。7.根据权利要求3所述的XR环境中进行拍摄的方法，其特征在于，根据所述指令信息确定所述虚拟相机取景区域进一步包括，根据所述头动信息生成取景区域；根据实时头动信息以及所述操作指令调整所述取景区域；所述虚拟相机的取景区域完成调整后，根据所述指令信息将所述取景区域锁定。8.根据权利要求3所述的XR环境中进行拍摄的方法，其特征在于，根据眼动信息以及所述取景区域，调整所述虚拟相机的拍摄信息进一步包括，根据所述眼动信息判断用户实时聚焦区域所在的焦点物体；将所述焦点物体以外的内容虚化处理。
9.根据权利要求8所述的XR环境中进行拍摄的方法，其特征在于，所述眼动信息还包括用户的眼部状态信息。10...

【专利技术属性】
技术研发人员：岳雅婷，张驰，
申请(专利权)人：北京虹宇科技有限公司，
类型：发明
国别省市：