电子设备的控制方法、装置、终端和存储介质制造方法及图纸

本公开提供电子设备的控制方法及装置、终端和存储介质。电子设备包括头戴式设备，电子设备的控制方法包括：获取头戴式设备的运动信息；基于运动信息，确定头戴式设备的图像的帧率。通过基于头戴式设备的运动信息来实时确定头戴式设备的图像的帧率，能够实现头戴式设备的图像的帧率的动态调节，在满足用户需求的基础上，降低图像编解码和传输的压力，减小系统的发热和功耗，减少传输时延。减少传输时延。减少传输时延。

【技术实现步骤摘要】
电子设备的控制方法、装置、终端和存储介质


[0001]本公开涉及信息
，尤其涉及电子设备的控制方法及装置、终端和存储介质。

技术介绍

[0002]在串流场景中，服务端的应用(例如，游戏)的画面，通过服务端的渲染、编码、打包、传输，再经过客户端(例如，VR设备)的接收解析、解码、渲染等过程，最终显示在屏幕上，展示给用户。通常地，客户端的屏幕刷新率是固定的，即，满帧显示。然而，这并没有充分贴合用户的需求，并且一致以满帧的方式运行，数据的传输压力大，占用较多的传输带宽，并且容易产生传输延迟，带来不必要的开销。因此，期待进一步的改进。

技术实现思路

[0003]为解决现有问题，本公开提供一种电子设备的控制方法及装置、终端和存储介质。
[0004]本公开采用以下的技术方案。
[0005]本公开的实施例提供一种电子设备的控制方法，所述电子设备包括头戴式设备，电子设备的控制方法包括：获取所述头戴式设备的运动信息；基于所述运动信息，确定所述头戴式设备的图像的帧率。
[0006]本公开的另一实施例提供了一种电子设备的控制装置，所述电子设备包括头戴式设备，所述电子设备的控制装置包括：速度获取模块，配置为获取所述头戴式设备的运动信息；帧率确定模块，配置为基于所述运动信息，确定所述头戴式设备的图像的帧率。
[0007]在一些实施例中，本公开提供一种终端，包括：至少一个存储器和至少一个处理器；其中，存储器用于存储程序代码，处理器用于调用所述存储器所存储的程序代码执行上述电子设备的控制方法。
[0008]在一些实施例中，本公开提供一种存储介质，所述存储介质用于存储程序代码，所述程序代码用于执行上述电子设备的控制方法。
[0009]本公开的实施例通过基于头戴式设备的运动信息来实时确定头戴式设备的图像的帧率，能够实现头戴式设备的图像的帧率的动态调节，在满足用户需求的基础上，降低图像编解码和传输的压力，减小系统的发热和功耗，减少传输时延。
附图说明
[0010]结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，元件和元素不一定按照比例绘制。
[0011]图1示出了头戴式设备的运动的示意图。
[0012]图2是本公开的实施例的电子设备的控制方法的流程图。
[0013]图3示出了本公开的实施例的头戴式设备的旋转方向的示意图。
[0014]图4示出了本公开的实施例的头戴式设备的移动方向的示意图。
[0015]图5是本公开的另一实施例的用于电子设备的控制装置的部分模块。
[0016]图6是本公开实施例的电子设备的结构示意图。
具体实施方式
[0017]下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
[0018]应当理解，本公开的方法实施方式中记载的各个步骤可以按和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
[0019]本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
[0020]需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
[0021]需要注意，本公开中提及的“一个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
[0022]本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
[0023]在串流场景中，服务端可以动态设置帧率，即每一秒编码、发送的帧数，比如72Hz/90Hz，帧率可以根据客户端的屏幕刷新率来设置。客户端的屏幕刷新率是固定的，比如72Hz的屏幕刷新率，即1秒刷新72次，需要大约每13ms向屏幕刷新一帧图像；90Hz的屏幕刷新率，需要大约每11ms向屏幕刷新一帧图像。目前串流应用针对图像帧率的方案是：无论在什么情况下，都尽量保证帧率的稳定，即服务端(例如，计算机端)一直按照满帧帧率来进行图像抓取、渲染、编码和发送，相应的头戴式设备(例如，VR眼镜)也会一直按照满帧帧率进行接收、解码、渲染和显示。这样确实能保证VR客户端的图像帧率稳定，保证画面一直流畅、清晰地显示，可以带给用户更好的体验。然而，一直以满帧的方式编解码，会造成GPU发热严重，给GPU高效地编解码带来压力；同时在图像数据传输过程中，会占用较多的传输带宽，造成较大的传输延时；给整个系统带来很多不必要的开销。
[0024]另外，人眼对图像帧率没那么敏感，帧率在24Hz的情况下，人眼便会感觉到图像在连续的播放；另一方面，VR头戴式设备和普通的手机等设备不一样，VR头戴式设备可以随用户的头部和身体旋转、移动，也就是进行3Dof和6Dof运动，如图1所示。
[0025]3Dof即三自由度，表示头部的旋转运动；6Dof即六自由度，在三自由度的基础上加上了身体的前后左右的运动。在按照上述进行运动过程中，人眼对图像帧率的敏感度又将下降。因此，在一些情况下，在使用VR头戴式设备的过程中，无需按照满帧来编解码、传输图像。因为在这些情况下，即使降低帧率，用户也感觉不到。这样，针对串流应用，可以减少编
解码压力，减少传输的数据量，提高系统运行的效率。
[0026]图2提供了本公开的实施例的电子设备的控制方法的流程图。电子设备包括头戴式设备，例如，VR眼镜等。本公开的电子设备的控制方法可以包括步骤S101，获取头戴式设备的运动信息。在一些实施例中，头戴式设备的运动信息可以通过设置在头戴式设备中的各种传感器来获取，例如，陀螺仪等。在一些实施例中，通过获取头戴式设备的3Dof数据和6Dof数据，可以容易地得到其运动信息。
[0027]在一些实施例中，本公开的方法还可以包括步骤S102，基于运动信息，确定头戴式设备的图像的帧率。通过基于头戴式设备的运动信息来动态地调节头戴式设备的图像的帧率，能够实现头戴式设备的图像的帧率的动态调节，在满足用户需求(在旋转或移动时对帧率并没有那么敏感)的基础上，降低图像编解码和传输的压力，减小系统的发热和功耗，减少传输时延。
[0028]在一些实施例中，运动信息包括旋转速度和/或移动速度。在一本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种电子设备的控制方法，其特征在于，所述电子设备包括头戴式设备，所述电子设备的控制方法包括：获取所述头戴式设备的运动信息；基于所述运动信息，确定所述头戴式设备的图像的帧率。2.根据权利要求1所述的电子设备的控制方法，其特征在于，所述运动信息包括旋转速度和/或移动速度。3.根据权利要求1所述的电子设备的控制方法，其特征在于，所述电子设备包括处理设备，确定所述头戴式设备的图像的帧率包括通过所述处理设备确定所述头戴式设备的图像的帧率。4.根据权利要求2所述的电子设备的控制方法，其特征在于，基于所述运动信息，确定所述头戴式设备的图像的帧率包括：如果基于所述旋转速度，将所述头戴式设备的图像的帧率确定为第一帧率；基于所述移动速度，将所述头戴式设备的图像的帧率确定为第二帧率；则将所述头戴式设备的图像的帧率确定为所述第一帧率和所述第二帧率中较小的帧率。5.根据权利要求4所述的电子设备的控制方法，其特征在于，基于所述旋转速度，将所述头戴式设备的图像的帧率确定为第一帧率包括：当所述旋转速度小于第一旋转阈值时，将所述头戴式设备的图像的帧率确定为第一预设值；当所述旋转速度大于等于所述第一旋转阈值并且小于第二旋转阈值时，将所述头戴式设备的图像的帧率确定为第二预设值；当所述旋转速度大于等于所述第二旋转阈值并且小于第三旋转阈值时，将所述头戴式设备的图像的帧率确定为第三预设值；当所述旋转速度大于等于所述第三旋转阈值时，将所述头戴式设备的图像的帧率确定为第四预设值。6.根据权利要求4所述的电子设备的控制方法，其特征在于，基于所述移动速度，将所述头戴式设备的图像的帧率确定为第二帧率包括：当所述移动速度小于第一移动阈值时，将所述头戴式设备的图像的帧率确定为第...

【专利技术属性】
技术研发人员：吴健，
申请(专利权)人：北京字跳网络技术有限公司，
类型：发明
国别省市：