视频图像处理方法及相关装置制造方法及图纸

本申请实施例公开了一种视频图像处理方法及相关装置，应用于终端，包括：通过眼球追踪功能获取用户针对摄像头当前取景范围内的多个物体的注视点信息，所述注视点信息用于确定所述多个物体的局部影像信息；在屏幕上显示所述多个物体的影像信息，所述影像信息包括所述多个物体的局部影像信息。本申请实施例根据用户的注视点信息确定用户在视频录制过程中注视的目标物体，进而可以灵活地根据用户注视的目标物体确定焦平面，实现视频录制过程中对图像的虚化处理。

【技术实现步骤摘要】
视频图像处理方法及相关装置
本申请涉及移动终端
，具体涉及一种视频图像处理方法及相关装置。
技术介绍
目前在视频录制过程中，常用的视频虚化技术主要是根据对焦区域的拍摄主体进行虚化，系统根据拍摄模式识别视频录制界面中的拍摄主体，或者通过拍摄用户的手动操作去识别视频录制界面的拍摄主体，然后将拍摄主体所在平面作为焦平面，基于拍摄主体的位置计算景深，得到视频录制界面的深度信息，进而根据深度信息对拍摄主体以外的部分进行虚化处理，从而可以突出拍摄主体，但是拍摄主体是由系统去识别的，并不是用户当前注视的或者是用户感兴趣的，用户在视频录制的过程中一般视线会集中在自己感兴趣的物体上。
技术实现思路
本申请实施例提供了一种视频图像处理方法及相关装置，有利于在视频录制过程中根据用户注视的目标物体实现对视频录制图像的虚化处理。第一方面，本申请实施例提供一种视频图像处理方法，其特征在于，应用于终端，所述方法包括：在屏幕上显示摄像头当前取景范围内的多个物体的影像信息；其中，所述多个物体包括通过眼球追踪功能确定的用户注视的目标物体，所述多个物体中除所述目标物体之外的每个物体的局部影像信息是根据物体自身的深度信息进行虚化处理而得到，所述物体自身的深度信息是以所述目标物体所在平面为焦平面进行计算而得到的。第二方面，本申请实施例提供一种视频图像处理装置，应用于终端，所述视频处理装置包括获取单元和显示单元，其中，所述获取单元，用于通过眼球追踪功能获取用户针对摄像头当前取景范围内的多个物体的注视点信息，所述注视点信息用于确定所述多个物体的局部影像信息；所述显示单元，用于在屏幕上显示所述多个物体的影像信息，所述影像信息包括所述多个物体的局部影像信息；其中，所述多个物体包括通过根据所述注视点信息确定的用户注视的目标物体，所述多个物体中除所述目标物体之外的每个物体的局部影像信息是根据物体自身的深度信息进行虚化处理而得到，所述物体自身的深度信息是以所述目标物体所在平面为焦平面进行计算而得到的。第三方面，本申请实施例提供一种终端，包括处理器、存储器、通信接口以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，上述程序包括用于执行本申请实施例第一方面任一方法中的步骤的指令。第四方面，本申请实施例提供了一种计算机可读存储介质，其中，上述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，上述计算机程序使得计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。第五方面，本申请实施例提供了一种计算机程序产品，其中，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。可以看出，本申请实施例中，终端先通过眼球追踪功能获取用户针对摄像头当前取景范围内的多个物体的注视点信息，所述注视点信息用于确定所述多个物体的局部影像信息，再在屏幕上显示所述多个物体的影像信息，所述影像信息包括所述多个物体的局部影像信息；其中，所述多个物体包括通过根据所述注视点信息确定的用户注视的目标物体，所述多个物体中除所述目标物体之外的每个物体的局部影像信息是根据物体自身的深度信息进行虚化处理而得到，所述物体自身的深度信息是以所述目标物体所在平面为焦平面进行计算而得到的。由于目标物体是通过眼球追踪功能确定的用户注视的物体，将目标物体作为拍摄主体，准确识别目标物体所在平面为焦平面，进而得到虚化处理过后的影像信息，极大地提高了视频虚化的准确率，同时用户在视频录制过程中可以通过眼球转动随时切换对焦物体，提升了视频录制的灵活性和用户对视频图像虚化处理的满意度。附图说明为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1A是本申请实施例提供的终端的一种结构示意图；图1B是本申请实施例提供的终端的一种软硬件系统架构的示意图；图1C是本申请实施例提供的终端的另一种结构示意图；图1D是本申请实施例提供的终端侧边框设置射灯的示意图；图2是本申请实施例提供的一种视频录制界面的示例图；图3是本申请实施例提供的一种根据用户注视点信息确定目标物体的示例图；图4是本申请实施例提供的一种根据目标物体对视频录制界面虚化处理的示例图；图5是本申请实施例提供的一种确定视频录制界面多个物体深度信息的示例图；图6是本申请实施例提供的一种对深度信息进行更新后的示例图；图7是本申请实施例提供的一种根据注视点信息更新目标物体的示例图；图8是本申请实施例提供的一种虚化处理过程的流程示意图；图9是本申请实施例提供的一种视频图像处理方法的流程示意图；图10是本申请实施例提供的另一种视频图像处理方法的流程示意图；图11是本申请实施例提供的一种视频图像处理装置的分布式功能单元框图；图12是本申请实施例提供的一种视频图像处理装置的集成式功能单元框图。具体实施方式为了使本
的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。为了更好地理解本申请实施例的方案，下面先对本申请实施例可能涉及的相关术语和概念进行介绍。(1)影像信息，屏幕上显示的由摄像头拍摄到的取景范围内的多个物体的影像，包括目标物体和每个物体的局部影像信息，影像信息中包括虚化显示后的物体和没有虚化显示的目标物体。(2)眼球追踪又称为眼球跟踪、人眼追踪/跟踪、视线追踪/跟踪、注视点追踪/跟踪等，是指基于融合图像采集、视线估计技术来确定本文档来自技高网...

【技术保护点】
1.一种视频图像处理方法，其特征在于，应用于终端，所述方法包括：/n通过眼球追踪功能获取用户针对摄像头当前取景范围内的多个物体的注视点信息，所述注视点信息用于确定所述多个物体的局部影像信息；/n在屏幕上显示所述多个物体的影像信息，所述影像信息包括所述多个物体的局部影像信息；/n其中，所述多个物体包括通过根据所述注视点信息确定的用户注视的目标物体，所述多个物体中除所述目标物体之外的每个物体的局部影像信息是根据物体自身的深度信息进行虚化处理而得到，所述物体自身的深度信息是以所述目标物体所在平面为焦平面进行计算而得到的。/n

【技术特征摘要】
1.一种视频图像处理方法，其特征在于，应用于终端，所述方法包括：
通过眼球追踪功能获取用户针对摄像头当前取景范围内的多个物体的注视点信息，所述注视点信息用于确定所述多个物体的局部影像信息；
在屏幕上显示所述多个物体的影像信息，所述影像信息包括所述多个物体的局部影像信息；
其中，所述多个物体包括通过根据所述注视点信息确定的用户注视的目标物体，所述多个物体中除所述目标物体之外的每个物体的局部影像信息是根据物体自身的深度信息进行虚化处理而得到，所述物体自身的深度信息是以所述目标物体所在平面为焦平面进行计算而得到的。


2.根据权利要求1所述的方法，其特征在于，所述注视点信息包括注视点的位置信息和注视时长信息；所述用户注视的目标物体通过如下步骤确定：
根据所述注视点信息确定用户对所述当前取景范围内的多个物体的关注度；
确定关注度大于预设关注度的物体为所述目标物体。


3.根据权利要求2所述的方法，其特征在于，所述根据所述注视点信息确定用户对所述当前取景范围内的多个物体的关注度，包括：
根据所述注视点的位置信息确定所述多个物体中每个物体对应的注视点个数；
确定所述每个物体包括的注视点个数以及每个注视点的注视时长，确定所述每个物体的注视时长；
根据所述注视时长确定用户对所述多个物体的关注度。


4.根据权利要求1所述的方法，其特征在于，所述物体自身的深度信息通过如下步骤确定：
确定除所述目标物体之外的每个物体的多个特征点；
计算所述每个物体的多个特征点和所述焦平面的距离信息，得到所述每个物体的深度信息。


5.根据权利要求4所述的方法，其特征在于，所述方法还包括：
在检测到所述目标物体和所述终端之间的距离发生变化时，根据所述变化更新所述焦平面；
根据所述更新后的焦平面对所述每个物体的深度信息进行更新。


6.一种视频图像处理方法，其特征在于，应用于终端，所述方法包括：
在检测到当前屏幕显示界面为视频录制界面时，通过眼球追踪功能从屏幕上显示的所述摄像头拍摄到的多个物体中，确定用户注释的目标物体；
以所述目标物体所在平面为焦平面，计...

【专利技术属性】
技术研发人员：方攀，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：广东;44