视频通话图像处理方法、装置、设备、系统及存储介质制造方法及图纸

本公开是关于一种视频通话图像处理方法、装置、设备、系统及存储介质，该方法包括：响应于接收到应用程序发送的图像获取请求，获取当前图像视频流；基于当前视频通话场景对应的图像处理策略，对所述当前图像视频流中的图像进行处理；将处理后的所述图像返回至所述应用程序进行显示。本公开可以实现基于当前的视频通话场景准确地确定图像处理策略，提高图像处理策略的针对性，从而可以提升后续基于该图像处理策略对所述当前图像视频流中的图像进行处理的质量，满足用户对于视频通话图像质量的要求，进而提升用户的视频通话体验。进而提升用户的视频通话体验。进而提升用户的视频通话体验。

【技术实现步骤摘要】
视频通话图像处理方法、装置、设备、系统及存储介质


[0001]本公开涉及终端设备
，尤其涉及一种视频通话图像处理方法、装置、设备、系统及存储介质。

技术介绍

[0002]随着4G/5G技术的全球普及，视频通话已发展成为人与人之间重要的沟通桥梁。然而现实生活中，人们可能在户外或室内等各种环境下进行视频通话，有时候视频通话图像会偏暗，而有时候又会过亮，而在逆光时又可能发生人脸发黑的情况，无法满足用户对于视频通话图像质量的要求，影响了用户的视频通话体验。

技术实现思路

[0003]为克服相关技术中存在的问题，本公开实施例提供一种视频通话图像处理方法、装置、设备、系统及存储介质，用以解决相关技术中的缺陷。
[0004]根据本公开实施例的第一方面，提供一种视频通话图像处理方法，所述方法包括：
[0005]响应于接收到应用程序发送的图像获取请求，获取当前图像视频流；
[0006]基于当前视频通话场景对应的图像处理策略，对所述当前图像视频流中的图像进行处理；
[0007]将处理后的所述图像返回至所述应用程序进行显示。
[0008]在一实施例中，所述获取当前图像视频流，包括：
[0009]响应于确定所述应用程序满足设定条件，基于系统影像框架层获取当前图像视频流。
[0010]在一实施例中，所述应用程序满足设定条件包括：
[0011]所述应用程序在预先构建的应用程序白名单中，所述白名单用于记录支持所述图像处理策略的应用程序。
[0012]在一实施例中，所述方法还包括基于以下方式确定所述当前视频通话场景对应的图像处理策略：
[0013]获取当前图像帧信息；
[0014]基于所述当前图像帧信息确定当前视频通话场景；
[0015]基于预先构建的视频通话场景与图像处理策略之间的对应关系，确定所述当前视频通话场景对应的图像处理策略。
[0016]在一实施例中，所述当前图像帧信息包括图像传感器增益Sensor Gain、图像信号处理器增益ISP Gain、曝光率EV以及感光度ISO值中的至少一种。
[0017]在一实施例中，所述基于所述当前图像帧信息确定当前视频通话场景，包括以下至少一种：
[0018]响应于确定所述当前图像帧信息的数值满足预设的亮光场景条件，将所述当前视频通话场景确定为亮光场景；
[0019]响应于确定所述当前图像帧信息的数值满足预设的暗光场景条件，将所述当前视频通话场景确定为暗光场景。
[0020]在一实施例中，在所述当前视频通话场景为亮光场景的情况下，所述基于当前视频通话场景对应的图像处理策略，对所述当前图像视频流中的图像进行处理，包括：
[0021]将图像传感器的输出帧率由默认值缩小至第一设定值；
[0022]控制所述图像传感器基于所述第一设定值的输出帧率，在每帧传输时间内分别输出一帧长曝光图像帧和一帧短曝光图像帧，所述长曝光图像帧的曝光时长长于所述短曝光图像帧的曝光时长；
[0023]对所述长曝光图像帧和所述短曝光图像帧进行融合处理。
[0024]在一实施例中，在所述当前视频通话场景为暗光场景的情况下，所述基于当前视频通话场景对应的图像处理策略，对所述当前图像视频流中的图像进行处理，包括：
[0025]将图像传感器的输出帧率由默认值增大至第二设定值；
[0026]控制所述图像传感器基于所述第二设定值的输出帧率，在每帧传输时间内输出一帧目标曝光时长的目标曝光图像帧，所述目标曝光时长为满足当前环境亮度条件的曝光时长；
[0027]对所述目标曝光图像帧进行预设方式的处理，所述预设方式包括亮度提升以及降噪中的至少一种。
[0028]根据本公开实施例的第二方面，提供一种视频通话图像处理装置，所述装置包括：
[0029]视频流获取模块，用于响应于接收到应用程序发送的图像获取请求，获取当前图像视频流；
[0030]图像处理模块，用于基于当前视频通话场景对应的图像处理策略，对所述当前图像视频流中的图像进行处理；
[0031]图像返回模块，用于将处理后的所述图像返回至所述应用程序进行显示。
[0032]在一实施例中，所述视频流获取模块还用于响应于确定所述应用程序满足设定条件，基于系统影像框架层获取当前图像视频流。
[0033]在一实施例中，所述应用程序满足设定条件包括：
[0034]所述应用程序在预先构建的应用程序白名单中，所述白名单用于记录支持所述图像处理策略的应用程序。
[0035]在一实施例中，所述装置还包括处理策略确定模块；
[0036]所述处理策略确定模块，包括：
[0037]帧信息获取单元，用于获取当前图像帧信息；
[0038]场景确定单元，用于基于所述当前图像帧信息确定当前视频通话场景；
[0039]策略确定单元，用于基于预先构建的视频通话场景与图像处理策略之间的对应关系，确定所述当前视频通话场景对应的图像处理策略。
[0040]在一实施例中，所述当前图像帧信息包括图像传感器增益Sensor Gain、图像信号处理器增益ISP Gain、曝光率EV以及感光度ISO值中的至少一种。
[0041]在一实施例中，所述场景确定单元还用于以下至少一种：
[0042]响应于确定所述当前图像帧信息的数值满足预设的亮光场景条件，将所述当前视频通话场景确定为亮光场景；
[0043]响应于确定所述当前图像帧信息的数值满足预设的暗光场景条件，将所述当前视频通话场景确定为暗光场景。
[0044]在一实施例中，在所述当前视频通话场景为亮光场景的情况下，所述图像处理模块，包括：
[0045]帧率缩小单元，用于将图像传感器的输出帧率由默认值缩小至第一设定值；
[0046]长短帧输出单元，用于控制所述图像传感器基于所述第一设定值的输出帧率，在每帧传输时间内分别输出一帧长曝光图像帧和一帧短曝光图像帧，所述长曝光图像帧的曝光时长长于所述短曝光图像帧的曝光时长；
[0047]融合处理单元，用于对所述长曝光图像帧和所述短曝光图像帧进行融合处理。
[0048]在一实施例中，在所述当前视频通话场景为暗光场景的情况下，所述图像处理模块，包括：
[0049]帧率增大单元，用于将图像传感器的输出帧率由默认值增大至第二设定值；
[0050]目标帧输出单元，用于控制所述图像传感器基于所述第二设定值的输出帧率，在每帧传输时间内输出一帧目标曝光时长的目标曝光图像帧，所述目标曝光时长为满足当前环境亮度条件的曝光时长；
[0051]预设处理单元，用于对所述目标曝光图像帧进行预设方式的处理，所述预设方式包括亮度提升以及降噪中的至少一种。
[0052]根据本公开实施例的第三方面，提供一种电子设备，所述设备包括：
[0053]处理器以及用于存储计算机程序的存储器；
[0054]其中，所述处理器被配置为本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频通话图像处理方法，其特征在于，所述方法包括：响应于接收到应用程序发送的图像获取请求，获取当前图像视频流；基于当前视频通话场景对应的图像处理策略，对所述当前图像视频流中的图像进行处理；将处理后的所述图像返回至所述应用程序进行显示。2.根据权利要求1所述的方法，其特征在于，所述获取当前图像视频流，包括：响应于确定所述应用程序满足设定条件，基于系统影像框架层获取当前图像视频流。3.根据权利要求2所述的方法，其特征在于，所述应用程序满足设定条件包括：所述应用程序在预先构建的应用程序白名单中，所述白名单用于记录支持所述图像处理策略的应用程序。4.根据权利要求1所述的方法，其特征在于，所述方法还包括基于以下方式确定所述当前视频通话场景对应的图像处理策略：获取当前图像帧信息；基于所述当前图像帧信息确定当前视频通话场景；基于预先构建的视频通话场景与图像处理策略之间的对应关系，确定所述当前视频通话场景对应的图像处理策略。5.根据权利要求4所述的方法，其特征在于，所述当前图像帧信息包括图像传感器增益Sensor Gain、图像信号处理器增益ISP Gain、曝光率EV以及感光度ISO值中的至少一种。6.根据权利要求4所述的方法，其特征在于，所述基于所述当前图像帧信息确定当前视频通话场景，包括以下至少一种：响应于确定所述当前图像帧信息的数值满足预设的亮光场景条件，将所述当前视频通话场景确定为亮光场景；响应于确定所述当前图像帧信息的数值满足预设的暗光场景条件，将所述当前视频通话场景确定为暗光场景。7.根据权利要求1所述的方法，其特征在于，在所述当前视频通话场景为亮光场景的情况下，所述基于当前视频通话场景对应的图像处理策略，对所述当前图像视频流中的图像进行处理，包括：将图像传感器的输出帧率由默认值缩小至第一设定值；控制所述图像传感器基于所述第一设定值的输出帧率，在每帧传输时间内分别输出一帧长曝光图像帧和一帧短曝光图像帧，所述长曝光图像帧的曝光时长长于所述短曝光图像帧的曝光时长；对所述长曝光图像帧和所述短曝光图像帧进行融合处理。8.根据权利要求1所述的方法，其特征在于，在所述当前视频通话场景为暗光场景的情况下，所述基于当前视频通话场景对应的图像处理策略，对所述当前图像视频流中的图像进行处理，包括：将图像传感器的输出帧率由默认值增大至第二设定值；控制所述图像传感器基于所述第二设定值的输出帧率，在每帧传输时间内输出一帧目标曝光时长的目标曝光图像帧，所述目标曝光时长为满足当前环境亮度条件的曝光时长；对所述目标曝光图像帧进行预设方式的处理，所述预设方式包括亮度提升以及降噪中
的至少一种。9.一种视频通话图像处理装置，其特征在于，所述装置包括：视频流获取模块，用于响应于接收到应用程序发送的图像获取请求，获取当前图像视频流；图像处理模块，用于基于当前视频通话场景对应的图像处理策略，对所述当前图像视频流中的图像进行处理；图像返回模块，用于将处理后的所述图像返回至所述应用程序进行显示。10.根据权利要求9所述的装置，其特征在于，...

【专利技术属性】
技术研发人员：刘钦鸿，李新良，李国盛，冉飞，
申请(专利权)人：北京小米移动软件有限公司，
类型：发明
国别省市：