本公开公开了一种视频帧处理方法、装置、电子设备及存储介质，属于视频处理技术领域。方法包括：获取视频的第一视频帧，所述第一视频帧包括待分割对象；获取所述视频的第二视频帧中第一分割图像的位置信息，所述第二视频帧为所述第一视频帧之前的视频帧，所述第一分割图像为：针对所述第二视频帧中所述待分割对象进行图像分割得到的图像；基于所述第一分割图像的位置信息，确定所述第一视频帧中的感兴趣图像区域，其中，所述感兴趣图像区域包括所述待分割对象的图像区域；将所述感兴趣图像区域的图像输入至图像分割网络中，得到所述待分割对象在所述第一视频帧中的第二分割图像。本公开至少解决视频图像分割处理过程中分割准确率较低的问题。率较低的问题。率较低的问题。
【技术实现步骤摘要】
一种视频帧处理方法、装置、电子设备及存储介质
[0001]本公开涉及视频处理
，具体涉及一种视频帧处理方法、装置、电子设备及存储介质。
技术介绍
[0002]随着电子技术的飞速发展，手机和平板电脑等电子设备已普及为人们日常生活中不可缺少的工具，人们可以通过电子设备的摄像头拍摄视频，如录像和视频通话等。其中，为满足用户的需求，电子设备可以通过图像分割技术，可以将视频中每帧视频帧的局部图像进行分割，如用户需要进行抠图或者背景替换等进行图像分割，等等。
[0003]目前，在通过图像分割技术对视频获取第一分割图像(如视频通话中的人脸图像区域等)的过程中，通常是将视频帧输入至分割网络中对视频帧进行特征提取，然后使用提取的特征对每个像素点预测类别信息，以实现对第一分割图像的分割。但是，在第一分割图像在视频帧中的占比较小的情况下，可能出现像素点的类别信息预测出错，尤其是对第一分割图像的边缘像素点的预测，从而导致分割准确率较低。
技术实现思路
[0004]本公开实施例的目的是提供一种视频帧处理方法、装置、电子设备及存储介质，以解决目前的对视频进行图像分割处理过程中存在分割准确率较低的问题。
[0005]本公开的技术方案如下：
[0006]根据本公开实施例的第一方面，提供一种视频帧处理方法，方法包括：
[0007]获取视频的第一视频帧，其中，所述第一视频帧包括待分割对象；
[0008]获取所述视频的第二视频帧中第一分割图像的位置信息，其中，所述第二视频帧为所述第一视频帧之前的视频帧，所述第一分割图像为：针对所述第二视频帧中所述待分割对象进行图像分割得到的图像；
[0009]基于所述第一分割图像的位置信息，确定所述第一视频帧中的感兴趣图像区域，其中，所述感兴趣图像区域包括所述待分割对象的图像区域；
[0010]将所述感兴趣图像区域的图像输入至图像分割网络中，得到所述待分割对象在所述第一视频帧中的第二分割图像。
[0011]在其中一个实施例中，所述基于所述第一分割图像的位置信息，确定所述第一视频帧中的感兴趣图像区域，包括：
[0012]获取所述第一视频帧中位置信息与所述第一分割图像的位置信息相同的第一图像区域；
[0013]在所述第一视频帧中对所述第一图像区域进行区域扩充处理，得到第二图像区域；
[0014]将所述第二图像区域确定为感兴趣图像区域。
[0015]在其中一个实施例中，所述在所述第一视频帧中对所述第一图像区域进行区域扩
充处理，得到第二图像区域之前，所述方法还包括：
[0016]获取所述第一分割图像的第一边界与所述第二视频帧的第二边界的比较结果，其中，所述第一边界和所述第二边界为在预设方向上的边界，所述预设方向为图像的宽度方向或者高度方向；所述比较结果用于指示所述第一分割图像的第一边界与所述第二视频帧的第二边界是否重合；
[0017]所述在所述第一视频帧中对所述第一图像区域进行区域扩充处理，包括：
[0018]在所述比较结果指示所述第一边界与所述第二边界重合的情况下，在所述预设方向上将所述第一图像区域的边界扩充至所述第一视频帧的边界；
[0019]在所述比较结果指示所述第一边界与所述第二边界不重合的情况下，在所述预设方向上按照预设比例扩充所述第一图像区域的边界。
[0020]在其中一个实施例中，所述第二视频帧为所述第一视频帧的前一帧视频帧；
[0021]所述获取所述视频的第二视频帧中第一分割图像的位置信息，包括：
[0022]获取所述第一视频帧中所述待分割对象的数量与所述第二视频帧中所述待分割对象的数量；
[0023]在所述第一视频帧中所述待分割对象的数量与所述第二视频帧中所述待分割对象的数量相同的情况下，获取所述视频的第二视频帧中第一分割图像的位置信息。
[0024]在其中一个实施例中，所述将所述感兴趣图像区域的图像输入至图像分割网络中，得到所述待分割对象在所述第一视频帧中的第二分割图像之后，所述方法还包括：
[0025]获取所述第二分割图像在所述第一视频帧中的位置信息；
[0026]将所述第一视频帧的图像更换为预设图像，生成第三视频帧；
[0027]将所述第三视频帧的第三图像区域中的图像更换为所述第二分割图像，其中，所述第三图像区域在所述第三视频帧中的第一位置信息与第二位置信息相同，所述第二位置信息为所述第二分割图像在所述第一视频帧中的位置信息。
[0028]在其中一个实施例中，所述将所述感兴趣图像区域的图像输入至图像分割网络中，得到所述待分割对象在所述第一视频帧中的第二分割图像之后，所述方法还包括：
[0029]保存所述第二分割图像在所述第一视频帧中的位置信息。
[0030]根据本公开实施例的第二方面，提供一种视频帧处理装置，包括：
[0031]视频帧获取模块，被配置为获取视频的第一视频帧，其中，所述第一视频帧包括待分割对象；
[0032]第一位置信息获取模块，被配置为获取所述视频的第二视频帧中第一分割图像的位置信息，其中，所述第二视频帧为所述第一视频帧之前的视频帧，所述第一分割图像为：针对所述第二视频帧中所述待分割对象进行图像分割得到的图像；
[0033]图像区域确定模块，被配置为基于所述第一分割图像的位置信息，确定所述第一视频帧中的感兴趣图像区域，其中，所述感兴趣图像区域包括所述待分割对象的图像区域；
[0034]分割模块，被配置为将所述感兴趣图像区域的图像输入至图像分割网络中，得到所述待分割对象在所述第一视频帧中的第二分割图像。
[0035]在其中一个实施例中，所述图像区域确定模块，包括：
[0036]图像区域获取单元，被配置为获取所述第一视频帧中位置信息与所述第一分割图像的位置信息相同的第一图像区域；
[0037]扩充单元，被配置为在所述第一视频帧中对所述第一图像区域进行区域扩充处理，得到第二图像区域；
[0038]图像区域确定单元，被配置为将所述第二图像区域确定为感兴趣图像区域。
[0039]在其中一个实施例中，所述装置还包括：
[0040]比较模块，被配置为获取所述第一分割图像的第一边界与所述第二视频帧的第二边界的比较结果，其中，所述第一边界和所述第二边界为在预设方向上的边界，所述预设方向为图像的宽度方向或者高度方向；所述比较结果用于指示所述第一分割图像的第一边界与所述第二视频帧的第二边界是否重合；
[0041]所述扩充单元，包括：
[0042]第一扩充子单元，被配置为在所述比较结果指示所述第一边界与所述第二边界重合的情况下，在所述预设方向上将所述第一图像区域的边界扩充至所述第一视频帧的边界；
[0043]第二扩充子单元，被配置为在所述比较结果指示所述第一边界与所述第二边界不重合的情况下，在所述预设方向上按照预设比例扩充所述第一图像区域的边界。
[0044]在其中一个实施例中，所述第二视频本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种视频处理方法，其特征在于，包括：获取视频的第一视频帧，其中，所述第一视频帧包括待分割对象；获取所述视频的第二视频帧中第一分割图像的位置信息，其中，所述第二视频帧为所述第一视频帧之前的视频帧，所述第一分割图像为：针对所述第二视频帧中所述待分割对象进行图像分割得到的图像；基于所述第一分割图像的位置信息，确定所述第一视频帧中的感兴趣图像区域，其中，所述感兴趣图像区域包括所述待分割对象的图像区域；将所述感兴趣图像区域的图像输入至图像分割网络中，得到所述待分割对象在所述第一视频帧中的第二分割图像。2.根据权利要求1所述的方法，其特征在于，所述基于所述第一分割图像的位置信息，确定所述第一视频帧中的感兴趣图像区域，包括：获取所述第一视频帧中位置信息与所述第一分割图像的位置信息相同的第一图像区域；在所述第一视频帧中对所述第一图像区域进行区域扩充处理，得到第二图像区域；将所述第二图像区域确定为感兴趣图像区域。3.根据权利要求2所述的方法，其特征在于，所述在所述第一视频帧中对所述第一图像区域进行区域扩充处理，得到第二图像区域之前，所述方法还包括：获取所述第一分割图像的第一边界与所述第二视频帧的第二边界的比较结果，其中，所述第一边界和所述第二边界为在预设方向上的边界，所述预设方向为图像的宽度方向或者高度方向；所述比较结果用于指示所述第一分割图像的第一边界与所述第二视频帧的第二边界是否重合；所述在所述第一视频帧中对所述第一图像区域进行区域扩充处理，包括：在所述比较结果指示所述第一边界与所述第二边界重合的情况下，在所述预设方向上将所述第一图像区域的边界扩充至所述第一视频帧的边界；在所述比较结果指示所述第一边界与所述第二边界不重合的情况下，在所述预设方向上按照预设比例扩充所述第一图像区域的边界。4.根据权利要求1所述的方法，其特征在于，所述第二视频帧为所述第一视频帧的前一帧视频帧；所述获取所述视频的第二视频帧中第一分割图像的位置信息，包括：获取所述第一视频帧中所述待分割对象的数量与所述第二视频帧中所述待分割对象的数量；在所述第一视频帧中所述待分割对象的数量与所述第二视频帧中所述待分割对象的数量相同的情况下，获取所述视频的第二视频帧中第一分割图像的位置信息。...
【专利技术属性】
技术研发人员：王学博，
申请(专利权)人：北京达佳互联信息技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。