本申请提供了一种图像去遮挡方法、装置及终端，涉及图像处理技术领域。该方法包括：对目标视频中的第n帧图像进行图像分割处理，得到第n帧图像对应的背景图以及第n帧图像对应的前景图；更新第n帧图像对应的背景图中的目标填充部分，得到第n帧图像对应的更新背景图，其中，目标填充部分为第n帧图像对应的前景图所对应的区域；对第n帧图像对应的前景图进行预处理后叠加至第n帧图像对应的更新背景图中，得到第n帧图像对应的合成去遮挡图像。本方案使用图像分割算法结合加权更新策略来实现实时图像去遮挡功能。其中，通过缓慢更新图像能有效去除目标视频中背景震荡抖动、偶发性失焦等问题，从而优化图像去遮挡效果。从而优化图像去遮挡效果。从而优化图像去遮挡效果。
【技术实现步骤摘要】
图像去遮挡方法、装置及终端
[0001]本申请涉及图像处理
，尤其涉及一种图像去遮挡方法、装置及终端。
技术介绍
[0002]图像去遮挡技术运用场景广泛，例如增强现实、场景编辑和重组等等。图像去遮挡的过程中，不仅需要将遮挡物去除，还要将去除遮挡后的图像进行恢复与重建。传统的图像去遮挡技术主要是对图像进行学习并构建模型，从而得到重建后的图像。
[0003]需要说明的是，在上述
技术介绍
部分公开的信息仅用于加强对本申请的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
技术实现思路
[0004]本申请的目的在于提供一种图像去遮挡方法、装置及终端，至少能够在一定程度上提升去遮挡图像的平滑与稳定性。
[0005]本申请的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本申请的实践而习得。
[0006]根据本申请的第一个方面，提供一种图像去遮挡方法，上述方法包括：对目标视频中的第n帧图像进行图像分割处理，得到上述第n帧图像对应的背景图以及第n帧图像对应的前景图，其中，n为大于1的正整数；更新上述第n帧图像对应的背景图中的目标填充部分，得到上述第n帧图像对应的更新背景图，其中，上述目标填充部分为上述第n帧图像对应的前景图所对应的区域；对上述第n帧图像对应的前景图进行预处理后叠加至上述第n帧图像对应的更新背景图中，得到上述第n帧图像对应的合成去遮挡图像。
[0007]在本申请一个实施例中，上述更新上述第n帧图像对应的背景图中的目标填充部分，得到上述第n帧图像对应的更新背景图的步骤包括：获取参考图像，将上述参考图像的目标填充部分填充至上述第n帧图像对应的背景图中得到上述第n帧图像对应的填充图；对上述第n帧图像对应的填充图进行加权更新得到上述第n帧图像对应的更新背景图。
[0008]在本申请一个实施例中，上述获取参考图像，包括：在上述目标视频中获取先于上述第n帧图像的图像，并将上述先于上述第n帧图像的图像所对应的更新背景图确定为上述参考图像。
[0009]在本申请一个实施例中，上述将上述参考图像的目标填充部分填充至上述第n帧图像对应的背景图中，得到上述第n帧图像对应的填充图，包括：将第n
‑
1帧图像对应的更新背景图填充至上述第n帧图像对应的背景图中的目标填充部分。
[0010]在本申请一个实施例中，上述对上述第n帧图像对应的填充图进行加权更新得到上述第n帧图像对应的更新背景图，包括：根据以下公式确定上述第n帧图像对应的更新背景图其中，为上述第n
‑
1帧图像对应的更新背景图，为上述第n帧图像对应的填充图，k0为控制更新速度的第一超参数，k0大于等于0且小于等于1。
[0011]在本申请一个实施例中，上述对上述第n帧图像对应的前景图进行预处理后叠加至上述第n帧图像对应的更新背景图中，得到上述第n帧图像对应的合成去遮挡图像，包括：将上述第n帧图像对应的前景图进行透明化处理，得到透明化的第n帧图像对应的前景图；将上述第n帧图像对应的更新背景图与上述透明化的第n帧图像对应的前景图进行叠加，得到上述第n帧图像对应的合成去遮挡图像。
[0012]在本申请一个实施例中，上述将上述第n帧图像对应的更新背景图与上述透明化的第n帧图像对应的前景图进行叠加，得到上述第n帧图像对应的合成去遮挡图像，包括：根据以下公式确定上述第n帧图像对应的合成去遮挡图像C
n
，其中，C
n
为上述第n帧图像对应的合成去遮挡图像，为上述第n帧图像对应的更新背景图，为上述第n帧图像对应的前景图，k1为控制上述第n帧图像对应的前景图透明度的第二超参数，k1大于等于0且小于等于1。
[0013]在本申请一个实施例中，在上述获取参考图像之前，上述方法还包括：提取目标区域对应的目标边界和目标边界点，根据上述目标边界和上述目标边界点计算上述目标区域对应的仿射变换矩阵，其中，上述目标区域为非矩形区域；在上述将上述第n帧图像对应的更新背景图与上述透明化的第n帧图像对应的前景图进行叠加，得到上述第n帧图像对应的合成去遮挡图像之后，上述方法还包括：根据上述目标区域对应的仿射变换矩阵，将上述第n帧图像对应的合成去遮挡图像进行仿射变换，得到上述第n帧图像对应的合成去遮挡图像中目标区域对应的矩形图。
[0014]在本申请一个实施例中，上述方法还包括：对上述目标视频的第一帧图像进行图像分割处理，得到上述第一帧图像对应的背景图；获取初始参考图像，并将上述初始参考图像填充至上述第一帧图像对应的背景图中，得到上述第一帧图像对应的填充图；根据上述第一帧图像对应的填充图，对上述初始参考图像进行更新，得到上述第一帧图像对应的更新背景图。
[0015]根据本申请的第二个方面，提供一种图像去遮挡装置，上述装置包括：图像分割模块，用于：对目标视频中的第n帧图像进行图像分割处理，得到上述第n帧图像对应的背景图以及第n帧图像对应的前景图，其中，n为大于1的正整数；更新模块，用于：更新上述第n帧图像对应的背景图中的目标填充部分，得到上述第n帧图像对应的更新背景图，其中，上述目标填充部分为上述第n帧图像对应的前景图所对应的区域；合成模块，用于：对上述第n帧图像对应的前景图进行预处理后叠加至上述第n帧图像对应的更新背景图中，得到上述第n帧图像对应的合成去遮挡图像。
[0016]根据本申请的第三个方面，提供一种终端，包括：存储器、处理器以及存储在上述存储器中并可在上述处理器上运行的计算机程序，上述处理器执行上述计算机程序时实现上述第一个方面所述的图像去遮挡方法。
[0017]本申请的实施例所提供的图像去遮挡方法、装置及终端，具备以下技术效果：
[0018]在本申请实施例提供的图像去遮挡过程中，对目标视频中的第n帧图像进行图像分割处理，得到第n帧图像对应的背景图以及第n帧图像对应的前景图，其中，n为大于1的正整数。更新第n帧图像对应的背景图中的目标填充部分，得到第n帧图像对应的更新背景图，其中，目标填充部分为第n帧图像对应的前景图所对应的区域。对第n帧图像对应的前景图
进行预处理后叠加至第n帧图像对应的更新背景图中，得到第n帧图像对应的合成去遮挡图像。本方案使用图像分割算法结合加权更新策略来实现实时图像去遮挡功能，具体地，将视频中当前帧图像进行前后景分离，再基于参考图像以及当前帧图像的背景图来去除当前帧图像中前景对象对背景内容的遮挡，并能够使得背景内容平滑稳定地更新。其中，通过上述加权更新策略能有效去除目标视频中背景震荡抖动、偶发性失焦等问题，从而优化图像去遮挡效果。
[0019]应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。
附图说明
[0020]此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种图像去遮挡方法，其特征在于，包括：对目标视频中的第n帧图像进行图像分割处理，得到所述第n帧图像对应的背景图以及第n帧图像对应的前景图，其中，n为大于1的正整数；更新所述第n帧图像对应的背景图中的目标填充部分，得到所述第n帧图像对应的更新背景图，其中，所述目标填充部分为所述第n帧图像对应的前景图所对应的区域；对所述第n帧图像对应的前景图进行预处理后叠加至所述第n帧图像对应的更新背景图中，得到所述第n帧图像对应的合成去遮挡图像。2.根据权利要求1中所述的图像去遮挡方法，其特征在于，所述更新所述第n帧图像对应的背景图中的目标填充部分，得到所述第n帧图像对应的更新背景图，包括：获取参考图像，将所述参考图像的目标填充部分填充至所述第n帧图像对应的背景图中，得到所述第n帧图像对应的填充图；对所述第n帧图像对应的填充图进行加权更新，得到所述第n帧图像对应的更新背景图。3.根据权利要求2中所述的图像去遮挡方法，其特征在于，其特征在于，所述获取参考图像，包括：在所述目标视频中获取先于所述第n帧图像的图像，并将所述先于所述第n帧图像的图像所对应的更新背景图确定为所述参考图像。4.根据权利要求2中所述的图像去遮挡方法，其特征在于，所述将所述参考图像的目标填充部分填充至所述第n帧图像对应的背景图中，得到所述第n帧图像对应的填充图，包括：将第n
‑
1帧图像对应的更新背景图填充至所述第n帧图像对应的背景图中的目标填充部分。5.根据权利要求2中所述的图像去遮挡方法，其特征在于，所述对所述第n帧图像对应的填充图进行加权更新，得到所述第n帧图像对应的更新背景图，包括：根据以下公式确定所述第n帧图像对应的更新背景图根据以下公式确定所述第n帧图像对应的更新背景图其中，为所述第n
‑
1帧图像对应的更新背景图，为所述第n帧图像对应的填充图，k0为控制更新速度的第一超参数，k0大于等于0且小于等于1。6.根据权利要求1中所述的图像去遮挡方法，其特征在于，所述对所述第n帧图像对应的前景图进行预处理后叠加至所述第n帧图像对应的更新背景图中，得到所述第n帧图像对应的合成去遮挡图像，包括：将所述第n帧图像对应的前景图进行透明化处理，得到透明化的第n帧图像对应的前景图；将所述第n帧图像对应的更新背景图与所述透明化的第n帧图像对应的前景图进行叠加，得到所述第n帧图像对应的合成去遮挡图像。7.根据权利要求6中所述的...
【专利技术属性】
技术研发人员：熊湛，龚洪波，周一帆，
申请(专利权)人：深圳海翼智新科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。