【技术实现步骤摘要】
图像处理方法、装置、电子设备及存储介质
本公开涉及计算机视觉
,尤其涉及图像处理方法、装置、电子设备及存储介质。
技术介绍
图像翻译是生成式对抗网络(Generativeadversarialnetwork,GAN)在学术界和工业界应用的领域之一。图像翻译是指在不改变图像内容的前提下,将一种类型的图像转换为另一种类型的图像。例如:人脸图像与动漫图像之间的转换、人脸图像中人脸年龄的变化、人脸风格化等。在图像翻译的应用场景中,由于受到训练数据分布的影响,GAN容易发生属性耦合现象,这样会降低图像翻译的生成图像的真实性。比如,在将没有笑脸的人脸图像转换到有笑脸的人脸图像的过程中,容易引发鼻子变大的问题。为了解决上述问题,现有技术提供了对图像翻译的生成图像进行液化操作(即识别人脸关键点,并根据识别出的关键点拉伸生成图像中的待修复区域)或者融合处理(即将原始图像中与待修复区域对应的区域和生成图像中的非待修复区域融合,以调整生成图像中待修复区域表征的内容)的技术方案。但是,上述技术方案对待修复区域的识别准确性要求较高。一旦出现待修复区域的识别不够准确的情况,融合后的生成图像的真实性依旧较差。
技术实现思路
本公开提供一种图像处理方法、装置、电子设备及存储介质,以至少解决相关技术中对待调整区域的准确性要求高的问题。本公开的技术方案如下:根据本公开实施例的第一方面,提供一种图像处理方法,包括:获取生成图像,生成图像是对原始图像执行图像翻译任务后得到的图像;确定生成图像中的待修复区域, ...
【技术保护点】
1.一种图像处理方法,其特征在于,包括:/n获取生成图像,所述生成图像是对原始图像执行图像翻译任务后得到的图像;/n确定所述生成图像中的待修复区域,以及所述原始图像中的目标区域;所述目标区域在所述原始图像中的位置与所述待修复区域在所述生成图像中的位置对应;/n将随机隐变量输入到生成式对抗网络中得到中间图像;/n确定所述中间图像中第一区域与所述目标区域之间的差异为第一差异;所述第一区域在所述中间图像中的位置与所述目标区域在所述原始图像中的位置对应;/n确定所述中间图像中第二区域与非待修复区域之间的差异为第二差异;所述第二区域在所述中间图像中的位置与所述非待修复区域在所述生成图像中的位置对应;所述非待修复区域是所述生成图像中待修复区域以外的区域;/n根据所述第一差异和所述第二差异,迭代更新所述随机隐变量,得到目标隐变量;/n将所述目标隐变量输入所述生成式对抗网络,得到目标图像。/n
【技术特征摘要】
1.一种图像处理方法,其特征在于,包括:
获取生成图像,所述生成图像是对原始图像执行图像翻译任务后得到的图像;
确定所述生成图像中的待修复区域,以及所述原始图像中的目标区域;所述目标区域在所述原始图像中的位置与所述待修复区域在所述生成图像中的位置对应;
将随机隐变量输入到生成式对抗网络中得到中间图像;
确定所述中间图像中第一区域与所述目标区域之间的差异为第一差异;所述第一区域在所述中间图像中的位置与所述目标区域在所述原始图像中的位置对应;
确定所述中间图像中第二区域与非待修复区域之间的差异为第二差异;所述第二区域在所述中间图像中的位置与所述非待修复区域在所述生成图像中的位置对应;所述非待修复区域是所述生成图像中待修复区域以外的区域;
根据所述第一差异和所述第二差异,迭代更新所述随机隐变量,得到目标隐变量;
将所述目标隐变量输入所述生成式对抗网络,得到目标图像。
2.根据权利要求1所述的图像处理方法,其特征在于,所述迭代更新所述随机隐变量,得到目标隐变量,包括:
将更新的随机隐变量输入到所述生成式对抗网络中得到更新的所述中间图像;
确定更新的所述第一差异和更新的所述第二差异;
根据更新的所述第一差异和更新的所述第二差异更新所述随机隐变量;
迭代执行上述步骤直到确定更新的所述随机隐变量收敛,并将已收敛的所述随机隐变量作为所述目标隐变量。
3.根据权利要求2所述的图像处理方法,其特征在于,所述确定更新的所述随机隐变量收敛,包括:
在本轮迭代得到的随机隐变量和上轮迭代得到的随机隐变量之间的差值小于预设阈值的情况下,确定更新的所述随机隐变量收敛。
4.根据权利要求1-3中任一项所述的图像处理方法,其特征在于,所述根据所述第一差异和所述第二差异,迭代更新所述随机隐变量,包括:
根据所述第一差异确定第一损失值;
根据所述第二差异确定第二损失值;
根据所述第一损失值和所述第二损失值,更新所述随机隐变量。
5.根据权利要求4所述的图像处理方法,其特征在于,所述根据所述第一损失值和所述第二损失值,更新所述随机隐变量,包括:
确定第三损失值;所述第三损失值为所述第一损失值和所述第二损失值之和;
基于所述第三损失值,通过反向传播算法更...
【专利技术属性】
技术研发人员:郭益林,宋丛礼,万鹏飞,郑文,
申请(专利权)人:北京达佳互联信息技术有限公司,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。