【技术实现步骤摘要】
本申请涉及图像处理领域，具体而言，涉及一种图像修复方法、人物图像修复方法、电子设备和存储介质。
技术介绍
1、为了呈现出不同用户穿戴不同服饰的视觉效果，可以采用图像生成技术，在人台图或真人图的基础上为用户生成精美的模特服饰图像，并同时实现对模特身份、特征及背景等的控制。然而，图像生成技术生成的人物存在手部结构畸形的问题，例如手指数量不正确或形状不规则，影响用户体验。
技术实现思路
1、本申请实施例提供了一种图像修复方法、人物图像修复方法、电子设备和存储介质，以至少解决相关技术中通过图像生成模型生成的人物的手部结构存在畸形，导致图像观感较差的技术问题。
2、根据本申请实施例的一个方面，提供了一种图像修复方法，包括：从待处理图像中截取得到第一区域图像，其中，待处理图像包含目标对象，第一区域图像包含目标对象上需要进行图像修复的待修复元素；基于第一区域图像对待修复元素进行三维重建，得到目标重建模型，其中，目标重建模型用于表征待修复元素在结构正确的情况下对应的三维模型；基于第一区域图像对待修复元素进行图像分割，得到分割掩码，其中，分割掩码用于表征待修复元素在第一区域图像中的像素级区域；基于分割掩码和目标重建模型对第一区域图像进行重新绘制，得到第二区域图像；对第二区域图像和待处理图像进行融合，得到目标图像。
3、根据本申请实施例的另一方面，还提供了一种人物图像修复方法，包括：响应于检测到人物图像发生变化，对人物图像进行异常检测，得到检测结果，其中，检测结果用于表征人物图
4、根据本申请实施例的另一方面，还提供了一种图像修复方法，包括：响应作用于操作界面上的输入指令，在操作界面上显示待处理图像，其中，待处理图像包含目标对象，目标对象上存在需要进行图像修复的待修复元素；响应作用于操作界面上的图像修复指令，在操作界面上显示目标图像，其中，目标图像用于表征将第二区域图像和待处理图像进行融合得到的图像，第二区域图像用于表征基于分割掩码和目标重建模型对第一区域图像进行重新绘制的图像，第一区域图像包含待修复元素，分割掩码用于表征基于第一区域图像对待修复元素进行图像分割得到的图像掩码，目标重建模型用于表征基于第一区域图像对待修复元素进行三维重建得到的，待修复元素在结构正确的情况下对应的三维模型。
5、根据本申请实施例的另一方面，还提供了一种图像修复方法，包括：通过调用第一接口获取待处理图像，其中，第一接口包括第一参数，第一参数的参数值包括待处理图像；从待处理图像中截取得到第一区域图像，其中，待处理图像包含目标对象，第一区域图像包含目标对象上需要进行图像修复的待修复元素；基于第一区域图像对待修复元素进行三维重建，得到目标重建模型，其中，目标重建模型用于表征待修复元素在结构正确的情况下对应的三维模型；基于第一区域图像对待修复元素进行图像分割，得到分割掩码，其中，分割掩码用于表征待修复元素在第一区域图像中的像素级区域；基于分割掩码和目标重建模型对第一区域图像进行重新绘制，得到第二区域图像；对第二区域图像和待处理图像进行融合，得到目标图像；通过调用第二接口输出目标图像，其中，第二接口包括第二参数，第二参数的参数值包括目标图像。
6、根据本申请实施例的另一方面，还提供了一种图像修复装置，包括：图像截取模块，用于从待处理图像中截取得到第一区域图像，其中，待处理图像包含目标对象，第一区域图像包含目标对象上需要进行图像修复的待修复元素；模型重建模块，用于基于第一区域图像对待修复元素进行三维重建，得到目标重建模型，其中，目标重建模型用于表征待修复元素在结构正确的情况下对应的三维模型；图像分割模块，用于基于第一区域图像对待修复元素进行图像分割，得到分割掩码，其中，分割掩码用于表征待修复元素在第一区域图像中的像素级区域；图像绘制模块，用于基于分割掩码和目标重建模型对第一区域图像进行重新绘制，得到第二区域图像；图像融合模块，用于对第二区域图像和待处理图像进行融合，得到目标图像。
7、根据本申请实施例的另一方面，还提供了一种人物图像修复装置，包括：图像检测模块，用于响应于检测到人物图像发生变化，对人物图像进行异常检测，得到检测结果，其中，检测结果用于表征人物图像中的不同人物部位是否正常；第一截取模块，用于响应于检测到人物部位中存在目标部位不正常，从人物图像中截取目标部位所处的第一区域图像；图像处理模块，用于基于第一区域图像对目标部位进行三维重建，得到部位重建模型，并基于目标部位对第一区域图像进行分割，得到部位分割掩码，其中，部位重建模型用于表征目标部位在结构正确的情况下对应的三维模型，部位分割掩码用于表征目标部位在第一区域图像中的位置；第一绘制模块，用于基于部位分割掩码和部位重建模型对第一区域图像进行重新绘制，得到第二区域图像；第一融合模块，用于基于部位目标重建模型和部位分割掩码对人物图像进行修复，得到目标修复图像。
8、根据本申请实施例的另一方面，还提供了一种图像修复装置，包括：第一显示模块，用于响应作用于操作界面上的输入指令，在操作界面上显示待处理图像，其中，待处理图像包含目标对象，目标对象上存在需要进行图像修复的待修复元素；第二显示模块，用于响应作用于操作界面上的图像修复指令，在操作界面上显示目标图像，其中，目标图像用于表征将第二区域图像和待处理图像进行融合得到的图像，第二区域图像用于表征基于分割掩码和目标重建模型对第一区域图像进行重新绘制的图像，第一区域图像包含待修复元素，分割掩码用于表征基于第一区域图像对待修复元素进行图像分割得到的图像掩码，目标重建模型用于表征基于第一区域图像对待修复元素进行三维重建得到的，待修复元素在结构正确的情况下对应的三维模型。
9、根据本申请实施例的另一方面，还提供了一种图像修复装置，包括：第一调用模块，用于通过调用第一接口获取待处理图像，其中，第一接口包括第一参数，第一参数的参数值包括待处理图像；第二截取模块，用于从待处理图像中截取得到第一区域图像，其中，待处理图像包含目标对象，第一区域图像包含目标对象上需要进行图像修复的待修复元素；三维重建模块，用于基于第一区域图像对待修复元素进行三维重建，得到目标重建模型，其中，目标重建模型用于表征待修复元素在结构正确的情况下对应的三维模型；第一分割模块，用于基于第一区域图像对待修复元素进行图像分割，得到分割掩码，其中，分割掩码用于表征待修复元素在第一区域图像中的像素级区域；第二绘制模块，用于基于分割掩码和目标重建模型对本文档来自技高网...
【技术保护点】
1.一种图像修复方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述基于所述分割掩码和所述目标重建模型对所述第一区域图像进行重新绘制，得到第二区域图像，包括：
3.根据权利要求2所述的方法，其特征在于，基于所述目标重建模型，获取所述待修复元素对应的深度图像和边缘图像，包括：
4.根据权利要求3所述的方法，其特征在于，将所述目标重建模型与所述待修复元素进行对齐，得到重建对齐模型，包括：
5.根据权利要求2所述的方法，其特征在于，所述图像修复模型至少包括：图像修复模块和图像扩散模块，所述基于所述深度图像、所述边缘图像和所述修复区域掩码，通过图像修复模型对所述第一区域图像进行重新绘制，得到所述第二区域图像，包括：
6.根据权利要求5所述的方法，其特征在于，所述元素特征至少包括：纹理特征、颜色特征和风格特征，所述基于所述元素特征，通过所述图像扩散模块对所述初始绘制图像进行调整，得到所述第二区域图像，包括：
7.根据权利要求1所述的方法，其特征在于，所述基于所述第一区域图像对所述待修复元素进行三维重
8.根据权利要求1所述的方法，其特征在于，所述从待处理图像中截取得到第一区域图像，包括：
9.一种人物图像修复方法，其特征在于，包括：
10.根据权利要求9所述的方法，其特征在于，所述基于所述部位分割掩码和所述部位重建模型对所述第一区域图像进行重新绘制，得到第二区域图像，包括：
11.根据权利要求10所述的方法，其特征在于，所述图像修复模型至少包括：图像修复模块和图像扩散模块，所述基于所述深度图像、所述边缘图像和所述修复区域掩码，通过图像修复模型对所述第一区域图像进行重新绘制，得到所述第二区域图像，包括：
12.一种图像修复方法，其特征在于，包括：
13.一种图像修复方法，其特征在于，包括：
14.一种电子设备，其特征在于，包括：
15.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括存储的可执行程序，其中，在所述可执行程序运行时控制所述存储介质所在设备执行权利要求1至13中任意一项所述的方法。
16.一种计算机程序产品，其特征在于，包括计算机程序，所述计算机程序在被处理器执行时实现根据权利要求1至13中任意一项所述的方法。
...【技术特征摘要】
1.一种图像修复方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述基于所述分割掩码和所述目标重建模型对所述第一区域图像进行重新绘制，得到第二区域图像，包括：
3.根据权利要求2所述的方法，其特征在于，基于所述目标重建模型，获取所述待修复元素对应的深度图像和边缘图像，包括：
4.根据权利要求3所述的方法，其特征在于，将所述目标重建模型与所述待修复元素进行对齐，得到重建对齐模型，包括：
5.根据权利要求2所述的方法，其特征在于，所述图像修复模型至少包括：图像修复模块和图像扩散模块，所述基于所述深度图像、所述边缘图像和所述修复区域掩码，通过图像修复模型对所述第一区域图像进行重新绘制，得到所述第二区域图像，包括：
6.根据权利要求5所述的方法，其特征在于，所述元素特征至少包括：纹理特征、颜色特征和风格特征，所述基于所述元素特征，通过所述图像扩散模块对所述初始绘制图像进行调整，得到所述第二区域图像，包括：
7.根据权利要求1所述的方法，其特征在于，所述基于所述第一区域图像对所述待修复元素进行三维重建，得到目标重建模型，包括：
8.根...
【专利技术属性】
技术研发人员：王成瑞，刘鹏飞，周敏，李旭斌，葛铁铮，
申请(专利权)人：淘宝中国软件有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。