人脸纹理图像的生成方法、装置制造方法及图纸

技术编号:36526895 阅读:17 留言:0更新日期:2023-02-01 16:06
本公开提供了一种人脸纹理图像的生成方法、装置、电子设备与可读存储介质,涉及人工智能技术领域,具体为增强现实、虚拟现实、计算机视觉、深度学习等技术领域,可应用于元宇宙、虚拟数字人等场景。其中,人脸纹理图像的生成方法包括:根据人脸图像生成初始纹理图像;在确定所述初始纹理图像中的背景色满足预设要求的情况下,确定所述初始纹理图像中与非人脸部位对应的目标区域;根据目标颜色填充所述目标区域,生成目标纹理图像。本公开能够提升目标纹理图像的生成质量。纹理图像的生成质量。纹理图像的生成质量。

【技术实现步骤摘要】
人脸纹理图像的生成方法、装置


[0001]本公开涉及人工智能
,具体为增强现实、虚拟现实、计算机视觉、深度学习等
,可应用于元宇宙、虚拟数字人等场景。提供了一种人脸纹理图像的生成方法、装置、电子设备与可读存储介质。

技术介绍

[0002]通过二维人脸图像重建三维人脸图像,是目前较为普遍的三维人脸重建方式。由于在重建三维人脸图像时,需要使用三维人脸模型与人脸纹理图像,因此人脸纹理图像的质量影响所重建的三维人脸图像的质量。

技术实现思路

[0003]根据本公开的第一方面,提供了一种人脸纹理图像的生成方法,包括:根据人脸图像生成初始纹理图像;在确定所述初始纹理图像中的背景色满足预设要求的情况下,确定所述初始纹理图像中与非人脸部位对应的目标区域;根据目标颜色填充所述目标区域,生成目标纹理图像。
[0004]根据本公开的第二方面,提供了一种人脸纹理图像的生成装置,包括:第一生成单元,用于根据人脸图像生成初始纹理图像;处理单元,用于在确定所述初始纹理图像中的背景色满足预设要求的情况下,确定所述初始纹理图像中与非人脸部位对应的目标区域;第二生成单元,用于根据目标颜色填充所述目标区域,生成目标纹理图像。
[0005]根据本公开的第三方面,提供了一种电子设备,包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如上所述的方法。
[0006]根据本公开的第四方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行如上所述的方法。
[0007]根据本公开的第五方面,提供了一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现如上所述的方法。
[0008]由以上技术方案可以看出,本公开确保了基于无背景色的初始纹理图像生成目标纹理图像,且避免了目标纹理图像中包含非人脸部位的遮挡物,从而提升了目标纹理图像的生成质量。
[0009]应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0010]附图用于更好地理解本方案,不构成对本公开的限定。其中:
[0011]图1是根据本公开第一实施例的示意图;
[0012]图2是根据本公开第二实施例的示意图;
[0013]图3是根据本公开第三实施例的示意图;
[0014]图4是用来实现本公开实施例的人脸纹理图像的生成方法的电子设备的框图。
具体实施方式
[0015]以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和机构的描述。
[0016]图1是根据本公开第一实施例的示意图。如图1所示,本实施例的人脸纹理图像的生成方法,具体包括如下步骤:
[0017]S101、根据人脸图像生成初始纹理图像;
[0018]S102、在确定所述初始纹理图像中的背景色满足预设要求的情况下,确定所述初始纹理图像中与非人脸部位对应的目标区域;
[0019]S103、根据目标颜色填充所述目标区域,生成目标纹理图像。
[0020]本实施例的人脸纹理图像的生成方法,首先根据人脸图像生成初始纹理图像,然后在确定初始纹理图像中的背景色满足预设要求的情况下,确定初始纹理图像中与非人脸部位对应的目标区域,最后根据目标颜色填充目标区域,生成目标纹理图像,本实施例确保了根据背景色满足预设要求的初始纹理图像生成目标纹理图像,且避免了目标纹理图像中包含非人脸部位的遮挡物,从而提升了目标纹理图像的生成质量。
[0021]在本实施例中,纹理图像为用于反映目标对象的脸部的纹理特征(例如五官、肤色、皱纹等)的图像。
[0022]本实施例在执行S101根据人脸图像生成初始纹理图像时,首先获取人脸图像(该人脸图像为二维人脸图像),然后采用现有的纹理图像生成方法,例如基于纹理基底的生成方法或者基于原图展开的生成方法,生成与人脸图像对应的初始纹理图像。
[0023]本实施例在执行S101获取人脸图像时,可以将输入端实时拍摄的图像作为人脸图像,也可以将输入端存储的图像作为人脸图像。
[0024]本实施例在执行S101根据人脸图像生成初始纹理图像之后,执行S102在确定初始纹理图像中的背景色满足预设要求的情况下,确定初始纹理图像中与非人脸部位对应的目标区域;本实施例中的背景色可以为黑色。
[0025]本实施例在执行S102确定初始纹理图像中的背景色满足预设要求时,可以首先获取初始纹理图像所包含像素的像素值,然后在确定像素值为0的像素的数量小于预设数量阈值的情况下(即初始纹理图像中包含少量的背景色或者不包含背景色),确定初始纹理图像中的背景色满足预设要求,否则确定初始纹理图像中的背景色不满足预设要求。
[0026]若本实施例执行S102确定初始纹理图像中的背景色不满足预设要求,表明人脸图像中目标对象的人脸不是正脸或者是非标准正脸(例如向上抬头时的人脸或者向下低头时的人脸);在人脸不是正脸或者是非标准正脸的情况下,受到人脸位姿的影响,生成的与人脸图像对应的目标纹理图像的质量较低,进而影响三维人脸的重建或者纹理图像模型的训练。
[0027]因此,本实施例根据初始纹理图像中的背景色确定人脸图像是否为标准正脸图像,能够避免受到人脸位姿的影响而错误地根据非正脸图像或者非标准正脸图像生成目标纹理图像的问题,从而提升了目标纹理图像的生成准确性。
[0028]另外,本实施例在执行S102确定初始纹理图像中的背景色是否满足预设要求时,还可以将初始纹理图像输入预先训练得到的判别模型,根据判别模型输出的判别结果,确定初始纹理图像中的背景色是否满足预设要求(例如在判别结果为1时,确定初始纹理图像中的背景色满足预设要求;在判别结果为0时,确定初始纹理图像中的背景色不满足预设要求)。
[0029]本实施例执行S102确定的初始纹理图像中与非人脸部位对应的目标区域,具体为头发、眼镜等非人脸部位的遮挡物在初始纹理图像中所处的区域。
[0030]本实施例在执行S102确定初始纹理图像中与非人脸部位对应的目标区域时,可以采用现有的人脸分割算法,将初始纹理图像中头发、眼镜等非人脸部位所处的区域作为目标区域。
[0031]另外,若本实施例执行S102确定初始纹理图像中的背景色不满足预设要求(即初始纹理图像中包含大量的背景色),可以舍弃该初始纹理图像,不再进行后续处理。
[0032]本实施例在执行S102确定初始纹理图像中与非人脸部位对应的目标区域之后,执行S10本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种人脸纹理图像的生成方法,包括:根据人脸图像生成初始纹理图像;在确定所述初始纹理图像中的背景色满足预设要求的情况下,确定所述初始纹理图像中与非人脸部位对应的目标区域;根据目标颜色填充所述目标区域,生成目标纹理图像。2.根据权利要求1所述的方法,其中,所述确定所述初始纹理图像中的背景色满足预设要求包括:获取所述初始纹理图像所包含像素的像素值;在确定像素值为0的像素的数量小于预设数量阈值的情况下,确定所述初始纹理图像中的背景色满足预设要求。3.根据权利要求1

2中任一项所述的方法,其中,所述根据目标颜色填充所述目标区域包括:确定所述初始纹理图像中与人脸部位对应的提取区域;根据所述提取区域确定目标颜色;将所述目标颜色填充到所述目标区域的上层。4.根据权利要求1

3中任一项所述的方法,其中,所述根据目标颜色填充所述目标区域,生成目标纹理图像包括:根据所述目标颜色填充所述目标区域之后,得到待优化纹理图像;通过预设优化方法对所述待优化纹理图像进行处理,生成所述目标纹理图像。5.根据权利要求1

4中任一项所述的方法,还包括,在生成所述目标纹理图像之后,根据所述目标纹理图像与三维人脸模型,生成三维人脸图像。6.根据权利要求5所述的方法,其中,所述根据所述目标纹理图像与三维人脸模型,生成三维人脸图像包括:确定所述非人脸部位的遮挡物类型;使用与所述遮挡物类型对应的建模方法,得到与所述非人脸部位对应的建模结果;根据所述建模结果、所述目标纹理图像与所述三维人脸模型,生成所述三维人脸图像。7.根据权利要求1

4中任一项所述的方法,还包括,在生成所述目标纹理图像之后,将所述人脸图像输入神经网络模型,得到所述神经网络模型输出的预测纹理图像;根据所述预测纹理图像与所述目标纹理图像得到的损失函数值,调整所述神经网络模型的参数,得到纹理图像生成模型;所述纹理图像生成模型用于生成与所输入的人脸图像对应的纹理图像。8.一种人脸纹理图像的生成装置,包括:第一生成单元,用于根据人脸图像生成初始纹理图像;处理单元,用于在确定所述初始纹理图像中的背景色满足预设要求的情况下,确定所述初始纹理图像中与非人脸部位对应的目标区域;第二生成单元,用于根据目标颜色填充所述目标区域,生成目标纹理图像。9.根据权利要求8所述的装置,其中,所述处理单元在确定所述初始纹理图像中的背景
色满足预设要求时,具体执行:获取所述初始纹...

【专利技术属性】
技术研发人员:王迪
申请(专利权)人:北京百度网讯科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1