一种去遮挡物的方法及装置制造方法及图纸

本申请提供一种去遮挡物的方法及装置，通过获取待处理人脸图像以及所述待处理人脸图像的关键点坐标，所述待处理人脸图像包括有遮挡物的人脸图像和无遮挡人脸图像；将所述待处理人脸图像以及所述待处理人脸图像的关键点坐标作为输入，输入至预设GAN模型中进行去遮挡物处理，得到去除遮挡物的人脸图像；将所述去除遮挡物的人脸图像依据所述待处理人脸图像的关键点坐标生成对应的去遮挡物的图像。本申请通过依次采用人脸检测、人脸关键点检测、人脸质量评估、人脸gan算法等，通过预先拍摄无口罩的人脸，之后能够将带口罩的人像照片计算还原为无口罩人脸，以实现去除人像照片中的遮挡物的目的。挡物的目的。挡物的目的。

【技术实现步骤摘要】
一种去遮挡物的方法及装置


[0001]本申请涉及人脸识别
，特别的，尤其涉及一种去遮挡物的方法及装置。

技术介绍

[0002]受疫情影响，用户在景区游玩、车厢中，必须佩戴口罩。而在这些应用场景下，需要进行人脸识别，在此过程中，摄像头在拍摄人像照片时，需要用户摘掉口罩，从而实现人脸识别。
[0003]然而，此过程可能存在病毒传播风险，为此，如何去除人像照片中的遮挡物，已成为本领域技术人员重要的研究方向。

技术实现思路

[0004]鉴于现有技术人脸识别问题中，本申请提供了一种去遮挡物的方法及装置，用以实现去除人像照片中的遮挡物的目的。
[0005]为了实现上述目的，本申请提供了以下技术方案：
[0006]一种去遮挡物的方法，包括：
[0007]获取待处理人脸图像以及所述待处理人脸图像的关键点坐标，所述待处理人脸图像包括有遮挡物的人脸图像和无遮挡人脸图像；
[0008]将所述待处理人脸图像以及所述待处理人脸图像的关键点坐标作为输入，输入至预设GAN模型中进行去遮挡物处理，得到去除遮挡物的人脸图像；
[0009]将所述去除遮挡物的人脸图像依据所述待处理人脸图像的关键点坐标生成对应的去遮挡物的图像。
[0010]进一步的，所述获取待处理人脸图像以及所述待处理人脸图像的关键点坐标，包括：
[0011]获取待处理图片，并对所述待处理图片进行人脸检测，得到待处理人脸图片，所述待处理图片包括：有遮挡物的人脸图片和无遮挡人脸图片；
[0012]对所述待处理人脸图片进行关键点检测，确定所述待处理人脸图片中的人脸关键点位置。
[0013]进一步的，对所述待处理图片进行人脸检测，包括：
[0014]将所述待处理图片输入至人脸检测模型中，确定所述待处理图片中的两个顶点的坐标，生成检测框；
[0015]根据预设参数对所述检测框进行边框扩展，当检测到多个人脸区域时，则确定所述检测框面积最大的检测框为所述待处理图片的人脸区域，并记录所述检测框裁剪的人脸顶点在原始图片中的坐标。
[0016]进一步的，所述对所述待处理人脸图片进行关键点检测，确定所述待处理人脸图片中的人脸关键点位置，包括：
[0017]对所述待处理人脸图片进行关键点检测，并记录预设数量的关键点坐标；
[0018]依据预设数量的所述关键点坐标根据几何学计算人脸的倾斜角度，所述人脸的倾斜角度包括俯仰角、偏航角和滚动角；
[0019]当所述人脸的倾斜角度大于阈值时，则确定所述待处理人脸图片不满足去遮挡物条件，反馈无法去遮挡的说明；
[0020]当所述人脸的倾斜角度小于阈值时，则确定所述待处理人脸图片满足去遮挡物条件，根据预设数量的所述关键点坐标确定所述待处理人脸图片中的人脸关键点位置。
[0021]一种去遮挡物的装置，包括：
[0022]第一处理单元，用于获取待处理人脸图像以及所述待处理人脸图像的关键点坐标，所述待处理人脸图像包括有遮挡物的人脸图像和无遮挡人脸图像；
[0023]第二处理单元，用于将所述待处理人脸图像以及所述待处理人脸图像的关键点坐标作为输入，输入至预设GAN模型中进行去遮挡物处理，得到去除遮挡物的人脸图像；
[0024]第三处理单元，用于将所述去除遮挡物的人脸图像依据所述待处理人脸图像的关键点坐标生成对应的去遮挡物的图像。
[0025]进一步的，所述第一处理单元具体用于：
[0026]获取待处理图片，并对所述待处理图片进行人脸检测，得到待处理人脸图片，所述待处理图片包括：有遮挡物的人脸图片和无遮挡人脸图片；
[0027]对所述待处理人脸图片进行关键点检测，确定所述待处理人脸图片中的人脸关键点位置。
[0028]进一步的，对所述待处理图片进行人脸检测，包括：
[0029]将所述待处理图片输入至人脸检测模型中，确定所述待处理图片中的两个顶点的坐标，生成检测框；
[0030]根据预设参数对所述检测框进行边框扩展，当检测到多个人脸区域时，则确定所述检测框面积最大的检测框为所述待处理图片的人脸区域，并记录所述检测框裁剪的人脸顶点在原始图片中的坐标。
[0031]进一步的，所述第一处理单元具体用于：
[0032]对所述待处理人脸图片进行关键点检测，并记录预设数量的关键点坐标；
[0033]依据预设数量的所述关键点坐标根据几何学计算人脸的倾斜角度，所述人脸的倾斜角度包括俯仰角、偏航角和滚动角；
[0034]当所述人脸的倾斜角度大于阈值时，则确定所述待处理人脸图片不满足去遮挡物条件，反馈无法去遮挡的说明；
[0035]当所述人脸的倾斜角度小于阈值时，则确定所述待处理人脸图片满足去遮挡物条件，根据预设数量的所述关键点坐标确定所述待处理人脸图片中的人脸关键点位置。
[0036]一种存储介质，所述存储介质包括存储的程序，其中，在所述程序运行时控制所述存储介质所在的设备执行如上述所述的去遮挡物的方法。
[0037]一种电子设备，所述电子设备包括至少一个处理器、以及与所述处理器连接的至少一个存储器、总线；其中，所述处理器、所述存储器通过所述总线完成相互间的通信；所述处理器用于调用所述存储器中的程序指令，以执行如上述所述的去遮挡物的方法。
[0038]本申请所述的去遮挡物的方法及装置，通过获取待处理人脸图像以及所述待处理人脸图像的关键点坐标，所述待处理人脸图像包括有遮挡物的人脸图像和无遮挡人脸图
像；将所述待处理人脸图像以及所述待处理人脸图像的关键点坐标作为输入，输入至预设GAN模型中进行去遮挡物处理，得到去除遮挡物的人脸图像；将所述去除遮挡物的人脸图像依据所述待处理人脸图像的关键点坐标生成对应的去遮挡物的图像。本申请通过依次采用人脸检测、人脸关键点检测、人脸质量评估、人脸gan算法等，通过预先拍摄无口罩的人脸，之后能够将带口罩的人像照片计算还原为无口罩人脸，以实现去除人像照片中的遮挡物的目的。
附图说明
[0039]为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0040]图1为本申请实施例公开的一种去遮挡物的方法流程示意图；
[0041]图2为本申请实施例公开的人脸裁剪示意图；
[0042]图3为本申请实施例公开的一种去遮挡物的装置结构示意图；
[0043]图4为本申请实施例公开的一种电子设备的结构示意图。
具体实施方式
[0044]申请人在研究中发现，现有的技术中的带有遮挡物的人脸识别主要采用人脸伪造技术，比如人脸造假、换脸等技术，这些技术一般应用于进行人脸替换，使用目的不同，且在这些技术中，没有考虑人脸占图片的比例，一般不会使用相同的人进行人脸替换。<本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种去遮挡物的方法，其特征在于，包括：获取待处理人脸图像以及所述待处理人脸图像的关键点坐标，所述待处理人脸图像包括有遮挡物的人脸图像和无遮挡人脸图像；将所述待处理人脸图像以及所述待处理人脸图像的关键点坐标作为输入，输入至预设GAN模型中进行去遮挡物处理，得到去除遮挡物的人脸图像；将所述去除遮挡物的人脸图像依据所述待处理人脸图像的关键点坐标生成对应的去遮挡物的图像。2.根据权利要求1所述的方法，其特征在于，所述获取待处理人脸图像以及所述待处理人脸图像的关键点坐标，包括：获取待处理图片，并对所述待处理图片进行人脸检测，得到待处理人脸图片，所述待处理图片包括：有遮挡物的人脸图片和无遮挡人脸图片；对所述待处理人脸图片进行关键点检测，确定所述待处理人脸图片中的人脸关键点位置。3.根据权利要求2所述的方法，其特征在于，对所述待处理图片进行人脸检测，包括：将所述待处理图片输入至人脸检测模型中，确定所述待处理图片中的两个顶点的坐标，生成检测框；根据预设参数对所述检测框进行边框扩展，当检测到多个人脸区域时，则确定所述检测框面积最大的检测框为所述待处理图片的人脸区域，并记录所述检测框裁剪的人脸顶点在原始图片中的坐标。4.根据权利要求2所述的方法，其特征在于，所述对所述待处理人脸图片进行关键点检测，确定所述待处理人脸图片中的人脸关键点位置，包括：对所述待处理人脸图片进行关键点检测，并记录预设数量的关键点坐标；依据预设数量的所述关键点坐标根据几何学计算人脸的倾斜角度，所述人脸的倾斜角度包括俯仰角、偏航角和滚动角；当所述人脸的倾斜角度大于阈值时，则确定所述待处理人脸图片不满足去遮挡物条件，反馈无法去遮挡的说明；当所述人脸的倾斜角度小于阈值时，则确定所述待处理人脸图片满足去遮挡物条件，根据预设数量的所述关键点坐标确定所述待处理人脸图片中的人脸关键点位置。5.一种去遮挡物的装置，其特征在于，包括：第一处理单元，用于获取待处理人脸图像以及所述待处理人脸图像的关键点坐标，所述待处理人脸图像包括有遮挡物的人脸图像和无遮挡人脸图像；第二处理单元，用于将所...

【专利技术属性】
技术研发人员：苏安炀，刘星，唐大闰，
申请(专利权)人：上海明略人工智能集团有限公司，
类型：发明
国别省市：