三维人脸图像特征提取方法和系统技术方案

本发明专利技术提供了一种三维人脸图像特征提取方法，所述方法包括：人脸区域分割，得到一组人脸区域；将每个人脸区域投射到对应的区域边界球；根据所述区域边界球获取对应的人脸区域的表示，记为所述人脸区域的区域边界球描述子；对每个人脸区域计算所述人脸区域的区域边界球描述子的权重；根据所述人脸区域的表示和对应的所述权重获取三维人脸图像的特征。采用该方法，能够使得提取出的三维人脸图像的特征同时满足于人脸识别和情感分析。此外，还提供了一种三维人脸图像特征提取系统。

【技术实现步骤摘要】

本专利技术涉及人脸图像处理技术，特别是涉及一种H维人脸图像特征提取方法和系 统。
技术介绍
人脸识别和情感分析是生物特征识别系统中的两个重要分支，在远程通信、医疗 救援和智能监控中具有广泛的应用。传统技术中，H维人脸图像特征提取通常仅仅是单独 满足于人脸识别或者情感分析。例如，对于H维人脸识别，传统技术中有将一张人脸分为一 组区域，通过单独选配不同的区域，进行结果的融合来提高识别性能，也有使用人脸对称来 克服大姿态变换，提出了一种自动界标探测器来估计姿态和检测遮挡区域。但该些方法更 多的是关注人脸识别上而不是人脸表情描述上。对于人脸表情的描述，传统技术有使用人 脸动作编码系统来作为一个人脸表情表示用于人脸表情分析中，但该方法关也的是人脸表 情的描述，不能辨别不同的个体。 然而，越来越多的实践要求不再单独满足于人脸识别或情感分析，而是需要同时 区分个体和表情，即要同时满足于人脸识别和情感分析。
技术实现思路
基于此，有必要针对上述技术问题，提供一种能同时满足人脸识别和情感分析的 H维人脸图像特征提取方法和系统。 -种H维人脸图像特征提取方法，所述方法包括： 人脸区域分割，得到一组人脸区域； 将每个人脸区域投射到对应的区域边界球； 根据所述区域边界球获取对应的人脸区域的表示，记为所述人脸区域的区域边界 球描述子； 对每个人脸区域计算所述人脸区域的区域边界球描述子的权重； 根据所述人脸区域的表示和对应的所述权重获取H维人脸图像的特征。 一种H维人脸图像特征提取系统，所述系统包括： 区域分割模块，用于进行人脸区域分割，得到一组人脸区域； 投射模块，用于将每个人脸区域投射到对应的区域边界球； 人脸区域表示模块，用于根据所述区域边界球获取对应的人脸区域的表示，记为 所述人脸区域的区域边界球描述子； 权重计算模块，用于对每个人脸区域计算所述人脸区域的区域边界球描述子的权 重； 特征提取模块，用于根据所述人脸区域的表示和对应的所述权重获取H维人脸图 像的特征。 上述H维人脸图像特征提取方法和系统，通过将每个人脸区域投射到对应的区域 边界球，根据区域边界球获取对应的人脸区域的表示，记为人脸区域的区域边界球描述子， 该区域边界球描述子能有效反映不同人脸区域的表面区域形状特征，并结合每个人脸区域 的区域边界球描述子的权重进行特征提取，使得人脸区域的区域边界球描述子能够基于人 脸的辨别力和表情的描述力进行加权，从而使得提取的H维人脸图像的特征能够同时满足 于人脸识别和情感分析。【附图说明】 图1为一个实施例中H维人脸图像特征提取方法的流程示意图； 图2为一个实施例中人脸区域分割示意图； 图3为一个实施例中对原始H维人脸点云数据进行预处理的示意图； 图4为一个实施例中人脸表面的区域边界球表示的示意图； 图5为一个实施例中H维人脸图像特征提取系统的结构框图； 图6为一个实施例中区域分割模块的结构框图； 图7为另一个实施例中H维人脸图像特征提取系统的结构框图；图8为一个实施例中预处理模块的结构框图； 图9为一个实施例中归一化处理模块的结构框图； 图10为一个实施例中图像对齐模块的结构框图； 图11为一个实施例中权重计算模块的结构框图； 图12为再一个实施例中H维人脸图像特征提取系统的结构框图； 图13为一个实施例中用于H维人脸识别和表情分析的框架图； 图14为在不同测试集中的在FRGC3D人脸数据上的R0C曲线的示意图； 图15为比较十个特征的描述能力的示意图； 图16为比较不同特征下的识别率的示意图； 图17为比较特征6和特征10在不同表情中的识别率的示意图。【具体实施方式】 为了使本专利技术的目的、技术方案及优点更加清楚明白，W下结合附图及实施例，对 本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用W解释本专利技术，并 不用于限定本专利技术。 如图1所示，在一个实施例中，提供了一种H维人脸图像特征提取方法，该方法包 括： 步骤102,人脸区域分割，得到一组人脸区域。 本实施例中，可获取经过了预处理后的H维人脸图像，经过了预处理后的H维人 脸图像与参考人脸模型对齐。然后，可利用从参考人脸模型中提取的形状带，来对输入的H 维人脸图像进行区域分割。 步骤104,将每个人脸区域投射到对应的区域边界球。 本实施例中，对于H维人脸图像中的每个人脸区域，使用区域边界球描述子作为 人脸区域上的点云数据的相对位置的投影，成像为区域边界球，区域边界球的球也则为对 应的人脸区域的质也点。也就是，在步骤104中，对每个人脸区域做投影，不同的人脸区域 会成像为不同的区域边界球，并且，成像得到的区域边界球的球也为对应的人脸区域的质 也点，确定了区域边界球后，则可W使用该区域边界球上的点的值来表示人脸区域。区域边 界球描述子（regionalboundingsphericaldescriptor,简称RBSR)也就是区域边界球上 的点的值所构成的、用来表示对应人脸区域的描述因子，意思是采用区域边界球该种表示 方式来描述人脸区域。本专利技术实施例中，采用区域边界球描述子来表示人脸区域。 步骤106,根据区域边界球获取对应的人脸区域的表示，记为人脸区域的区域边界 球描述子。 人脸区域可使用人脸区域上的点的值所组成的向量进行表示，也就是人脸区域的 区域边界球描述子为人脸区域上的点的值所组成的向量，对人脸区域上的点进行定义即可 得到人脸区域的区域边界球描述子。本实施例中，可定义人脸区域上的点的值为人脸区域 对应的区域边界球上的点的值，而区域边界球上的点的值为人脸区域上的点与人脸区域的 质也点之间的距离和对应的区域边界球的半径的比值。 步骤108,对每个人脸区域计算人脸区域的区域边界球描述子的权重。 由于每个人脸区域的表面特征都不一样，因此需要根据不同的人脸区域对区域边 界球描述子进行加权。交互信息可W有效的反映人脸的辨别力和表情描述力，人脸的辨别 力可用于区分不同的人脸，即人脸识别，人脸的表情描述力则可用于区分人脸的不同表情， 即情感分析。本实施例中，可获取人脸区域的区域边界球描述子与人脸区域之间的交互信 息，W及不同人脸区域的区域边界球描述子之间的交互信息，由于该些信息能反映人脸的 辨别力和表情描述，因此，结合该些交互信息，并获取预先提供给每个人脸区域的标注信 息，能够计算得到人脸区域的区域边界球描述子的权重。 步骤110,根据人脸区域的表示和对应的区域边界球描述子的权重获取H维人脸 图像的特征。 H维人脸图像的特征是由所有人脸区域的表示组成的，由于人脸区域可使用区域 边界球描述子来表示，且不同的人脸区域的区域边界球描述子具有不同的权重，因此，本实 施例中，提取的H维人脸图像的特征可W是所有人脸区域的区域边界球描述子进行加权后 的总和。 本实施例中，通过将每个人脸区域投射到对应的区域边界球，根据区域边界球获 取对应的人脸区域的表示，记为人脸区域的区域边界球描述子，该区域边界球描述子能有 效反映不同人脸区域的表面区域形状特征，并结合每个人脸区域的区域边界球描述子的权 重进行特征提取，使得人脸区域的区域边界球描述子能够基于人脸的辨别力和表情的描述 力进行加权，从而能够同时满足于人脸识别和情感分析。 在一个实施例中，进行H维人脸区域分割后得到本文档来自技高网...

【技术保护点】
一种三维人脸图像特征提取方法，所述方法包括：人脸区域分割，得到一组人脸区域；将每个人脸区域投射到对应的区域边界球；根据所述区域边界球获取对应的人脸区域的表示，记为所述人脸区域的区域边界球描述子；对每个人脸区域计算所述人脸区域的区域边界球描述子的权重；根据所述人脸区域的表示和对应的所述权重获取三维人脸图像的特征。

【技术特征摘要】

【专利技术属性】
技术研发人员：明悦，蒋杰，刘婷婷，王巨宏，
申请(专利权)人：北京邮电大学，腾讯科技深圳有限公司，
类型：发明
国别省市：北京;11