数据处理和模型训练方法、装置、设备及介质制造方法及图纸

本发明专利技术公开了数据处理和模型训练方法、装置、设备及介质，用以解决现有确定客流数据的过程计算量大、效率低、占用存储空间大的问题。本发明专利技术实施例中通过联合检测模型，便能够获取该待识别图像中每个包含有人头的目标检测框的位置信息、以及每个所述目标检测框中是否包含有人脸的信息，从而实现只需输入一次待识别图像到联合检测模型中，即可提取待识别图像中每个包含有人头的目标检测框的位置信息、以及每个所述目标检测框中是否包含有人脸的信息，减少了用于多次提取目标检测框在待识别图像中的区域的特征向量所需的计算量，并提高了客流数据的确定过程效率。

【技术实现步骤摘要】
数据处理和模型训练方法、装置、设备及介质
本专利技术涉及数据分析
，尤其涉及一种数据处理和联合检测模型的训练方法、装置、设备及介质。
技术介绍
目前，可以通过分析统计的客流数据，即客流值参数以及注意力次数参数，以评估该设备在场景中招揽顾客的效果，从而为商家做出更好的商业决策提供技术支持。因此，如何统计客流数据是近几年来人们日益关注的问题。现有技术中，在确定注意力次数参数的过程中，一般先通过预先训练完成的人头检测模型，获取待识别图像中包含有人头的目标检测框的位置信息，针对每个目标检测框，通过预先训练完成的人脸分类模型，基于该目标检测框在待识别图像中的区域，识别该目标检测框中是否包含人脸的信息。然后针对每个目标检测框，确定该目标检测框的标识信息，当确定该目标检测框中包含有人脸，且该目标检测框的标识信息满足预设的更新条件时，则更新当前保存的客流数据中的注意力次数参数。对于上述确定客流数据中的注意力次数参数的方法，由于需要分别保存人头检测模型和人脸分类模型，会浪费大量的存储空间，且通过人头检测模型和人脸分类模型，在获取待识别图像中包含的每个目标检测框和识别每个目标检测框中是否包含有人脸的信息的过程中，会不可避免地重复提取目标检测框在待识别图像中的区域的特征向量，造成在确定注意力次数参数的过程中所需的计算量大，且效率低。
技术实现思路
本专利技术实施例提供了一种数据处理和联合检测模型的训练方法、装置、设备及介质，用以解决现有确定客流数据的过程计算量大、效率低、占用存储空间大的问题。本专利技术实施例提供了一种数据处理方法，方法包括：通过联合检测模型，获取待识别图像中每个包含有人头的目标检测框的位置信息、以及每个目标检测框中是否包含有人脸的信息；根据目标检测框的位置信息和/或目标检测框中是否包含有人脸的信息，确定客流数据。本专利技术实施例提供了一种联合检测模型的训练方法，方法包括：获取样本集中任一样本图像，样本图像中标记有每个样本人头框的第一位置信息、每个样本人头框对应的第一标识值以及第二标识值，其中，第一标识值用于标识样本人头框中包含有人头，第二标识值用于标识样本人头框中是否包含有人脸；通过原始联合检测模型，获取样本图像中每个包含有人头的样本检测框的第二位置信息、以及每个样本检测框中是否包含有人脸的信息；根据样本检测框的第二位置信息与对应的样本人头框的第一位置信息、样本检测框是否包含有人头的信息与对应的样本人头框对应的第一标识值、以及样本检测框是否包含有人脸的信息与对应的样本人头框对应的第二标识值，对原始联合检测模型进行训练。本专利技术实施例提供了一种数据处理装置，装置包括：获取单元，用于通过联合检测模型，获取待识别图像中每个包含有人头的目标检测框的位置信息、及每个目标检测框中是否包含有人脸的信息；处理单元，用于根据目标检测框的位置信息和/或目标检测框中是否包含有人脸的信息，确定客流数据。本专利技术实施例提供了一种联合检测模型的训练装置，装置包括：第一获取模块，用于获取样本集中任一样本图像，样本图像中标记有每个样本人头框的第一位置信息、每个样本人头框对应的第一标识值以及第二标识值，其中，第一标识值用于标识样本人头框中包含有人头，第二标识值用于标识样本人头框中是否包含有人脸；第二获取模块，用于通过原始联合检测模型，获取样本图像中每个包含有人头的样本检测框的第二位置信息、以及每个样本检测框中是否包含有人脸的信息；训练模块，用于根据样本检测框的第二位置信息与对应的样本人头框的第一位置信息、样本检测框是否包含有人头的信息与对应的样本人头框对应的第一标识值、以及样本检测框是否包含有人脸的信息与对应的样本人头框对应的第二标识值，对原始联合检测模型进行训练。本专利技术实施例还提供了一种电子设备，电子设备至少包括处理器和存储器，处理器用于执行存储器中存储的计算机程序时，实现如上述数据处理方法的步骤、或者如上述联合检测模型的训练方法的步骤。本专利技术实施例还提供了一种计算机可读存储介质，其存储有计算机程序，计算机程序被处理器执行时实现如上述数据处理方法的步骤、或者如上述联合检测模型的训练方法的步骤。本专利技术实施例通过联合检测模型，便能够获取该待识别图像中每个包含有人头的目标检测框的位置信息、以及每个目标检测框中是否包含有人脸的信息，从而实现只需输入一次待识别图像到联合检测模型中，即可提取待识别图像中每个包含有人头的目标检测框的位置信息、以及每个目标检测框中是否包含有人脸的信息，减少了用于多次提取目标检测框在待识别图像中的区域的特征向量所需的计算量，并提高了客流数据的确定过程效率。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术实施例提供的一种数据处理过程示意图；图2为本专利技术实施例提供的人脸的每个角度值的示意图；图3为本专利技术实施例提供的具体的数据处理流程示意图；图4为本专利技术实施例提供的一种联合检测模型的训练过程示意图；图5为本专利技术实施例提供的一种样本人头框的每个关键点的示意图；图6为本专利技术实施例提供的一种联合检测模型的结构示意图；图7为本专利技术实施例提供的一种数据处理装置的结构示意图；图8为本专利技术实施例提供的一种联合检测模型的训练装置的结构示意图；图9为本专利技术实施例提供的一种电子设备结构示意图；图10为本专利技术实施例提供的一种电子设备结构示意图。具体实施方式为了使本专利技术的目的、技术方案和优点更加清楚，结合附图对本专利技术作进一步地详细描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本专利技术保护的范围。实施例1：图1为本专利技术实施例提供的一种数据处理过程示意图，包括：S101：通过联合检测模型，获取待识别图像中每个包含有人头的目标检测框的位置信息、以及每个目标检测框中是否包含有人脸的信息。本专利技术实施例应用于电子设备，该电子设备可以为智能设备，例如智能机器人、智慧屏、智能监控系统等，也可以为服务器等。电子设备获取到待识别图像后，基于本专利技术实施例提供的数据处理方法，对该待识别图像进行分析，从而确定客流数据。其中，该待识别图像可以是电子设备自身采集的，也可以是其他图像采集设备发送的，在此不做限定。为了提高确定客流数据的效率，在本专利技术实施例中，预先训练有联合检测模型。当电子设备获取到待识别图像后，通过该预先训练完成的联合检测模型对该待识别图像进行处理，从而获取待识别图像中每个包含有人头的目标检测框的位置信息、以及每个目标检测框中是否包含有人本文档来自技高网...

【技术保护点】
1.一种数据处理方法，其特征在于，所述方法包括：/n通过联合检测模型，获取待识别图像中每个包含有人头的目标检测框的位置信息、以及每个所述目标检测框中是否包含有人脸的信息；/n根据所述目标检测框的位置信息和/或所述目标检测框中是否包含有人脸的信息，确定客流数据。/n

【技术特征摘要】
1.一种数据处理方法，其特征在于，所述方法包括：
通过联合检测模型，获取待识别图像中每个包含有人头的目标检测框的位置信息、以及每个所述目标检测框中是否包含有人脸的信息；
根据所述目标检测框的位置信息和/或所述目标检测框中是否包含有人脸的信息，确定客流数据。


2.根据权利要求1所述的方法，其特征在于，所述确定客流数据，包括：
确定所述目标检测框的标识信息；
若所述标识信息满足预设的第一更新条件且所述目标检测框中包含有人脸，更新当前保存的客流数据中的注意力次数参数。


3.根据权利要求2所述的方法，其特征在于，
所述通过联合检测模型，获取待识别图像中每个包含有人头的目标检测框的位置信息、以及每个所述目标检测框中是否包含有人脸的信息，还包括：通过所述联合检测模型，获取每个所述目标检测框对应的第一角度标识值，其中，所述第一角度标识值用于标识包含有人脸的目标检测框中的人脸的角度值，或者标识所述目标检测框中不包含有人脸；
确定所述标识信息满足预设的第一更新条件，包括：若所述标识信息与当前统计队列中保存的任一统计标识均不匹配，且所述标识信息对应的目标检测框对应的第一角度标识值满足预设的第二更新条件，确定所述标识信息满足所述第一更新条件。


4.根据权利要求3所述的方法，其特征在于，确定所述标识信息对应的目标检测框对应的第一角度标识值满足预设的第二更新条件，包括：
若连续设定数量的待识别图像中均存在所述标识信息对应的目标检测框，且所述连续设定数量的待识别图像中所述标识信息对应的目标检测框对应的第一角度标识值均小于预设的角度阈值，则确定所述标识信息对应的目标检测框对应的第一角度标识值满足所述第二更新条件。


5.根据权利要求1所述的方法，其特征在于，所述通过联合检测模型，获取待识别图像中每个包含有人头的目标检测框的位置信息、以及每个所述目标检测框中是否包含有人脸的信息，包括：
通过所述联合检测模型的特征提取网络层，获取所述待识别图像的特征向量；
将所述特征向量分别输入至所述联合检测模型的位置检测层、人头分类层和人脸分类层，以获取在所述待识别图像中识别到的各检测框对应的第一位置向量、各检测框对应的第一人头分类向量以及各检测框对应的第一人脸分类向量；
通过所述联合检测模型的输出层，基于所述第一位置向量、所述第一人头分类向量、以及所述第一人脸分类向量，获取待识别图像中每个包含有人头的目标检测框的位置信息、以及每个所述目标检测框中...

【专利技术属性】
技术研发人员：朱宏吉，张彦刚，
申请(专利权)人：北京猎户星空科技有限公司，
类型：发明
国别省市：北京;11