热力图生成方法和装置制造方法及图纸

技术编号:34094721 阅读:18 留言:0更新日期:2022-07-11 22:02
本发明专利技术公开了一种热力图生成方法和装置。其中,该方法包括:获取目标图像和目标图像的标注信息,其中,目标图像包含目标对象,目标对象包含至少一个关键点,标注信息包括至少一个关键点在目标图像中的位置;基于至少一个关键点的位置,确定目标对象的尺度信息;获取尺度信息对应的目标高斯核;基于目标图像、标注信息和目标高斯核,生成目标图像对应的目标热力图。本发明专利技术解决了相关技术中生成的热力图难以有效的覆盖关键点的技术问题。有效的覆盖关键点的技术问题。有效的覆盖关键点的技术问题。

【技术实现步骤摘要】
热力图生成方法和装置


[0001]本专利技术涉及热力图生成领域,具体而言,涉及一种热力图生成方法和装置。

技术介绍

[0002]在深度学习多人人体姿态估计方法中,通常采用预测人体关键点的热力图,而不是直接回归关键点的坐标。生成任务的目标真值时,通常采用统一标准差的高斯核来生成热力图,但是由于人体的尺度不一,和人体各关键点实际的区域大小不一,采用相同的标准差生成的热力图会导致覆盖的不同尺度的人体区域差异较大。
[0003]针对上述的问题,目前尚未提出有效的解决方案。

技术实现思路

[0004]本专利技术实施例提供了一种热力图生成方法和装置,以至少解决相关技术中生成的热力图难以有效的覆盖关键点的技术问题。
[0005]根据本专利技术实施例的一个方面,提供了一种热力图生成方法,包括:获取目标图像和目标图像的标注信息,其中,目标图像包含目标对象,目标对象包含至少一个关键点,标注信息包括至少一个关键点在目标图像中的位置;基于至少一个关键点的位置,确定目标对象的尺度信息;获取尺度信息对应的目标高斯核;基于目标图像、标注信息和目标高斯核,生成目标图像对应的目标热力图。
[0006]根据本专利技术实施例的另一个方面,提供了一种热力图生成方法,包括:在交互界面中显示目标图像和目标图像的标注信息,其中,目标图像包含目标对象,目标对象包含至少一个关键点,标注信息包括至少一个关键点在目标图像中的位置;响应于交互界面中检测到的操作指令,在交互界面中显示目标图像对应的目标热力图,其中,目标热力图通过目标图像、标注信息和目标高斯核生成,目标高斯核与目标对象的尺度信息相对应,尺度信息通过至少一个关键点的位置确定。
[0007]根据本专利技术实施例的另一个方面,还提供了一种热力图生成方法,包括:云服务器接收客户端上传的原始数据,其中,原始数据包括:目标图像和目标图像的标注信息,目标图像包含目标对象,目标对象包含至少一个关键点,标注信息包括至少一个关键点在目标图像中的位置;云服务器基于至少一个关键点的位置,确定目标对象的尺度信息;云服务器获取尺度信息对应的目标高斯核;云服务器基于目标图像、标注信息和目标高斯核,生成目标图像对应的目标热力图。
[0008]根据本专利技术实施例的另一个方面,还提供了一种热力图生成装置,包括:第一获取模块用于获取目标图像和目标图像的标注信息,其中,目标图像包含目标对象,目标对象包含至少一个关键点,标注信息包括至少一个关键点在目标图像中的位置;确定模块用于基于至少一个关键点的位置,确定目标对象的尺度信息;第二获取模块用于获取尺度信息对应的目标高斯核;生成模块用于基于目标图像、标注信息和目标高斯核,生成目标图像对应的目标热力图。
[0009]根据本专利技术实施例的另一方面,还提供了一种存储介质,存储介质包括存储的程序,其中,在程序运行时控制计算机可读存储介质所在设备执行上述任意一个实施例中的热力图生成方法。
[0010]根据本专利技术实施例的另一方面,还提供了一种计算机终端,包括:处理器和存储器,处理器用于运行存储器中存储的程序,其中,程序运行时执行上述任意一个实施例中的热力图生成方法。
[0011]根据本专利技术实施例的另一方面,还提供了一种热力图生成系统,包括:处理器;以及存储器,与处理器连接,用于为处理器提供处理以下处理步骤的指令:获取目标图像和目标图像的标注信息,其中,目标图像包含目标对象,目标对象包含至少一个关键点,标注信息包括至少一个关键点在目标图像中的位置;基于至少一个关键点的位置,确定目标对象的尺度信息;获取尺度信息对应的目标高斯核;基于目标图像、标注信息和目标高斯核,生成目标图像对应的目标热力图。
[0012]通过上述步骤,首先,获取目标图像和目标图像的标注信息,其中,目标图像包含目标对象,目标对象包含至少一个关键点,标注信息包括至少一个关键点在目标图像中的位置;基于至少一个关键点的位置,确定目标对象的尺度信息;获取尺度信息对应的目标高斯核;基于目标图像、标注信息和目标高斯核,生成目标图像对应的目标热力图,实现了提高热力图覆盖关键点的准确度。容易注意到的是,可以根据目标对象包含的至少一个关键点确定出在目标图像中的位置,并根据关键点的位置确定出目标对象的尺度信息,以便根据该尺度信息对应的高斯核来生成与该目标图像中目标对象对应的目标热力图,由于高斯核是根据目标对象的尺度信息灵活变化的,因此,其生成的目标图像对应的目标热力图能够根据目标对象的尺度信息更好的覆盖关键点,进而解决了相关技术中生成的热力图难以有效的覆盖关键点的技术问题。
附图说明
[0013]此处所说明的附图用来提供对本专利技术的进一步理解,构成本申请的一部分,本专利技术的示意性实施例及其说明用于解释本专利技术,并不构成对本专利技术的不当限定。在附图中:
[0014]图1是相关技术中的一种热力图示意图;
[0015]图2是相关技术中的另一种热力图示意图;
[0016]图3是根据本专利技术实施例的一种用于实现热力图生成方法的计算机终端(或移动设备)的硬件结构框图;
[0017]图4是根据本专利技术实施例的一种热力图生成方法的流程图;
[0018]图5是根据本专利技术实施例的一种热力图示意图;
[0019]图6是根据本专利技术实施例的另一种热力图示意图;
[0020]图7是根据本专利技术实施例的另一种热力图生成方法的流程图;
[0021]图8是根据本专利技术实施例的另一种热力图生成方法的流程图;
[0022]图9是根据本专利技术实施例的一种热力图生成装置的示意图;
[0023]图10是根据本专利技术实施例的另一种热力图生成装置的示意图;
[0024]图11是根据本专利技术实施例的另一种热力图生成装置的示意图;
[0025]图12是根据本专利技术实施例的一种计算机终端的结构框图。
具体实施方式
[0026]为了使本
的人员更好地理解本专利技术方案,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分的实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本专利技术保护的范围。
[0027]需要说明的是,本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0028]首先,在对本专利技术实施例进行描述的过程中出现的部分名词或术语适用于如下解释:
[0029]人体姿态估计:也称人体关键点检本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种热力图生成方法,其特征在于,包括:获取目标图像和所述目标图像的标注信息,其中,所述目标图像包含目标对象,所述目标对象包含至少一个关键点,所述标注信息包括所述至少一个关键点在所述目标图像中的位置;基于所述至少一个关键点的位置,确定所述目标对象的尺度信息;获取所述尺度信息对应的目标高斯核;基于所述目标图像、所述标注信息和目标高斯核,生成所述目标图像对应的目标热力图。2.根据权利要求1所述的方法,其特征在于,在所述目标对象包含多个关键点的情况下,基于所述至少一个关键点的位置,确定所述目标对象的尺度信息,包括:确定所述多个关键点中的目标关键点,其中,所述目标关键点之间的距离相对于所述目标图像固定不变;基于所述目标关键点的位置,确定所述目标对象的尺度信息。3.根据权利要求2所述的方法,其特征在于,在所述目标关键点为多个的情况下,基于所述目标关键点的位置,确定所述目标对象的尺度信息包括:基于多个目标关键点的位置,确定所述于多个目标关键点之间的距离;获取预设系数与所述距离的乘积,得到所述尺度信息。4.根据权利要求2所述的方法,其特征在于,在所述目标对象为人体的情况下,所述目标关键点包括:颈部和髋部。5.根据权利要求1所述的方法,其特征在于,所述目标高斯核包含每个关键点对应的子高斯核,其中,获取所述尺度信息对应的目标高斯核,包括:基于每个关键点的类型,确定所述每个关键点对应的权重系数;获取所述权重系数和所述尺度信息的乘积,得到所述每个关键点对应的子高斯核。6.根据权利要求1至5中任意一项所述的方法,其特征在于,在基于所述目标图像、所述标注信息和目标高斯核,生成所述目标图像对应的目标热力图之后,所述方法还包括:基于所述目标图像和所述目标热力图,生成训练数据;利用训练数据对目标对象检测模型进行训练,其中,所述目标对象检测模型用于对输入图像中的所述至少一个关键点进行检测,确定所述至少一个关键点在所述输入图像中的预测位置。7.根据权利要求6所述的方法...

【专利技术属性】
技术研发人员:朱建波杨凤海
申请(专利权)人:阿里巴巴中国有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1