【技术实现步骤摘要】
一种交互式关键点检测方法及相关装置
[0001]本申请涉及计算机视觉
,特别涉及一种交互式关键点检测方法及相关装置。
技术介绍
[0002]多人关键点检测旨在检测图像中每个人的关键点坐标,其在研究和工业领域,尤其是在体育、娱乐和监控应用中,引起了极大的关注。在将多人关键点检测应用于不同应用场景时,需要针对各应用场景进行训练,这就需要大量具有人体关键点标签的训练数据。
[0003]目标普遍采用手动标注的方式来对训练数据进行人体关键点标签的标注,需要花费大量的时间成本和人力成本,从而影响了人体关键点标签的标注成本以及标注效率。
[0004]因而现有技术还有待改进和提高。
技术实现思路
[0005]本申请要解决的技术问题在于,针对现有技术的不足,提供一种交互式关键点检测方法及相关装置。
[0006]为了解决上述技术问题,本申请实施例第一方面提供了一种交互式关键点检测方法,所述方法包括:获取包含人的目标图像的多尺度图像特征;基于所述多尺度图像特征确定所述目标图像对应的候选人体查询和候选关键点查询序列;对所述候选关键点查询序列中的至少一个候选关键点查询进行修正操作,以得到修正关键点查询序列;将所述多尺度图像特征、修正关键点查询序列和所述候选人体查询输入第一人体
‑
关键点解码器,通过所述第一人体
‑
关键点解码器确定目标人体查询和所述目标人体查询对应的目标关键点查询序列;基于所述目标人体查询和目标关键点查询序列,确定所述目标图像中的目标人体及目标人体 ...
【技术保护点】
【技术特征摘要】
1.一种交互式关键点检测方法,其特征在于,所述方法包括:获取包含人的目标图像的多尺度图像特征;基于所述多尺度图像特征确定所述目标图像对应的候选人体查询和候选关键点查询序列;对所述候选关键点查询序列中的至少一个候选关键点查询进行修正操作,以得到修正关键点查询序列;将所述多尺度图像特征、所述修正关键点查询序列和所述候选人体查询输入第一人体
‑
关键点解码器,通过所述第一人体
‑
关键点解码器确定目标人体查询和所述目标人体查询对应的目标关键点查询序列;基于所述目标人体查询和目标关键点查询序列,确定所述目标图像中的目标人体及目标人体对应的人体关键点。2.根据权利要求1所述交互式关键点检测方法,其特征在于,所述对所述候选关键点查询序列中的至少一个候选关键点查询进行修正操作,以得到修正关键点查询序列具体包括:接收关键点查询修正指令,其中,所述关键点查询修正指令携带有关键点标识以及修正数据;根据所述关键点标识在所述候选关键点查询序列中选取待修正的候选关键点查询,并按照所述修正数据对待修正的候选关键点查询进行修正操作以得到修正关键点查询序列。3.根据权利要求2所述交互式关键点检测方法,其特征在于,所述按照所述修正数据对待修正的候选关键点查询进行修正操作以得到修正关键点查询序列具体包括:将所述修正数据添加至待修正的候选关键点查询中的候选关键点位置上,以得到修正关键点位置查询;根据预设码本对待修正的候选关键点查询中的候选关键点特征查询进行标签嵌入来初始化,以得到修正关键点特征查询;基于所述修正关键点位置查询和所述修正关键点特征查询形成修正关键点查询,并采用所述修正关键点查询替换其对应的待修正的候选关键点查询,以得到修正关键点查询序列。4.根据权利要求1
‑
3任意一项所述交互式关键点检测方法,其特征在于,所述方法应用经过训练的关键点检测模型,其中,在所述关键点检测模型的训练过程中,所述关键点检测模型对应的初始网络模型的输入项还包括误差关键点查询序列,其中,所述误差关键点查询序列为基于训练图像的人体关键点标签形成的。5.根据权利要求4所述交互式关键点检测方法,其特征在于,所述关键点检测模型的训练过程具体包括:基于训练图像的人体关键点标签形成误差关键点查询序列;基于所述误差关键点查询序列、所述训练图像、所述初始网络模型确定训练人体查询、训练关键点查询序列、第一预测关键点查询、预测人体查询和第二预测关键点查询序列;基于所述预测人体查询、训练人体查询、训练关键点查询序列、第一预测关键点查询以及第二预测关键点查询训练初始网络模型,以得到关键点检测模型。6.根据权利要求5所述交互式关键点检测方法,其特征在于,所述基于所述误差关键点
查询序列、所述训练图像、所述初始网络模型确定训练人体查询、训练关键点查询序列、第一预测关键点查询、预测人体查询和第二预测关键点查询序列具体包括:将所述训练图像和所述误差关键点查询序列输入所述初始网络模型中的检测模块,通过所述检测模块输出所述训练图像对应的多尺度训练图像特征、训练人体查询、训练关键点查询序列以及第一预测关键点查询;对所述训练关键点查询序列中...
【专利技术属性】
技术研发人员:曾爱玲,杨杰,张磊,
申请(专利权)人:粤港澳大湾区数字经济研究院福田,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。