System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种手持物分割方法、装置、设备及介质制造方法及图纸_技高网

一种手持物分割方法、装置、设备及介质制造方法及图纸

技术编号:41537371 阅读:5 留言:0更新日期:2024-06-03 23:16
本申请实施例提供了一种手持物分割方法、装置、设备及介质,用以解决现有技术中对含有手持物体的图像进行手持物分割时手持物分割结果不够准确的问题。在该方法中,将包含手持物的视频帧输入到单目标跟踪模型中,确定视频帧中的单目标位置信息;将包含单目标位置信息的视频帧输入到手部检测模型中,确定视频帧的单目标位置信息中的手部检测位置信息;将单目标位置信息对应的第一子图像以及手部检测位置信息对应的第二子图像输入到手持物分割模型中,确定包含手持物的分割图像,减少了由于手部检测输出不稳定导致的没有检测到视频帧中手部、无法得到手部小图的问题,从而提高手持物检测的稳定性和准确性。

【技术实现步骤摘要】

本专利技术涉及图像处理,尤其涉及一种手持物分割方法、装置、设备及介质


技术介绍

1、目前,在基于视频流对含有手持物体的图像进行手持物分割时,首先对视频流中的视频帧进行手部检测,将检测后得到的手部小图输入到分割模型中,基于该分割模型对手部小图进行分割,得到手持物分割结果。但是由于在对视频帧进行手部检测时,可能会存在手部检测输出不稳定的问题,即视频帧中本身存在手部的图像,但是模型没有检测到,即存在无法获取到手部小图的情况,导致最终的手持物分割结果不够准确。


技术实现思路

1、本申请实施例提供了一种手持物分割方法、装置、设备及介质,用以解决现有技术中对含有手持物体的图像进行手持物分割时手持物分割结果不够准确的问题。

2、第一方面,本申请实施例提供了一种手持物分割方法,所述方法包括:

3、将包含手持物的视频中的视频帧输入到单目标跟踪模型中,基于单目标跟踪模型,确定视频帧中的单目标位置信息;

4、将包含单目标位置信息的视频帧输入到手部检测模型中,基于手部检测模型,确定视频帧的单目标位置信息中的手部检测位置信息;

5、将单目标位置信息对应的第一子图像以及手部检测位置信息对应的第二子图像输入到手持物分割模型中,确定包含手持物的分割图像。

6、第二方面,本申请实施例还提供了一种手持物分割装置,所述装置包括:

7、第一确定模块,用于将包含手持物的视频中的视频帧输入到单目标跟踪模型中,基于单目标跟踪模型,确定视频帧中的单目标位置信息;

8、第二确定模块,用于将包含单目标位置信息的视频帧输入到手部检测模型中,基于手部检测模型,确定视频帧的单目标位置信息中的手部检测位置信息;

9、分割模块,用于将单目标位置信息对应的第一子图像以及手部检测位置信息对应的第二子图像输入到手持物分割模型中,确定包含手持物的分割图像。

10、第三方面,本申请实施例还提供了一种电子设备,所述电子设备至少包括处理器和存储器,所述处理器用于执行存储器中存储的计算机程序时实现如上述任一项所述手持物分割方法的步骤。

11、第四方面,本申请实施例还提供了一种计算机可读存储介质,其存储有计算机程序,所述计算机程序被处理器执行时实现如上述任一项所述手持物分割方法的步骤。

12、在本申请实施例中,将包含手持物的视频中的视频帧输入到单目标跟踪模型中,基于单目标跟踪模型,确定视频帧中的单目标位置信息;将包含单目标位置信息的视频帧输入到手部检测模型中,基于手部检测模型,确定视频帧的单目标位置信息中的手部检测位置信息;将单目标位置信息对应的第一子图像以及手部检测位置信息对应的第二子图像输入到手持物分割模型中,确定包含手持物的分割图像。由于在本申请实施例中,在对视频帧进行手部检测之前,将视频帧输入到单目标跟踪模型,确定视频帧中的单目标位置信息,由于单目标跟踪模型中保存有手持物的注册特征,减少了由于手部检测输出不稳定导致的没有检测到视频帧中手部、无法得到手部小图的问题,从而提高了手持物检测的稳定性和准确性。

本文档来自技高网...

【技术保护点】

1.一种手持物分割方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述将所述单目标位置信息对应的第一子图像以及所述手部检测位置信息对应的第二子图像输入到手持物分割模型中,确定包含所述手持物的分割图像,包括:

3.根据权利要求1所述的方法,其特征在于,所述将所述单目标位置信息对应的第一子图像输入到手持物分割模型中之前,包括:

4.根据权利要求3所述的方法,其特征在于,若确定与该第二图像区域之间交并比大于预设阈值的第一图像区域的数量不大于所述设定数量,在将所述单目标位置信息对应的第一子图像输入到手持物分割模型中之前,所述方法还包括:

5.根据权利要求1所述的方法,其特征在于,所述将所述单目标位置信息对应的第一子图像输入到手持物分割模型之前,包括:

6.根据权利要求2所述的方法,其特征在于,所述将所述第一置信度和所述第二置信度中的最大值对应的分割子图像确定为所述分割图像之后,包括:

7.根据权利要求1所述的方法,其特征在于,所述将包含所述单目标位置信息的视频帧输入到手部检测模型之前,包括

8.一种手持物分割装置,其特征在于,所述装置包括:

9.一种电子设备,其特征在于,所述电子设备至少包括处理器和存储器,所述处理器用于执行存储器中存储的计算机程序时实现如权利要求1-7任一项所述的手持物分割方法的步骤。

10.一种计算机存储介质,其特征在于,其存储有可由电子设备执行的计算机程序,当所述程序在所述电子设备上运行时,使得所述电子设备执行权利要求1-7任一项所述的手持物分割方法的步骤。

...

【技术特征摘要】

1.一种手持物分割方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述将所述单目标位置信息对应的第一子图像以及所述手部检测位置信息对应的第二子图像输入到手持物分割模型中,确定包含所述手持物的分割图像,包括:

3.根据权利要求1所述的方法,其特征在于,所述将所述单目标位置信息对应的第一子图像输入到手持物分割模型中之前,包括:

4.根据权利要求3所述的方法,其特征在于,若确定与该第二图像区域之间交并比大于预设阈值的第一图像区域的数量不大于所述设定数量,在将所述单目标位置信息对应的第一子图像输入到手持物分割模型中之前,所述方法还包括:

5.根据权利要求1所述的方法,其特征在于,所述将所述单目标位置信息对应的第一子图像输入到手持物分割模型之...

【专利技术属性】
技术研发人员:朱益铭唐邦杰温淳潘华东殷俊叶丹
申请(专利权)人:浙江大华技术股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1