一种视频处理方法、装置、电子设备及存储介质制造方法及图纸

技术编号:35269541 阅读:24 留言:0更新日期:2022-10-19 10:38
本申请提供一种视频处理方法、装置、电子设备及存储介质,方法包括:将视频中的视频帧图像分别输入身体检测模型和面部检测模型,分别获得每一张视频帧图像中,待检测对象的身体检测结果和面部检测结果,面部检测结果包括面部信息;通过跟踪算法,根据视频中多个待检测对象的身体检测结果和面部检测结果,分别获得视频中待检测对象的身体轨迹和待检测对象的面部轨迹;对身体轨迹和面部轨迹进行匹配,获得待检测对象的匹配轨迹,匹配轨迹包括待检测对象的身体轨迹以及身体轨迹对应的面部信息;根据面部信息,将视频中同一待检测对象的匹配轨迹进行合并,获得视频中每一待检测对象的目标轨迹。减少误检情况,提高了从视频中获取信息的精准性。息的精准性。息的精准性。

【技术实现步骤摘要】
一种视频处理方法、装置、电子设备及存储介质


[0001]本申请涉及计算机视觉
,具体而言,涉及一种视频处理方法、装置、电子设备及存储介质。

技术介绍

[0002]深度学习已经广泛应用于视频监控行业,实时的目标追踪也成为其中一种应用。目前对视频里的检测对象进行面部识别以及跟踪处理已经较为成熟,有很多面部识别模型和身体识别模型,但是,利用现有技术难以从视频中提取更多精确的信息,并且容易出现误检现象,无法满足用户的需求。

技术实现思路

[0003]本专利技术实施例的目的在于一种视频处理方法、装置、电子设备及存储介质,通过分别对视频帧图像进行身体检测和面部检测,并对身体和面部进行跟踪测,将获得的身体轨迹和面部轨迹进行匹配和合并,获得视频中每一待检测对象的目标轨迹,从而得到待检测对象以及待检测对象面部的结构化信息,实现从视频中提取更多精确的信息,满足更多场景下对于视频中不同信息的获取。
[0004]第一方面,本申请实施例提供了一种视频处理方法,包括:将视频中的视频帧图像分别输入身体检测模型和面部检测模型,分别获得每一张视频帧图像中,待检测对象的身体检测结果和面部检测结果,面部检测结果包括面部信息;通过跟踪算法,根据视频中多个待检测对象的身体检测结果和面部检测结果,分别获得视频中待检测对象的身体轨迹和待检测对象的面部轨迹;对身体轨迹和面部轨迹进行匹配,获得待检测对象的匹配轨迹,匹配轨迹包括待检测对象的身体轨迹以及身体轨迹对应的面部信息;根据面部信息,将视频中,同一待检测对象的匹配轨迹进行合并,获得视频中每一待检测对象的目标轨迹。
[0005]在上述的实现过程中,通过分别对视频帧图像进行身体检测和面部检测,并对身体和面部进行跟踪测,将获得的身体轨迹和面部轨迹进行匹配和合并,获得视频中每一待检测对象的目标轨迹,从视频中提取每一待检测对象的目标轨迹以及面部信息,提高了从视频中获取信息的精准性。
[0006]可选地,在本申请实施例中,在分别获得视频中待检测对象的身体轨迹和待检测对象的面部轨迹之前,方法还包括:根据预设的身体检测阈值,将身体检测结果进行筛选;以及根据预设的面部检测阈值,将面部检测结果进行筛选。
[0007]在上述的实现过程中,通过身体检测阈值将身体检测结果进行筛选,以及通过面部检测阈值将面部检测结果进行筛选,获得更精确的身体检测结果和面部检测结果,减少发生误检的情况,提高信息提取的准确性。
[0008]可选地,在本申请实施例中,通过对身体轨迹和面部轨迹进行匹配,获得待检测对象的匹配轨迹,包括:判断身体轨迹,是否为含有面部的身体轨迹;若是,通过匹配算法,将含有面部的身体轨迹和面部轨迹进行匹配,获得待检测对象的匹配轨迹。
[0009]在上述的实现过程中,通过判断身体轨迹是否包含面部,将包含面部的身体轨迹和面部轨迹进行匹配,避免将缺少面部信息的身体轨迹进行匹配,提高目标轨迹的精确性。
[0010]可选地,在本申请实施例中,面部检测结果包括面部分数;在根据面部信息,将视频中,同一待检测对象的匹配轨迹进行合并,获得视频中每一待检测对象的目标轨迹之前,方法还包括:若面部分数超过预设阈值,则根据匹配轨迹中的面部,更新待检测对象的面部信息,面部信息包括面部特征值和面部图像。
[0011]在上述的实现过程中,判断面部分数是否超过预设阈值,若面部分数超过预设阈值,则可以根据面部分数更高的面部,更新待检测对象的面部信息,面部信息包括面部特征值和面部图像,获得更加精准的面部信息。
[0012]可选地,在本申请实施例中,根据面部信息,将视频中,同一待检测对象的匹配轨迹进行合并,获得视频中每一待检测对象的目标轨迹,包括:通过人脸比对算法,将多张视频帧图像中的,多个待检测对象的面部信息进行对比,判断是否为同一待检测对象的面部;若是,将同一待检测对象的匹配轨迹进行合并,获得视频中每一待检测对象的目标轨迹。
[0013]在上述的实现过程中,通过比对面部信息,判断是否为同一待检测对象的面部,将同一待检测对象的匹配轨迹进行合并,实现获得每一待检测对象的在视频中的目标轨迹。
[0014]可选地,在本申请实施例中,在获得视频中每一待检测对象的目标轨迹之后,方法还包括:获取视频中不包含面部的身体轨迹;根据目标轨迹,获得目标轨迹在视频的帧数位置和视频的面部数量;以及根据目标轨迹和不包含面部的身体轨迹,获得视频的待检测对象总数。
[0015]在上述的实现过程中,根据视频中的目标轨迹,获得目标轨迹在视频的帧数位置和视频的面部数量,以及目标轨迹和不包含面部的身体轨迹,获得视频的待检测对象总数,实现从视频中提取结构化信息,便于将信息进行存储、分析等处理。且将不包含人脸的身体轨迹进计算在总人数中,提高信息的准确性。
[0016]可选地,在本申请实施例中,方法还包括:获得多个视频中,每一待检测对象的匹配轨迹;根据匹配轨迹中的面部信息,将多个视频中,同一待检测对象的匹配轨迹进行合并,获得同一待检测对象在多个视频中的轨迹信息。
[0017]在上述的实现过程中,可以将每一段视频分别处理,获得待检测对象的匹配轨迹,根据匹配轨迹的面部信息将匹配轨迹进行合并,即可获得多个视频中每一待检测对象的轨迹信息,可以将一个长视频拆分为多段,对每一段视频分别处理再进行合并,提高处理效率。
[0018]第二方面,本申请实施例还提供了一种视频处理装置,包括:检测模块,用于将视频中的视频帧图像分别输入身体检测模型和面部检测模型,分别获得每一张视频帧图像中,待检测对象的身体检测结果和面部检测结果,面部检测结果包括面部信息;获得轨迹模块,用于通过跟踪算法,根据视频中多个待检测对象的身体检测结果和面部检测结果,分别获得视频中待检测对象的身体轨迹和待检测对象的面部轨迹;匹配模块,用于对身体轨迹和面部轨迹进行匹配,获得待检测对象的匹配轨迹,匹配轨迹包括待检测对象的身体轨迹以及身体轨迹对应的面部信息;合并模块,用于根据面部信息,将视频中,同一待检测对象的匹配轨迹进行合并,获得视频中每一待检测对象的目标轨迹。
[0019]第三方面,本申请实施例还提供了一种电子设备,包括:处理器和存储器,存储器
存储有处理器可执行的机器可读指令,机器可读指令被处理器执行时执行如上面描述的方法。
[0020]第四方面,本申请实施例还提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上面描述的方法。
[0021]采用本申请提供视频处理方法、装置、电子设备及存储介质,通过分别对视频帧图像进行身体检测和面部检测,并对身体和面部进行跟踪测,将获得的身体轨迹和面部轨迹进行匹配和合并,获得视频中每一待检测对象的目标轨迹,根据目标轨迹获得目标轨迹在视频的帧数位置和视频的面部数量,以及将不包含面部的身体轨迹计算在总人数中,提高了从视频中提取信息的准确性;还可以对多短视频分别处理,提高处理效率。
附图说明
[0022]为了更清楚地说明本申请实施例的技术方案,下本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种视频处理方法,其特征在于,包括:将视频中的视频帧图像分别输入身体检测模型和面部检测模型,分别获得每一张所述视频帧图像中,待检测对象的身体检测结果和面部检测结果,所述面部检测结果包括面部信息;通过跟踪算法,根据视频中多个待检测对象的所述身体检测结果和面部检测结果,分别获得所述视频中待检测对象的身体轨迹和待检测对象的面部轨迹;对所述身体轨迹和所述面部轨迹进行匹配,获得所述待检测对象的匹配轨迹,所述匹配轨迹包括所述待检测对象的身体轨迹以及所述身体轨迹对应的面部信息;根据所述面部信息,将所述视频中,同一待检测对象的匹配轨迹进行合并,获得所述视频中每一待检测对象的目标轨迹。2.根据权利要求1所述的方法,其特征在于,在所述分别获得所述视频中待检测对象的身体轨迹和待检测对象的面部轨迹之前,所述方法还包括:根据预设的身体检测阈值,将所述身体检测结果进行筛选;以及根据预设的面部检测阈值,将所述面部检测结果进行筛选。3.根据权利要求1所述的方法,其特征在于,所述通过对所述身体轨迹和所述面部轨迹进行匹配,获得所述待检测对象的匹配轨迹,包括:判断所述身体轨迹,是否为含有面部的身体轨迹;若是,通过匹配算法,将所述含有面部的身体轨迹和所述面部轨迹进行匹配,获得所述待检测对象的匹配轨迹。4.根据权利要求1所述的方法,其特征在于,所述面部检测结果包括面部分数;在所述根据所述面部信息,将所述视频中,同一待检测对象的匹配轨迹进行合并,获得所述视频中每一待检测对象的目标轨迹之前,所述方法还包括:若所述面部分数超过预设阈值,则根据所述匹配轨迹中的面部,更新所述待检测对象的面部信息,所述面部信息包括面部特征值和面部图像。5.根据权利要求1所述的方法,其特征在于,所述根据所述面部信息,将所述视频中,同一待检测对象的匹配轨迹进行合并,获得所述视频中每一待检测对象的目标轨迹,包括:通过人脸比对算法,将多张所述视频帧图像中的,多个待检测对象的面部信息进...

【专利技术属性】
技术研发人员:王晟宇
申请(专利权)人:平安银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1