测试视频的处理方法及装置、电子设备及可读存储介质制造方法及图纸

技术编号:33293332 阅读:29 留言:0更新日期:2022-05-01 00:17
本申请公开了一种测试视频的处理方法及装置、电子设备及可读存储介质。该方法包括:获取测试视频;对所述测试视频进行对象检测,得到所述测试视频的各个视频帧中的对象的检测信息;根据所述各个视频帧中的对象的检测信息,确定所述各个视频帧中的目标对象;根据所述各个视频帧中的目标对象的检测信息,确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域。感兴趣区域。感兴趣区域。

【技术实现步骤摘要】
测试视频的处理方法及装置、电子设备及可读存储介质


[0001]本申请涉及计算机视觉
,尤其涉及一种测试视频的处理方法及装置、电子设备及可读存储介质。

技术介绍

[0002]随着计算视觉技术的快速发展,各种具备不同功能的计算机视觉模型应运而生,例如,电子设备使用计算机视觉模型对视频进行处理,可确定视频中是否有违规事件发生。
[0003]由于在使用计算机视觉模型对视频进行处理之前,需要对计算机视觉模型进行测试,进而可依据测试结果确定计算机视觉模型的性能。因为成像设备在采集视频时的位置通常是固定的,而违规事件是在固定区域内发生的,所以如何从视频中将违规事件的发生区域(即感兴趣区域)标注出来具有非常重要的意义。

技术实现思路

[0004]本申请提供一种测试视频的处理方法及装置、电子设备及可读存储介质。
[0005]第一方面,提供了一种测试视频的处理方法,所述方法包括:
[0006]获取测试视频;
[0007]对所述测试视频进行对象检测,得到所述测试视频的各个视频帧中的对象的检测信息;
[0008]根据所述各个视频帧中的对象的检测信息,确定所述各个视频帧中的目标对象;
[0009]根据所述各个视频帧中的目标对象的检测信息,确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域。
[0010]结合本申请任一实施方式,所述检测信息包括对象类别;
[0011]所述根据所述各个视频帧中的对象的检测信息,确定所述各个视频帧中的目标对象,包括:
>[0012]根据所述各个视频帧中的对象的对象类别,确定所述各个视频帧中的对象类别属于目标类别的目标对象。
[0013]结合本申请任一实施方式,所述检测信息包括帧号和检测框坐标;
[0014]所述根据所述各个视频帧中的目标对象的检测信息,确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域,包括:
[0015]根据所述各个视频帧中的目标对象的帧号,确定至少一个待处理视频段,所述待处理视频段包括至少两张连续的视频帧,且所述待处理视频段中的各个视频帧均包含所述目标对象;
[0016]根据所述目标对象在所述待处理视频段的各个视频帧中的检测框坐标,确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域的坐标。
[0017]结合本申请任一实施方式,所述根据所述各个视频帧中的目标对象的帧号,确定至少一个待处理视频段之后,根据所述目标对象在所述待处理视频段的各个视频帧中的检
测框坐标,确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域的坐标之前,还包括:
[0018]选取所述待处理视频段中播放时间大于或等于时长阈值的待处理视频段。
[0019]结合本申请任一实施方式,还包括:
[0020]预先根据待测试模型的激活时间确定所述时长阈值。
[0021]结合本申请任一实施方式,所述根据所述目标对象在所述待处理视频段的各个视频帧中的检测框坐标,确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域的坐标,包括:
[0022]根据所述目标对象在所述待处理视频段的各个视频帧中的检测框坐标,合并所述目标对象在所述待处理视频段的各个视频帧中的检测框,得到所述测试视频中的包含所述目标对象的至少一个感兴趣区域的坐标。
[0023]结合本申请任一实施方式,所述根据所述目标对象在所述待处理视频段的各个视频帧中的检测框坐标,合并所述目标对象在所述待处理视频段的各个视频帧中的检测框,得到所述测试视频中的包含所述目标对象的至少一个感兴趣区域的坐标,包括:
[0024]按照最大坐标值由大到小的顺序对所述目标对象在所述待处理视频段的各个视频帧中的检测框进行排序,得到检测框序列;
[0025]从所述检测框序列中依次选取检测框作为第一检测框,直至选完全部检测框;
[0026]每选取一个第一检测框,依次从所述检测框序列选取序号小于所述第一检测框的第二检测框,计算所述第一检测框与所述第二检测框的交并比;
[0027]确定所述第一检测框与所述第二检测框的交并比大于或等于预设阈值的情况下,更新所述第一检测框,更新后的所述第一检测框覆盖更新前的所述第一检测框和所述第二检测框,从所述检测框序列删除所述第二检测框;
[0028]确定所述第一检测框与各个剩余的第二检测框的交并比均小于所述预设阈值的情况下,从所述检测框序列中选取下一检测框作为第一检测框;
[0029]确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域,所述感兴趣区域包括所述检测框序列中的检测框。
[0030]结合本申请任一实施方式,所述根据所述各个视频帧中的目标对象的检测信息,确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域之后,所述方法还包括:
[0031]根据所述至少一个感兴趣区域的信息,生成输入生成代码;所述感兴趣区域的信息包括感兴趣区域的坐标;所述输入生成代码用于指示待测试模型测试时需要的输入信息;
[0032]根据所述输入生成代码和所述测试视频,对待测试模型进行测试。
[0033]结合本申请任一实施方式,所述感兴趣区域的信息还包括:
[0034]所述目标对象出现在所述感兴趣区域的时间区间;
[0035]所述根据所述至少一个感兴趣区域的信息,生成输入生成代码之前,所述方法还包括:
[0036]根据所述目标对象的帧号,确定所述目标对象出现在所述感兴趣区域的时间区间。
[0037]结合本申请任一实施方式,所述根据所述至少一个感兴趣区域的信息,生成输入
生成代码,包括:
[0038]获取所述待测试模型的信息;
[0039]根据所述待测试模型的信息,确定预先配置的所述待测试模型对应的代码模板;
[0040]根据所述代码模板和所述至少一个感兴趣区域的信息,生成所述输入生成代码。
[0041]第二方面,提供了一种测试视频的处理装置,所述装置包括:
[0042]获取单元,用于获取测试视频;
[0043]第一处理单元,用于对所述测试视频进行对象检测,得到所述测试视频的各个视频帧中的对象的检测信息;
[0044]第二处理单元,用于根据所述各个视频帧中的对象的检测信息,确定所述各个视频帧中的目标对象;
[0045]第三处理单元,用于根据所述各个视频帧中的目标对象的检测信息,确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域。
[0046]结合本申请任一实施方式,所述检测信息包括对象类别;
[0047]所述第二处理单元,用于:
[0048]根据所述各个视频帧中的对象的对象类别,确定所述各个视频帧中的对象类别属于目标类别的目标对象。
[0049]结合本申请任一实施方式,所述检测信息包括帧号和检测框坐标;
[0050]所述第三处理单元,用于:
[0051]根据所述各个视频帧中的目标对象的帧号,确定至少本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种测试视频的处理方法,其特征在于,所述方法包括:获取测试视频;对所述测试视频进行对象检测,得到所述测试视频的各个视频帧中的对象的检测信息;根据所述各个视频帧中的对象的检测信息,确定所述各个视频帧中的目标对象;根据所述各个视频帧中的目标对象的检测信息,确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域。2.根据权利要求1所述的方法,其特征在于,所述检测信息包括对象类别;所述根据所述各个视频帧中的对象的检测信息,确定所述各个视频帧中的目标对象,包括:根据所述各个视频帧中的对象的对象类别,确定所述各个视频帧中的对象类别属于目标类别的目标对象。3.根据权利要求1所述的方法,其特征在于,所述检测信息包括帧号和检测框坐标;所述根据所述各个视频帧中的目标对象的检测信息,确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域,包括:根据所述各个视频帧中的目标对象的帧号,确定至少一个待处理视频段,所述待处理视频段包括至少两张连续的视频帧,且所述待处理视频段中的各个视频帧均包含所述目标对象;根据所述目标对象在所述待处理视频段的各个视频帧中的检测框坐标,确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域的坐标。4.根据权利要求3所述的方法,其特征在于,所述根据所述各个视频帧中的目标对象的帧号,确定至少一个待处理视频段之后,根据所述目标对象在所述待处理视频段的各个视频帧中的检测框坐标,确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域的坐标之前,还包括:选取所述待处理视频段中播放时间大于或等于时长阈值的待处理视频段。5.根据权利要求4所述的方法,其特征在于,还包括:预先根据待测试模型的激活时间确定所述时长阈值。6.根据权利要求3所述的方法,其特征在于,所述根据所述目标对象在所述待处理视频段的各个视频帧中的检测框坐标,确定所述测试视频中的包含所述目标对象的至少一个感兴趣区域的坐标,包括:根据所述目标对象在所述待处理视频段的各个视频帧中的检测框坐标,合并所述目标对象在所述待处理视频段的各个视频帧中的检测框,得到所述测试视频中的包含所述目标对象的至少一个感兴趣区域的坐标。7.如权利要求6所述的方法,其特征在于,所述根据所述目标对象在所述待处理视频段的各个视频帧中的检测框坐标,合并所述目标对象在所述待处理视频段的各个视频帧中的检测框,得到所述测试视频中的包含所述目标对象的至少一个感兴趣区域的坐标,包括:按照最大坐标值由大到小的顺序对所述目标对象在所述待处理视频段的各个视频帧中的检测框进行排序,得到检测框序列;从所述检测框序列中依次选取检测框作为第一检测框,直至选完全部检测框;
每选取一个第一检测框,依次从所述...

【专利技术属性】
技术研发人员:戴瑞康潘贤民
申请(专利权)人:深圳市商汤科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1