图像帧处理方法及装置、设备、计算机可读存储介质制造方法及图纸

本申请的实施例揭示了一种图像帧处理方法及装置、设备、计算机可读存储介质。该方法包括：获取相邻图像帧中的目标对象的变化面积和变化位置，并根据变化面积和变化位置确定出相邻图像帧之间的帧间差异值；若帧间差异值大于第一预设阈值，则将帧间差异值对应的相邻图像帧确定为初选关键图像帧组合；根据初选关键图像帧组合中每一图像帧的目标框内所含有的目标对象的特征信息，计算得到初选关键图像帧组合中相邻图像帧针对目标对象的特征信息差值；若目标对象的特征信息差值大于第二预设阈值，则确定初选关键图像帧组合为关键图像帧组合。本申请通过对图像帧的两次筛选，有效去除了冗余图像帧，准确的确定出了关键图像帧组合。准确的确定出了关键图像帧组合。准确的确定出了关键图像帧组合。

【技术实现步骤摘要】
图像帧处理方法及装置、设备、计算机可读存储介质


[0001]本申请涉及计算机领域，具体涉及一种图像帧处理方法及装置、设备、计算机可读存储介质。

技术介绍

[0002]视频数据作为视觉感知的重要来源，在消息存储分析领域发挥着越来越重要的作用。视频结构化分析是针对非结构化视频数据的深入应用，使得视频数据成为可感知且可描述的智能型数据。在视频数据的处理过程中，存在有大量的冗余信息，所以需要提取关键图像帧对数据进行细致分析。
[0003]在传统的关键帧提取方法中，包括背景差分、聚类或者目标检测等，但是这些方法存在着不能有效的去除冗余图像帧，影响关键帧的提取精度，从而无法得到目标对象关键帧的相关信息。
[0004]因此，亟需一种图像帧的处理方法，快速有效的去除冗余图像帧，提取出准确的关键图像帧。

技术实现思路

[0005]为解决上述技术问题，本申请的实施例分别提供了一种图像帧处理方法及装置、电子设备、计算机可读存储介质，能够有效去除冗余图像帧。
[0006]本申请的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本申请的实践而习得。
[0007]根据本申请实施例的一个方面，提供了一种图像帧处理方法，包括：获取相邻图像帧中的目标对象的变化面积和变化位置，并根据所述变化面积和变化位置确定出所述相邻图像帧之间的帧间差异值；若所述帧间差异值大于第一预设阈值，则将所述帧间差异值对应的相邻图像帧确定为初选关键图像帧组合；根据所述初选关键图像帧组合中每一图像帧的目标框内所含有的所述目标对象的特征信息，计算得到所述初选关键图像帧组合中相邻图像帧针对所述目标对象的特征信息差值；若所述目标对象的特征信息差值大于第二预设阈值，则确定所述初选关键图像帧组合为关键图像帧组合。
[0008]根据本申请实施例的一个方面，提供了一种图像帧处理装置，包括：
[0009]获取模块，配置为获取相邻图像帧中的目标对象的变化面积和变化位置，并根据所述变化面积和变化位置确定出所述相邻图像帧之间的帧间差异值；
[0010]初筛模块，配置为若所述帧间差异值大于第一预设阈值，则将所述帧间差异值对应的相邻图像帧确定为初选关键图像帧组合；
[0011]计算模块，配置为根据所述初选关键图像帧组合中每一图像帧的目标框内所含有的所述目标对象的特征信息，计算得到所述初选关键图像帧组合中相邻图像帧针对所述目标对象的特征信息差值；
[0012]输出模块，配置为若所述目标对象的特征信息差值大于第二预设阈值，则确定所
述初选关键图像帧组合为关键图像帧组合。
[0013]在另一示例性实施例中，所述计算模块，具体配置为分别获取所述第一图像帧的目标框内对应的所述目标对象的第一特征信息和所述第二图像帧的目标框内对应的所述目标对象的第二特征信息；根据所述第一特征信息和所述第二特征信息计算得到所述第一图像帧和所述第二图像帧针对所述目标对象的特征信息差值。
[0014]在另一实施例中，所述计算模块，包括：
[0015]特征信息获取单元，配置为获取所述第一图像帧的目标框内对应的所述目标对象的第一尺寸信息和第一数量信息，以及获取所述第二图像帧的目标框内对应的所述目标对象的第二尺寸信息和第二数量信息；
[0016]特征信息差计算单元，配置为根据所述目标对象的第一尺寸信息和第一数量信息确定出所述目标对象与所述第一图像帧的第一面积之比，以及根据所述目标对象的第二尺寸信息和第二数量信息确定出所述目标对象与所述第二图像帧的第二面积之比；将所述第一面积之比与所述第二面积之比作差，得到所述初选关键图像帧组合中相邻图像帧针对所述目标对象的特征信息差值。
[0017]在另一实施例中，所述获取模块，具体配置为获取相邻图像帧中目标对象的第一面积和第二面积，根据所述第一面积和所述第二面积计算得到所述目标对象的变化面积；以及获取所述相邻图像帧中目标对象的中心点的第一位置和第二位置，根据所述第一位置和所述第二位置计算得到所述目标对象的变化位置；并根据所述变化面积和变化位置确定出所述相邻图像帧之间的帧间差异值。
[0018]在另一实施例中，所述获取模块，具体配置为获取相邻图像帧中的目标对象的变化面积和变化位置，并根据所述变化面积和变化位置确定出所述相邻图像帧之间的帧间特征向量；对所述帧间特征向量进行加权，得到所述相邻图像帧之间的帧间差异值。
[0019]在另一实施例中，所述图像帧处理装置，还包括：
[0020]目标框定位模块，配置为获取所述初选关键图像帧组合中每一图像帧中多个边界框的坐标和所述多个边界框的坐标对应的分值；将所述多个边界框的坐标对应的分值作为权值，并根据所述权值对所述多个边界框的坐标进行融合，得到所述初选关键图像帧组合中每一图像帧的目标框对应的坐标。
[0021]在另一实施例中，所述图像帧处理装置，还包括：
[0022]第一预设阈值确定模块，配置为获取所有相邻图像帧之间的帧间差异值；将所述所有相邻图像帧之间的帧间差异值通过自适应阈值算法计算，得到所述第一预设阈值。
[0023]根据本申请实施例的一个方面，提供了一种电子设备，包括：控制器；存储器，用于存储一个或多个程序，当所述一个或多个程序被所述控制器执行时，以执行上述的方法。
[0024]根据本申请实施例的一个方面，还提供了一种计算机可读存储介质，其上存储有计算机可读指令，当所述计算机可读指令被计算机的处理器执行时，使计算机执行上述的方法。
[0025]根据本申请实施例的一个方面，还提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述的方法。
[0026]在本申请的实施例所提供的技术方案中，先将帧间差异值大于第一预设阈值的相邻图像帧作为初选关键图像帧组合，再根据初选关键图像帧组合中相邻图像帧针对所述目标对象的特征信息差值与第二预设阈值进行比较，若大于第二预设阈值，则确定初选关键图像帧组合为关键图像帧组合。通过对图像帧的两次筛选，第一次快速初筛掉多余图像帧，第二次根据目标对象的特征信息差值进行细致筛选，有效去除了冗余图像帧，准确的确定出了关键图像帧组合。
[0027]应理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。
附图说明
[0028]此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术者来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
[0029]图1是本申请涉及的一种实施环境的示意图；
[0030]图2是本申请一示例性实施例示出的一种图像帧处理方法的流程图；
[0031]图3是基于图2本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像帧处理方法，其特征在于，所述方法包括：获取相邻图像帧中的目标对象的变化面积和变化位置，并根据所述变化面积和变化位置确定出所述相邻图像帧之间的帧间差异值；若所述帧间差异值大于第一预设阈值，则将所述帧间差异值对应的相邻图像帧确定为初选关键图像帧组合；根据所述初选关键图像帧组合中每一图像帧的目标框内所含有的所述目标对象的特征信息，计算得到所述初选关键图像帧组合中相邻图像帧针对所述目标对象的特征信息差值；若所述目标对象的特征信息差值大于第二预设阈值，则确定所述初选关键图像帧组合为关键图像帧组合。2.根据权利要求1所述的方法，其特征在于，所述初选关键图像帧组合包括第一图像帧和第二图像帧；所述根据所述初选关键图像帧组合中每一图像帧的目标框内所含有的所述目标对象的特征信息，计算得到所述初选关键图像帧组合中相邻图像帧针对所述目标对象的特征信息差值，包括：分别获取所述第一图像帧的目标框内对应的所述目标对象的第一特征信息和所述第二图像帧的目标框内对应的所述目标对象的第二特征信息；根据所述第一特征信息和所述第二特征信息计算得到所述第一图像帧和所述第二图像帧针对所述目标对象的特征信息差值。3.根据权利要求2所述的方法，其特征在于，所述分别获取所述第一图像帧的目标框内对应的所述目标对象的第一特征信息和所述第二图像帧的目标框内对应的所述目标对象的第二特征信息，包括：获取所述第一图像帧的目标框内对应的所述目标对象的第一尺寸信息和第一数量信息，以及获取所述第二图像帧的目标框内对应的所述目标对象的第二尺寸信息和第二数量信息；所述根据所述第一特征信息和第二特征信息计算得到所述第一图像帧和所述第二图像帧针对所述目标对象的特征信息差值，包括：根据所述目标对象的第一尺寸信息和第一数量信息确定出所述目标对象与所述第一图像帧的第一面积之比，以及根据所述目标对象的第二尺寸信息和第二数量信息确定出所述目标对象与所述第二图像帧的第二面积之比；将所述第一面积之比与所述第二面积之比作差，得到所述初选关键图像帧组合中相邻图像帧针对所述目标对象的特征信息差值。4.根据权利要求1所述的方法，其特征在于，所述获取相邻图像帧中的目标对象的变化面积和变化位置，包括：获取相邻图像帧中目标对象的第一面积和第二面积，根据所述第一面积和所述第二面积计算得到所述目标对象的变化面积；以及，获取所述相邻图像帧中目标对象的中心点的第...

【专利技术属性】
技术研发人员：张超颖，苏明兰，郭枝虾，梁宝林，王建秀，
申请(专利权)人：中国电信股份有限公司，
类型：发明
国别省市：