视频封面生成方法、装置、电子设备及可读介质制造方法及图纸

本公开公开了一种视频封面生成方法、装置、电子设备及可读介质。该方法包括：提取视频中的至少两个关键帧，所述关键帧中包括展示在封面中的特征信息；根据各所述关键帧的动作相关性，将各所述关键帧中的特征信息融合在单张图像中，以生成所述视频的封面，其中，所述动作相关性包括相关或无关。上述技术方案通过将多个关键帧的特征信息融合在单张图像中，以单张静态的图像即可展示出丰富的视频内容，占用资源少、效率高，并且在对特征信息进行融合时，考虑了各关键帧的动作相关性，生成视频封面的方式更灵活多样。式更灵活多样。式更灵活多样。

【技术实现步骤摘要】
视频封面生成方法、装置、电子设备及可读介质


[0001]本专利技术实施例涉及图像处理
，尤其涉及一种视频封面生成方法、装置、电子设备及可读介质。

技术介绍

[0002]视频封面是展示视频关键内容的一种形式，也是用户在浏览视频播放页面第一眼所接受到的信息的集合，其对于吸引用户观看视频具有重要作用。通常情况下，可以采用视频中的某一帧图像作为视频封面，但这种形式比较单一，视频封面能够反映出的信息量很少，不利于用户快速了解视频的关键内容。
[0003]为了展示更多的视频内容，视频封面也可以是人工设计的一张美观图像，这种情况形式相对多样，也能够反映出较多的信息，但是设计过程需要借助一定的专业工具(如PhotoShop等)，无法自动生成视频封面，整个过程耗时耗力。也有一些场景中利用视频中的多帧图像生成一个动态封面，一般采用视频中最为精彩的一个片段，其表达能力相对静态封面要更好，但相应的算法复杂度更高，动态封面模型训练一般需要大量标注数据，且标注难度较大，该过程也十分耗时耗力，并且动态封面相比静态封面所占用的存储空间也更多。综上，目前的视频封面生成方法，耗时耗力，成本偏高，生成视频封面的效率偏低。

技术实现思路

[0004]本专利技术提供了一种视频封面生成方法、装置、电子设备及可读介质，以在封面中展示丰富的视频内容，提高生成视频封面的效率。
[0005]第一方面，本公开实施例提供一种视频封面生成方法，包括：
[0006]提取视频中的至少两个关键帧，所述关键帧中包括展示在封面中的特征信息；
[0007]根据各所述关键帧的动作相关性，将各所述关键帧中的特征信息融合在单张图像中，以生成所述视频的封面，其中，所述动作相关性包括相关或无关。
[0008]第二方面，本公开实施例还提供了一种视频封面生成装置，包括：
[0009]提取模块，用于提取视频中的至少两个关键帧，所述关键帧中包括所述视频的特征信息；
[0010]生成模块，用于根据各所述关键帧的动作相关性，将各所述关键帧中的特征信息融合在单张图像中，以生成所述视频的封面，其中，所述动作相关性包括相关或无关。
[0011]第三方面，本公开实施例还提供了一种电子设备，包括：
[0012]一个或多个处理器；
[0013]存储装置，用于存储一个或多个程序；
[0014]当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如第一方面所述的视频封面生成方法。
[0015]第四方面，本公开实施例还提供了一种计算机可读介质，其上存储有计算机程序，该程序被处理器执行时实现如第一方面所述的视频封面生成方法。
[0016]本公开实施例的提供一种视频封面生成方法、装置、电子设备及可读介质。该方法包括：提取视频中的至少两个关键帧，所述关键帧中包括展示在封面中的特征信息；根据各所述关键帧的动作相关性，将各所述关键帧中的特征信息融合在单张图像中，以生成所述视频的封面，其中，所述动作相关性包括相关或无关。上述技术方案通过将多个关键帧的特征信息融合在单张图像中，以单张静态的图像即可展示出丰富的视频内容，占用资源少、效率高，并且在对特征信息进行融合时，考虑了各关键帧的动作相关性，生成视频封面的方式更灵活多样。
附图说明
[0017]结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。
[0018]图1是本公开实施例一中的视频封面生成方法的流程图；
[0019]图2是本公开实施例二中的视频封面生成方法的流程图；
[0020]图3是本公开实施例二中的将动作序列帧的实例融合在单张图像中的示意图；
[0021]图4是本公开实施例二中的填补动作序列帧中被去除实例的区域的示意图；
[0022]图5是本公开实施例三中的视频封面生成方法的流程图；
[0023]图6是本公开实施例三中的将各关键帧的前景目标融合在主帧中的示意图；
[0024]图7是本公开实施例四中的视频封面生成方法的流程图；
[0025]图8是本公开实施例四中的将各关键帧的图像块拼接的示意图；
[0026]图9是本公开实施例五中的视频封面生成方法的流程图；
[0027]图10是本公开实施例五中的预设色环类型的示意图；
[0028]图11是本公开实施例五中的在单张图像中添加描述文本的示意图；
[0029]图12是本公开实施例五中的视频封面生成过程的示意图；
[0030]图13是本公开实施例六中的视频封面生成装置的结构示意图；
[0031]图14是本公开实施例七中的电子设备的硬件结构示意图。
具体实施方式
[0032]下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
[0033]应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
[0034]本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
[0035]需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
[0036]本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
[0037]下述各实施例中，每个实施例中同时提供了可选特征和示例，实施例中记载的各个特征可进行组合，形成多个可选方案，不应将每个编号的实施例仅视为一个技术方案。此外，在不冲突的情况下，本公开中的实施例及实施例中的特征可以相互组合。
[0038]实施例一
[0039]图1是本公开实施例一中的视频封面生成方法的流程图。该方法可适用于为视频自动生成封面的情况，具体的，通过将视频中多帧的特征信息融合在单张图像中作为封面，从而在封面中展示丰富的视频内容。该方法可以由视频封面生成装置来执行，其中该装置可由软件和/或硬件实现，并集成在电子设备上。本实施例中的电子设备可以是计算机、笔记本电脑、服务器、平板电脑或智能手机等具有图像处理功能的设备。
[0040]如图1所示，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频封面生成方法，其特征在于，包括：提取视频中的至少两个关键帧，所述关键帧中包括展示在封面中的特征信息；根据各所述关键帧的动作相关性，将各所述关键帧中的特征信息融合在单张图像中，以生成所述视频的封面，其中，所述动作相关性包括相关或无关。2.根据权利要求1所述的方法，其特征在于，所述提取视频中的至少两个关键帧，包括：基于动作识别算法，识别所述视频中的动作序列帧，并将所述动作序列帧作为所述关键帧；其中，所述动作相关性为相关。3.根据权利要求2所述的方法，其特征在于，所述根据各所述关键帧的动作相关性，将各所述关键帧中的特征信息融合在单张图像中，以生成所述视频的封面，包括：在所述动作相关性为相关的情况下，对各所述动作序列帧进行实例分割，得到各所述动作序列帧的特征信息，所述特征信息包括实例和背景；根据各所述动作序列帧的背景生成封面背景；将各所述动作序列帧的实例融合在所述封面背景中，得到单张图像，并将所述单张图像作为所述视频的封面。4.根据权利要求3所述的方法，其特征在于，所述根据各所述关键帧的实例和背景生成封面背景，包括：对于每个动作序列帧，从该动作序列帧中去除相应的实例，并根据设定动作序列帧在相应区域的特征信息填补该动作序列帧中被去除的区域，得到该动作序列帧对应的填补结果，其中，所述设定动作序列帧包括各所述动作序列帧中与当前动作序列帧不同的动作序列帧；根据各所述动作序列帧的填补结果生成所述封面背景。5.根据权利要求3所述的方法，其特征在于，在所述根据各所述动作序列帧的背景生成封面背景之前，还包括：选取一个动作序列帧作为参考帧，并根据特征点匹配算法确定各所述动作序列帧与参考帧之间的仿射变换矩阵；根据所述仿射变换矩阵将各所述动作序列帧的背景与所述参考帧的背景对齐。6.根据权利要求3所述的方法，其特征在于，各所述动作序列帧的实例与所述封面背景的融合度按照时序顺序依次降低。7.根据权利要求1所述的方法，其特征在于，所述提取视频中的至少两个关键帧，包括：对所述视频中的图像进行聚类，得到至少两个类别；基于图像质量评估算法，从各所述类别中抽取对应的关键帧；其中，各所述关键帧的动作相关性为无关。8.根据权利要求7所述的方法，其特征在于，所述根据各所述关键帧的动作相关性，将各所述关键帧中的特征信息融合在单张图像中，以生成所述视频的封面，包括：在所述动作相关性为无关的情况下，选取一个关键帧作为主帧；基于目标识别算法识别各所述关键帧中的特征信息，所述特征信息包括前景目标；将除所述主...

【专利技术属性】
技术研发人员：杜宗财，路浩威，郎智强，侯晓霞，
申请(专利权)人：北京字节跳动网络技术有限公司，
类型：发明
国别省市：