视频裁剪方法、装置、存储介质及电子设备制造方法及图纸

本公开涉及一种视频裁剪方法、装置、存储介质及电子设备，以节省视频裁剪过程中的时间开销，提高视频裁剪效率。该视频裁剪方法包括：获取待裁剪的原始视频和目标裁剪尺寸；根据原始视频中多个目标视频帧的主体内容，确定初始裁剪框；根据该裁剪框的尺寸与目标裁剪尺寸之间的差异情况和多个目标视频帧中主体内容的变化情况，确定是否通过相同的裁剪框对原始视频的每一帧画面进行裁剪；若确定通过相同的裁剪框对原始视频的每一帧画面进行裁剪，则在多个候选裁剪框中，确定能够包括原始视频中最多主体内容的目标裁剪框，其中每一候选裁剪框的尺寸与初始裁剪框的尺寸一致；根据目标裁剪框对原始视频进行裁剪。对原始视频进行裁剪。对原始视频进行裁剪。

【技术实现步骤摘要】
视频裁剪方法、装置、存储介质及电子设备


[0001]本公开涉及视频处理
，具体地，涉及一种视频裁剪方法、装置、存储介质及电子设备。

技术介绍

[0002]视频裁剪是作用于视频播放尺寸与原视频不一致的场景下所需的技术。相关技术中的视频裁剪算法是根据原始视频中的内容信息，使用目标播放尺寸的裁剪框去裁剪视频中的每一视频帧，然后将裁剪完的视频帧重新组合成视频。具体地，需要通过动态规划优化算法为每一视频帧规划裁剪位置，并对裁剪位置进行插值平滑，最后对裁剪后的视频帧进行视频编码组合成一个新的视频。在整个过程中，时间开销相对较大，无法较好的满足低延时的视频裁剪场景。

技术实现思路

[0003]提供该
技术实现思路
部分以便以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。该
技术实现思路
部分并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范围。
[0004]第一方面，本公开提供一种视频裁剪方法，所述方法包括：
[0005]获取待裁剪的原始视频和目标裁剪尺寸；
[0006]根据所述原始视频中多个目标视频帧的主体内容，确定初始裁剪框；
[0007]根据所述初始裁剪框的尺寸与所述目标裁剪尺寸之间的差异情况和所述多个目标视频帧中主体内容的变化情况，确定是否通过相同的裁剪框对所述原始视频的每一帧画面进行裁剪；
[0008]若确定通过相同的裁剪框对所述原始视频的每一帧画面进行裁剪，则在多个候选裁剪框中，确定能够包括所述原始视频中最多主体内容的目标裁剪框，其中每一所述候选裁剪框的尺寸与所述初始裁剪框的尺寸一致；
[0009]根据所述目标裁剪框对所述原始视频进行裁剪。
[0010]第二方面，本公开提供一种视频裁剪装置，所述装置包括：
[0011]获取模块，用于获取待裁剪的原始视频和目标裁剪尺寸；
[0012]第一确定模块，用于根据所述原始视频中多个目标视频帧的主体内容，确定一裁剪框；
[0013]第二确定模块，用于根据所述初始裁剪框的尺寸与所述目标裁剪尺寸之间的差异情况和所述多个目标视频帧中主体内容的变化情况，确定是否通过相同的裁剪框对所述原始视频的每一帧画面进行裁剪；
[0014]第三确定模块，用于当确定通过相同的裁剪框对所述原始视频的每一帧画面进行裁剪时，在多个候选裁剪框中，确定能够包括所述原始视频中最多主体内容的目标裁剪框，其中每一所述候选裁剪框的尺寸与所述初始裁剪框的尺寸一致；
[0015]裁剪模块，用于根据所述目标裁剪框对所述原始视频进行裁剪。
[0016]第三方面，本公开提供一种计算机可读介质，其上存储有计算机程序，该程序被处理装置执行时实现第一方面中所述方法的步骤。
[0017]第四方面，本公开提供一种电子设备，包括：
[0018]存储装置，其上存储有计算机程序；
[0019]处理装置，用于执行所述存储装置中的所述计算机程序，以实现第一方面中所述方法的步骤。
[0020]通过上述技术方案，可以在视频裁剪的过程中，首先确定是否通过相同的裁剪框对原始视频的每一帧画面进行裁剪，若确定通过相同的裁剪框对原始视频的每一帧画面进行裁剪则无需进行动态规划裁剪路径的计算和插值平滑的计算，从而节省视频裁剪的时间开销，提高视频裁剪效率。并且，在确定通过相同的裁剪框对原始视频的每一帧画面进行裁剪后，可以在多个候选裁剪框中，确定能够包括原始视频中最多主体内容的目标裁剪框，以在节省时间开销的同时，最大化地囊括原始视频中的重要信息，避免裁剪后视频中的内容缺失，保证视频裁剪效果。
[0021]本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
[0022]结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。在附图中：
[0023]图1是根据本公开一示例性实施例示出的一种视频裁剪方法的流程图；
[0024]图2是根据本公开一示例性实施例示出的一种视频裁剪装置的框图；
[0025]图3是根据本公开一示例性实施例示出的一种电子设备的框图。
具体实施方式
[0026]下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
[0027]应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
[0028]本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
[0029]需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。另外需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术
人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
[0030]本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
[0031]正如
技术介绍
所言，相关技术中的视频裁剪算法是根据原始视频中的内容信息，使用目标播放尺寸的裁剪框去裁剪视频中的每一视频帧，然后将裁剪完的视频帧重新组合成视频。但是，专利技术人研究发现，按照相关技术的视频裁剪方式，由于需要对每一视频帧规划裁剪位置，并进行插值平滑和视频编码，因此视频裁剪过程中的时间开销相对较大，无法较好的满足低延时的视频裁剪场景。此外，专利技术人还研究发现，待裁剪视频中的主体内容可能比较固定(比如竖版视频、或者有一个人物进行故事讲解的视频等等)，在此种情况下无需对每一帧单独确定一个裁剪框。因此在需要低时延且主体内容变化不大的场景下，对所有帧固定裁剪位置的裁剪方案可能更适合的。
[0032]有鉴于此，本公开提供一种视频裁剪方法、装置、存储介质及电子设备，以在视频裁剪的过程中，首先判断是否可以通过固定裁剪位置的裁剪方案，若判断可以通过固定裁剪位置的裁剪方案，则根据视频的主体内容计算出最优裁剪框的位置，并根据该最优裁剪框对视频的每一帧画面进行裁剪，以在节省时间开销的同时，最大化地囊括视频中的重要信息。
[0033]图1是根据本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频裁剪方法，其特征在于，所述方法包括：获取待裁剪的原始视频和目标裁剪尺寸；根据所述原始视频中多个目标视频帧的主体内容，确定初始裁剪框；根据所述初始裁剪框的尺寸与所述目标裁剪尺寸之间的差异情况和所述多个目标视频帧中主体内容的变化情况，确定是否通过相同的裁剪框对所述原始视频的每一帧画面进行裁剪；若确定通过相同的裁剪框对所述原始视频的每一帧画面进行裁剪，则在多个候选裁剪框中，确定能够包括所述原始视频中最多主体内容的目标裁剪框，其中每一所述候选裁剪框的尺寸与所述初始裁剪框的尺寸一致；根据所述目标裁剪框对所述原始视频进行裁剪。2.根据权利要求1所述的方法，其特征在于，所述根据所述目标裁剪框对所述原始视频进行裁剪，包括：向视频播放设备发送所述目标裁剪框的尺寸信息和位置信息，以使所述视频播放设备根据所述目标裁剪框对所述原始视频进行裁剪。3.根据权利要求1所述的方法，其特征在于，所述根据所述原始视频中多个目标视频帧的主体内容，确定初始裁剪框，包括：针对所述原始视频中的每一目标视频帧，确定所述目标视频帧对应的显著性检测结果、以及所述目标视频帧中最大连通域对应的外接矩形，所述显著性检测结果用于表征所述目标视频帧中主体内容的分布情况；将所述显著性检测结果作为权重值，对所述每一目标视频帧对应的所述外接矩形的宽度进行加权求和，以得到宽度加权结果，将所述宽度加权结果与所述显著性检测结果总和的比值作为所述初始裁剪框的宽度；和/或，将所述显著性检测结果作为权重值，对所述每一目标视频帧对应的所述外接矩形的长度进行加权求和，以得到长度加权结果，将所述长度加权结果与所述显著性检测结果总和的比值作为所述初始裁剪框的长度。4.根据权利要求1所述的方法，其特征在于，所述根据所述初始裁剪框的尺寸与所述目标裁剪尺寸之间的差异情况和所述多个目标视频帧中主体内容的变化情况，确定是否通过相同的裁剪框对所述原始视频的每一帧画面进行裁剪，包括：确定所述初始裁剪框的长度与所述目标裁剪尺寸限定的长度之间的长度差值、所述初始裁剪框的宽度与所述目标裁剪尺寸限定的宽度之间的宽度差值、以及每一目标视频帧中最大连通域对应的外接矩形的标准差；根据所述长度差值、所述宽度差值和所述标准差，确定裁剪策略判断值；若所述裁剪策略判断值小于预设阈值，则确定通过相同的裁剪框对所述原始视频的每一帧画面进行裁剪，若所述裁剪策略判断值大于等于所述预设阈值，则确定不通过相同的裁剪框对所述原始视频的每一帧画面进行裁剪。5.根据权利要求4所述的方法，其特征在于，所述根据所述长度差值、所述宽度差值和所述标准差，确定裁剪策略判断值，包括：根据所述目标裁剪尺寸限定的长度，对所述长度差值进行归一化处理，以得到目标长度差值，根据所述目标裁剪尺寸限定的宽度，对所述宽度差值进行归一化处理，以得到...

【专利技术属性】
技术研发人员：吴昊，王长虎，
申请(专利权)人：北京有竹居网络技术有限公司，
类型：发明
国别省市：