本申请公开了一种视频画幅裁剪方法及装置，其中，所述方法包括：将待处理视频分割为多个场景片段；其中，每个场景片段由多帧包含相同场景画面的图像组成；分别检测出每个场景片段的首帧图像中的显著性对象；针对每个场景片段，确定显著性对象在场景片段的每帧图像中的坐标参数；利用跟踪到的每帧图像中的显著性对象的坐标参数，计算得到每帧图像对应的重心坐标；其中，坐标参数至少包括显著性对象对应的左右边界坐标以及显著性对象对应的上下边界坐标；针对每帧图像，以图像对应的重心坐标所处位置为基准点，将每帧图像的尺寸调整至目标宽高比进行裁剪，从而可以有效保证裁剪后的图像中包含有主体内容。像中包含有主体内容。像中包含有主体内容。
【技术实现步骤摘要】
一种视频画幅裁剪方法及装置
[0001]本申请涉及画幅裁剪
，特别涉及一种视频画幅裁剪方法及装置。
技术介绍
[0002]标准制作的视频的画幅的宽高比一般为16:9、4:3或21:9。但随着视频播放终端设备的和终端播放形式的不断增加，出现了18:9、19:9、3:2等宽高比的显示屏的宽屏收集或平板电脑，以及竖屏播放等形式，从而会出现视频源和显示屏的画幅不匹配的情况，进而导致播放效果不佳。
[0003]为了解决视频源和显示屏的画幅不匹配的情况，现今通常会通过机器裁剪或人工裁剪的方式，将视频源的画幅裁剪为需要输出的目标宽高比。但是由于人工裁剪存在效率低，成本高等问题。所以现今主要采用机器裁剪的方式进行采集。现今的机器裁剪的方式，主要是基于图像中的某个区域坐标，裁剪出目标宽高比的固定区域。
[0004]但是，由于机器裁剪只能以取某个区域的坐标的固定规则来裁剪，缺乏对视频内容的识别和裁剪的自适应判断能力，所以容易出现主体内容脱离裁剪窗口的情况，从而导致裁剪出的图像中不包含有原本图像中的主体内容，即视频中主观感兴趣的关键人物或物体对象被裁剪掉，影响裁剪后视频的播放效果。
技术实现思路
[0005]基于上述现有技术的不足，本申请提供了一种视频画幅裁剪方法及装置，以解决现有的裁剪方法容易出现主体内容脱离裁剪窗口的问题。
[0006]为了实现上述目的，本申请提供了以下技术方案：
[0007]本申请第一方面提供了一种视频画幅裁剪方法，包括：
[0008]将待处理视频分割为多个场景片段；其中，每个所述场景片段由多帧包含相同场景画面的图像组成；
[0009]分别检测出每个所述场景片段的首帧图像中的显著性对象；
[0010]针对每个所述场景片段，确定所述显著性对象在所述场景片段的每帧图像中的坐标参数；其中，所述坐标参数至少包括显著性对象对应的左右边界坐标以及显著性对象对应的上下边界坐标；
[0011]利用跟踪到的每帧所述图像中的显著性对象的坐标参数，计算得到每帧所述图像对应的重心坐标；
[0012]针对每帧所述图像，以所述图像对应的重心坐标所处位置为基准点，将每帧所述图像的尺寸调整至目标宽高比进行裁剪。
[0013]可选地，在上述的方法中，所述利用跟踪到的每帧所述图像中的显著性对象的坐标参数，计算得到每帧所述图像对应的重心坐标之后，还包括：
[0014]对每帧所述图像对应的重心坐标进行时序平滑处理，得到处理后的每帧所述对应的重心坐标；
[0015]其中，所述针对每帧所述图像，以所述图像对应的重心坐标所处位置为基准点，将每帧所述图像的尺寸调整至目标宽高比进行裁剪，包括：
[0016]针对每帧所述图像，以处理后的所述图像对应的重心坐标所处位置为基准点，将每帧所述图像的尺寸调整至目标宽高比进行裁剪。
[0017]可选地，在上述的方法中，所述对每帧所述图像对应的重心坐标进行时序平滑处理，得到处理后的每帧所述对应的重心坐标，包括：
[0018]确定出每帧所述图像对应的目标图像；其中，一帧所述图像及其对应的目标图像属于同一所述场景片段，且对应的时间戳是连续；一帧所述图像对应的目标帧包括位于所述图像前的N帧图像，以及位于所述图像后的N帧图像；
[0019]计算每帧所述图像对应的重心坐标的横坐标，与其对应的各帧所述目标图像对应的重心坐标的横坐标的均值，以及计算每帧所述图像对应的重心坐标的纵坐标，与其对应的各帧所述目标图像对应的重心坐标的纵坐标的均值，得到处理后的每帧所述图像对应的重心坐标。
[0020]可选地，在上述的方法中，所述将待处理视频分割为多个场景片段，包括：
[0021]通过场景变换算法检测出所述待处理视频中发生场景画面切换的各个时间戳；
[0022]从各个所述时间戳对应的位置对所述待处理视频进行分割，得到多个场景片段。
[0023]可选地，在上述的方法中，所述针对每个所述场景片段，跟踪所述场景片段的首帧图像中的显著性对象，在所述场景片段的每帧图像中的坐标参数，包括：
[0024]分别针对每个所述场景片段，以所述场景片段的首帧图像中的显著性对象作为跟踪对象；
[0025]以所述场景片段的首帧图像为起始图像，逐帧检测所述场景片段的每帧图像中的所述跟踪对象的坐标参数。
[0026]本申请第二方面提供了一种视频画幅裁剪装置，包括：
[0027]分割单元，用于将待处理视频分割为多个场景片段；其中，每个所述场景片段由多帧包含相同场景画面的图像组成；
[0028]对象检测单元，用于分别检测出每个所述场景片段的首帧图像中的显著性对象；
[0029]跟踪单元，用于针对每个所述场景片段，确定所述显著性对象在所述场景片段的每帧图像中的坐标参数；其中，所述坐标参数至少包括显著性对象对应的左右边界坐标以及显著性对象对应的上下边界坐标；
[0030]坐标确定单元，用于利用跟踪到的每帧所述图像中的显著性对象的坐标参数，计算得到每帧所述图像对应的重心坐标；
[0031]裁剪单元，用于针对每帧所述图像，以所述图像对应的重心坐标所处位置为基准点，将每帧所述图像的尺寸调整至目标宽高比进行裁剪。
[0032]可选地，在上述的装置中，还包括：
[0033]平滑处理单元，用于对每帧所述图像对应的重心坐标进行时序平滑处理，得到处理后的每帧所述对应的重心坐标；
[0034]其中，所述裁剪单元执行所述针对每帧所述图像，以所述图像对应的重心坐标所处位置为基准点，将每帧所述图像的尺寸调整至目标宽高比进行裁剪时，用于：
[0035]针对每帧所述图像，以处理后的所述图像对应的重心坐标所处位置为基准点，将
每帧所述图像的尺寸调整至目标宽高比进行裁剪。
[0036]可选地，在上述的装置中，所述平滑处理单元，包括：
[0037]目标图像确定单元，用于确定出每帧所述图像对应的目标图像；其中，一帧所述图像及其对应的目标图像属于同一所述场景片段，且对应的时间戳是连续；一帧所述图像对应的目标帧包括位于所述图像前的N帧图像，以及位于所述图像后的N帧图像；
[0038]平滑处理子单元，用于计算每帧所述图像对应的重心坐标的横坐标，与其对应的各帧所述目标图像对应的重心坐标的横坐标的均值，以及计算每帧所述图像对应的重心坐标的纵坐标，与其对应的各帧所述目标图像对应的重心坐标的纵坐标的均值，得到处理后的每帧所述图像对应的重心坐标。
[0039]可选地，在上述的装置中，所述分割单元，包括：
[0040]场景检测单元，用于通过场景变换算法检测出所述待处理视频中发生场景画面切换的各个时间戳；
[0041]分割子单元，用于从各个所述时间戳对应的位置对所述待处理视频进行分割，得到多个场景片段。
[0042]可选地，在上述的装置中，所述跟踪单元，包括：
[0043]跟踪对象确定单元，用于分别针对每个所述场景片段，以所述场景片段的本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种视频画幅裁剪方法，其特征在于，包括：将待处理视频分割为多个场景片段；其中，每个所述场景片段由多帧包含相同场景画面的图像组成；分别检测出每个所述场景片段的首帧图像中的显著性对象；针对每个所述场景片段，确定所述显著性对象在所述场景片段的每帧图像中的坐标参数；其中，所述坐标参数至少包括显著性对象对应的左右边界坐标以及显著性对象对应的上下边界坐标；利用跟踪到的每帧所述图像中的显著性对象的坐标参数，计算得到每帧所述图像对应的重心坐标；针对每帧所述图像，以所述图像对应的重心坐标所处位置为基准点，将每帧所述图像的尺寸调整至目标宽高比进行裁剪。2.根据权利要求1所述的方法，其特征在于，所述利用跟踪到的每帧所述图像中的显著性对象的坐标参数，计算得到每帧所述图像对应的重心坐标之后，还包括：对每帧所述图像对应的重心坐标进行时序平滑处理，得到处理后的每帧所述对应的重心坐标；其中，所述针对每帧所述图像，以所述图像对应的重心坐标所处位置为基准点，将每帧所述图像的尺寸调整至目标宽高比进行裁剪，包括：针对每帧所述图像，以处理后的所述图像对应的重心坐标所处位置为基准点，将每帧所述图像的尺寸调整至目标宽高比进行裁剪。3.根据权利要求2所述的方法，其特征在于，所述对每帧所述图像对应的重心坐标进行时序平滑处理，得到处理后的每帧所述对应的重心坐标，包括：确定出每帧所述图像对应的目标图像；其中，一帧所述图像及其对应的目标图像属于同一所述场景片段，且对应的时间戳是连续；一帧所述图像对应的目标帧包括位于所述图像前的N帧图像，以及位于所述图像后的N帧图像；计算每帧所述图像对应的重心坐标的横坐标，与其对应的各帧所述目标图像对应的重心坐标的横坐标的均值，以及计算每帧所述图像对应的重心坐标的纵坐标，与其对应的各帧所述目标图像对应的重心坐标的纵坐标的均值，得到处理后的每帧所述图像对应的重心坐标。4.根据权利要求1所述的方法，其特征在于，所述将待处理视频分割为多个场景片段，包括：通过场景变换算法检测出所述待处理视频中发生场景画面切换的各个时间戳；从各个所述时间戳对应的位置对所述待处理视频进行分割，得到多个场景片段。5.根据权利要求1所述的方法，其特征在于，所述针对每个所述场景片段，确定所述显著性对象在所述场景片段的每帧图像中的坐标参数，包括：分别针对每个所述场景片段，以所述场景片段的首帧图像中的显著性对象作为跟踪对象；以所述场景片段的首帧图像为起始图像，逐帧检测所述场景片段的每帧图像中的所述跟踪对象的坐标参数。6...
【专利技术属性】
技术研发人员：谭嵩，罗准，张东阳，吴坚强，冯斌，
申请(专利权)人：湖南快乐阳光互动娱乐传媒有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。