视频处理方法、装置、电子设备及存储介质制造方法及图纸

本公开实施例提供一种视频处理方法、装置、电子设备及存储介质；方法包括：根据片段时长从视频中提取多个候选视频片段；确定所述候选视频片段中相邻视频帧之间的位移幅值，并将所述位移幅值确定为视频帧的运动分数；对所述候选视频片段中的视频帧进行美学处理，得到所述视频帧的美学分数；根据所述候选视频片段中视频帧的颜色通道数据，确定所述视频帧的颜色分数；根据所述视频帧的运动分数、美学分数及颜色分数，在多个所述候选视频片段中确定目标视频片段。本公开实施例提升了筛选视频片段的效率，同时提升了确定出的目标视频片段的效果，适用于视频剪辑的场景。

【技术实现步骤摘要】
视频处理方法、装置、电子设备及存储介质
本公开实施例涉及视频技术，尤其涉及一种视频处理方法、装置、电子设备及存储介质。
技术介绍
随着视频技术的发展，出现了越来越多的视频剪辑方式。例如，在多个不同的视频中分别剪辑出视频片段，并将多个视频片段拼接在一起，同时添加音频，制作成卡点视频，提升用户的观看体验。在相关技术提供的方案中，通常依靠手动进行片段剪辑，即由用户在视频中手动设置起始时间和结束时间，从而剪辑出视频片段，但是，该种方式的效率低下，在视频数量较多时，需要耗费大量时间进行剪辑。
技术实现思路
提供该
技术实现思路
部分以便以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。该
技术实现思路
部分并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范围。第一方面，本公开实施例提供了一种视频处理方法，包括：根据片段时长从视频中提取多个候选视频片段；确定所述候选视频片段中相邻视频帧之间的位移幅值，并将所述位移幅值确定为视频帧的运动分数；对所述候选视频片段中的视频帧进行美学处理，得到所述视频帧的美学分数；根据所述候选视频片段中视频帧的颜色通道数据，确定所述视频帧的颜色分数；根据所述视频帧的运动分数、美学分数及颜色分数，在多个所述候选视频片段中确定目标视频片段。上述方案中，所述根据所述视频帧的运动分数、美学分数及颜色分数，在多个所述候选视频片段中确定目标视频片段，包括：根据所述候选视频片段中各所述视频帧的运动分数、美学分数及颜色分数，分别确定所述候选视频片段的片段运动分数、片段美学分数及片段颜色分数；根据片段运动分数对多个所述候选视频片段进行比例选取处理，得到第一片段集合；根据片段美学分数对多个所述候选视频片段进行比例选取处理，得到第二片段集合；根据片段颜色分数对多个所述候选视频片段进行比例选取处理，得到第三片段集合；将所述第一片段集合、所述第二片段集合及所述第三片段集合的交集，确定为目标片段集合，并在所述目标片段集合中确定目标视频片段。上述方案中，所述根据所述候选视频片段中各所述视频帧的运动分数、美学分数及颜色分数，分别确定所述候选视频片段的片段运动分数、片段美学分数及片段颜色分数，包括：对所述候选视频片段内所有视频帧的分数进行平均处理，得到平均分数；对所述候选视频片段的平均分数进行归一化处理，得到归一化分数；对多个所述归一化分数进行排序，并将位于设定位次的归一化分数确定为优化分数；根据所述归一化分数和所述优化分数，确定所述候选视频片段的分数；其中，所述视频帧的分数为运动分数、美学分数或颜色分数，所述候选视频片段的分数为对应的片段运动分数、片段美学分数或片段颜色分数。上述方案中，所述在所述目标片段集合中确定目标视频片段，包括：当所述目标片段集合包括至少两个候选视频片段时，对所述候选视频片段的片段运动分数、片段美学分数及片段颜色分数进行融合处理，得到融合分数；将所述目标片段集合中融合分数最高的候选视频片段，确定为目标视频片段。上述方案中，还包括：当所述第一片段集合、所述第二片段集合及所述第三片段集合的交集为空时，将所述第一片段集合确定为目标片段集合。上述方案中，所述根据所述候选视频片段中视频帧的颜色通道数据，确定所述视频帧的颜色分数，包括：对所述候选视频片段中视频帧的三个通道的颜色矩阵进行均衡处理，得到第一颜色矩阵和第二颜色矩阵；确定所述第一颜色矩阵的均值及方差，并确定所述第二颜色矩阵的均值及方差；根据所述第一颜色矩阵的均值和所述第二颜色矩阵的均值，确定全局均值；根据所述第一颜色矩阵的方差和所述第二颜色矩阵的方差，确定全局方差；对所述全局均值及所述全局方差进行融合处理，得到所述视频帧的颜色分数。上述方案中，所述对所述候选视频片段中视频帧的三个通道的颜色矩阵进行均衡处理，得到第一颜色矩阵和第二颜色矩阵，包括：将所述候选视频片段中视频帧的红色通道的颜色矩阵，与绿色通道的颜色矩阵进行相差处理，并对相差处理得到的矩阵进行绝对值处理，得到第一颜色矩阵；将所述红色通道的颜色矩阵与所述绿色通道的颜色矩阵进行相加处理，将相加处理得到的矩阵与蓝色通道的颜色矩阵进行相差处理，并对相差处理得到的矩阵进行绝对值处理，得到第二颜色矩阵。上述方案中，所述对所述候选视频片段中的视频帧进行美学处理，得到所述视频帧的美学分数，包括：获取标注视频帧及对应的标注美学分数；通过机器学习模型对所述标注视频帧进行预测处理，得到预测美学分数；确定所述标注美学分数与所述预测美学分数之间的差异；根据所述差异在所述机器学习模型中进行反向传播，并在反向传播的过程中更新所述机器学习模型的权重参数；通过更新后的机器学习模型，对所述候选视频片段中的视频帧进行预测处理，得到所述视频帧的美学分数。第二方面，本公开实施例提供了一种视频处理装置，包括：提取单元，用于根据片段时长从视频中提取多个候选视频片段；运动分数确定单元，用于确定所述候选视频片段中相邻视频帧之间的位移幅值，并将所述位移幅值确定为视频帧的运动分数；美学分数确定单元，用于对所述候选视频片段中的视频帧进行美学处理，得到所述视频帧的美学分数；颜色分数确定单元，用于根据所述候选视频片段中视频帧的颜色通道数据，确定所述视频帧的颜色分数；目标确定单元，用于根据所述视频帧的运动分数、美学分数及颜色分数，在多个所述候选视频片段中确定目标视频片段。上述方案中，所述目标确定单元，还用于：根据所述候选视频片段中各所述视频帧的运动分数、美学分数及颜色分数，分别确定所述候选视频片段的片段运动分数、片段美学分数及片段颜色分数；根据片段运动分数对多个所述候选视频片段进行比例选取处理，得到第一片段集合；根据片段美学分数对多个所述候选视频片段进行比例选取处理，得到第二片段集合；根据片段颜色分数对多个所述候选视频片段进行比例选取处理，得到第三片段集合；将所述第一片段集合、所述第二片段集合及所述第三片段集合的交集，确定为目标片段集合，并在所述目标片段集合中确定目标视频片段。上述方案中，所述目标确定单元，还用于：对所述候选视频片段内所有视频帧的分数进行平均处理，得到平均分数；对所述候选视频片段的平均分数进行归一化处理，得到归一化分数；对多个所述归一化分数进行排序，并将位于设定位次的归一化分数确定为优化分数；根据所述归一化分数和所述优化分数，确定所述候选视频片段的分数；其中，所述视频帧的分数为运动分数、美学分数或颜色分数，所述候选视频片段的分数为对应的片段运动分数、片段美学分数或片段颜色分数。上述方案中，所述目标确定单元，还用于：当所述目标片段集合包括至少两本文档来自技高网...

【技术保护点】
1.一种视频处理方法，其特征在于，包括：/n根据片段时长从视频中提取多个候选视频片段；/n确定所述候选视频片段中相邻视频帧之间的位移幅值，并将所述位移幅值确定为视频帧的运动分数；/n对所述候选视频片段中的视频帧进行美学处理，得到所述视频帧的美学分数；/n根据所述候选视频片段中视频帧的颜色通道数据，确定所述视频帧的颜色分数；/n根据所述视频帧的运动分数、美学分数及颜色分数，在多个所述候选视频片段中确定目标视频片段。/n

【技术特征摘要】
1.一种视频处理方法，其特征在于，包括：
根据片段时长从视频中提取多个候选视频片段；
确定所述候选视频片段中相邻视频帧之间的位移幅值，并将所述位移幅值确定为视频帧的运动分数；
对所述候选视频片段中的视频帧进行美学处理，得到所述视频帧的美学分数；
根据所述候选视频片段中视频帧的颜色通道数据，确定所述视频帧的颜色分数；
根据所述视频帧的运动分数、美学分数及颜色分数，在多个所述候选视频片段中确定目标视频片段。


2.根据权利要求1所述的视频处理方法，其特征在于，所述根据所述视频帧的运动分数、美学分数及颜色分数，在多个所述候选视频片段中确定目标视频片段，包括：
根据所述候选视频片段中各所述视频帧的运动分数、美学分数及颜色分数，分别确定所述候选视频片段的片段运动分数、片段美学分数及片段颜色分数；
根据片段运动分数对多个所述候选视频片段进行比例选取处理，得到第一片段集合；
根据片段美学分数对多个所述候选视频片段进行比例选取处理，得到第二片段集合；
根据片段颜色分数对多个所述候选视频片段进行比例选取处理，得到第三片段集合；
将所述第一片段集合、所述第二片段集合及所述第三片段集合的交集，确定为目标片段集合，并在所述目标片段集合中确定目标视频片段。


3.根据权利要求2所述的视频处理方法，其特征在于，所述根据所述候选视频片段中各所述视频帧的运动分数、美学分数及颜色分数，分别确定所述候选视频片段的片段运动分数、片段美学分数及片段颜色分数，包括：
对所述候选视频片段内所有视频帧的分数进行平均处理，得到平均分数；
对所述候选视频片段的平均分数进行归一化处理，得到归一化分数；
对多个所述归一化分数进行排序，并将位于设定位次的归一化分数确定为优化分数；
根据所述归一化分数和所述优化分数，确定所述候选视频片段的分数；
其中，所述视频帧的分数为运动分数、美学分数或颜色分数，所述候选视频片段的分数为对应的片段运动分数、片段美学分数或片段颜色分数。


4.根据权利要求2所述的视频处理方法，其特征在于，所述在所述目标片段集合中确定目标视频片段，包括：
当所述目标片段集合包括至少两个候选视频片段时，对所述候选视频片段的片段运动分数、片段美学分数及片段颜色分数进行融合处理，得到融合分数；
将所述目标片段集合中融合分数最高的候选视频片段，确定为目标视频片段。


5.根据权利要求2所述的视频处理方法，其特征在于，还包括：
当所述第一片段集合、所述第二片段集合及所述第三片段集合的交集为空时，将所述第一片段集合确定为目标片段集合。


6.根据权利要求1至5任一项所述的视频处理方法，其特征在于，所述根据所述候选视频片...

【专利技术属性】
技术研发人员：靳潇杰，沈晓辉，罗昱，杨林杰，
申请(专利权)人：字节跳动有限公司，
类型：发明
国别省市：美国;US