System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本专利技术涉及人工智能,尤其涉及一种视频剪辑方法、装置、处理设备及存储介质。
技术介绍
1、目前,在视频制作和编辑的过程中,通过视频处理可以将视频中人物特定动作的视频片段单独剪辑出来,但以此获得的动作视频素材较为单一,难以为用户提供个性化的视频编辑体验。
技术实现思路
1、本专利技术提供一种视频剪辑方法、装置、处理设备及存储介质,解决了现有技术中人物动作视频素材较为单一的问题。
2、为解决上述技术问题,第一方面,本专利技术提供一种视频剪辑方法,包括:
3、确定目标视频的至少一个视频帧包含的目标人物区域图像;
4、分别获取所述视频帧包含的目标人物区域图像中的第一信息,所述第一信息包括目标人物关键点信息和/或目标人物动作信息;
5、根据所述第一信息,对所述至少一个视频帧包含的目标人物区域图像进行剪辑,得到动作剪辑结果,所述动作剪辑结果包括目标人物的动作运动轨迹信息以及所述动作运动轨迹信息对应的第一信息。
6、可选地,所述确定目标视频的至少一个视频帧包含的目标人物区域图像,包括:
7、对每个所述视频帧分别进行目标检测,获得每个所述视频帧对应的至少一个包含人物的边界框;
8、针对每个所述视频帧,从所述视频帧对应的至少一个边界框中确定主体人物对应的边界框;
9、针对每个所述视频帧,根据所述主体人物对应的边界框,获得所述视频帧包含的目标人物区域图像。
10、可选地,所述分别获取所述视频帧
11、对所述视频帧包含的目标人物区域图像进行关键点检测,获得所述目标人物区域图像的目标人物关键点信息;
12、和/或,对所述视频帧包含的目标人物区域图像进行时序动作检测,获得所述目标人物区域图像的目标人物动作信息。
13、可选地,所述对所述视频帧包含的目标人物区域图像进行时序动作检测,获得所述目标人物区域图像的目标人物动作信息,包括:
14、将所述目标人物区域图像输入至快慢网络模型,获得所述目标人物区域图像对应的目标人物的动作特征和时间特征;
15、对所述目标人物的动作特征和时间特征进行编解码处理,得到目标人物动作类别信息和目标人物动作时间信息;
16、将所述目标人物动作类别信息和所述目标人物动作时间信息,确定为所述目标人物动作信息。
17、可选地,所述目标人物动作信息包括:目标人物动作类别信息和目标人物动作时间信息;
18、所述根据所述第一信息,对所述至少一个视频帧包含的目标人物区域图像进行剪辑,得到动作剪辑结果,包括:
19、针对每个所述目标人物动作类别信息,确定与所述目标人物动作类别信息对应的目标人物动作时间信息;
20、针对每个所述目标人物动作类别信息,根据与所述目标人物动作类别信息对应的所有目标人物动作时间信息,确定所述目标人物的动作运动轨迹信息;
21、针对每个所述目标人物动作类别信息,将所述动作运动轨迹信息以及所述动作运动轨迹信息对应的所述目标人物动作信息确定为所述动作剪辑结果。
22、可选地,所述目标人物动作信息包括:目标人物动作类别信息和目标人物动作时间信息;
23、所述根据所述第一信息,对所述至少一个视频帧包含的目标人物区域图像进行剪辑,得到动作剪辑结果,包括:
24、针对每个所述目标人物动作类别信息,分别确定与所述目标人物动作类别信息对应的目标人物动作时间信息和目标人物关键点信息;
25、针对每个所述目标人物动作类别信息,根据与所述目标人物动作类别信息对应的所有目标人物动作时间信息和目标人物关键点信息,确定所述目标人物的动作运动轨迹信息;
26、针对每个所述目标人物动作类别信息,将所述动作运动轨迹信息以及所述动作运动轨迹信息对应的第一信息确定为所述动作剪辑结果。
27、可选地,所述针对每个所述目标人物动作类别信息,分别确定与所述目标人物动作类别信息对应的目标人物动作时间信息和目标人物关键点信息,包括:
28、针对每个所述目标人物动作类别信息,确定初始目标人物关键点信息,所述初始目标人物关键点信息是与所述目标人物动作类别信息对应的所有目标人物关键点信息;
29、针对每个所述目标人物动作类别信息,根据所述目标人物动作类别信息中目标人物动作起始时刻对应的目标人物关键点信息和/或所述目标人物动作类别信息中目标人物动作结束时刻对应的目标人物关键点信息,从所述初始目标人物关键点信息中排除不属于所述目标人物动作类别信息的目标人物关键点信息。
30、第二方面,本专利技术实施例还提供一种视频剪辑装置,所述装置包括:
31、图像获取模块,用于确定目标视频的至少一个视频帧包含的目标人物区域图像;
32、第一处理模块,用于分别获取所述视频帧包含的目标人物区域图像中的第一信息,所述第一信息包括目标人物关键点信息和/或目标人物动作信息;
33、第二处理模块,用于根据所述第一信息,对所述至少一个视频帧包含的目标人物区域图像进行剪辑,得到动作剪辑结果,所述动作剪辑结果包括目标人物的动作运动轨迹信息以及所述动作运动轨迹信息对应的第一信息。
34、可选地,所述图像获取模块包括:
35、目标检测子模块,用于对每个所述视频帧分别进行目标检测,获得每个所述视频帧对应的至少一个包含人物的边界框;
36、主体检测子模块,用于针对每个所述视频帧,从所述视频帧对应的至少一个边界框中确定主体人物对应的边界框;
37、第一处理子模块,用于针对每个所述视频帧,根据所述主体人物对应的边界框,获得所述视频帧包含的目标人物区域图像。
38、可选地,所述第一处理模块包括:
39、第二处理子模块,用于对所述视频帧包含的目标人物区域图像进行关键点检测,获得所述目标人物区域图像的目标人物关键点信息;
40、时序检测子模块,用于对所述视频帧包含的目标人物区域图像进行时序动作检测,获得所述目标人物区域图像的目标人物动作信息。
41、可选地,所述时序检测子模块包括:
42、特征提取单元,用于将所述目标人物区域图像输入至快慢网络模型,获得所述目标人物区域图像对应的目标人物的动作特征和时间特征;
43、第一处理单元,用于对所述目标人物的动作特征和时间特征进行编解码处理,得到目标人物动作类别信息和目标人物动作时间信息;
44、第二处理单元,用于将所述目标人物动作类别信息和所述目标人物动作时间信息,确定为所述目标人物动作信息。
45、可选地,所述目标人物动作信息包括:目标人物动作类别信息和目标人物动作时间信息;
46、所述第二处理模块包括:
47、第三处理子模块,用于针对每个所述目标人物动作类别信息,分别确定与所述目标人物动作类别本文档来自技高网...
【技术保护点】
1.一种视频剪辑方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,所述确定目标视频的至少一个视频帧包含的目标人物区域图像,包括:
3.根据权利要求1所述的方法,其特征在于,所述分别获取所述视频帧包含的目标人物区域图像中的第一信息,包括:
4.根据权利要求3所述的方法,其特征在于,所述对所述视频帧包含的目标人物区域图像进行时序动作检测,获得所述目标人物区域图像的目标人物动作信息,包括:
5.根据权利要求1所述的方法,其特征在于,所述目标人物动作信息包括:目标人物动作类别信息和目标人物动作时间信息;
6.根据权利要求1所述的方法,其特征在于,所述目标人物动作信息包括:目标人物动作类别信息和目标人物动作时间信息;
7.根据权利要求6所述的方法,其特征在于,所述针对每个所述目标人物动作类别信息,分别确定与所述目标人物动作类别信息对应的目标人物动作时间信息和目标人物关键点信息,包括:
8.一种处理设备,其特征在于,包括:处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的视频剪辑方法的步骤。
10.一种计算机程序产品,其特征在于,包括计算机指令,所述计算机指令被处理器执行时实现如权利要求1至7中任一项所述的视频剪辑方法的步骤。
...【技术特征摘要】
1.一种视频剪辑方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,所述确定目标视频的至少一个视频帧包含的目标人物区域图像,包括:
3.根据权利要求1所述的方法,其特征在于,所述分别获取所述视频帧包含的目标人物区域图像中的第一信息,包括:
4.根据权利要求3所述的方法,其特征在于,所述对所述视频帧包含的目标人物区域图像进行时序动作检测,获得所述目标人物区域图像的目标人物动作信息,包括:
5.根据权利要求1所述的方法,其特征在于,所述目标人物动作信息包括:目标人物动作类别信息和目标人物动作时间信息;
6.根据权利要求1所述的方法,其特征在于,所述目标人物动作信息包括:目标人物动作类别信息和目标人物动作时间信息;
<...【专利技术属性】
技术研发人员:欧阳谷,琚彬,
申请(专利权)人:咪咕文化科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。