一种基于素材进行资源匹配的视频自动生成方法及系统技术方案

本发明专利技术涉及一种基于素材进行资源匹配的视频自动生成方法及系统，方法包括：建立资源库，库中所有资源均包含至少一个表征资源特征的特征标签；对用户采集或上传的素材进行解析，并添加元素标签；用户对待生成视频的特征进行偏好选择；根据用户的偏好选择和\或元素标签中的至少一个标签，在资源库中匹配特征标签，得到最佳资源；对素材进行处理；根据元素标签和最佳资源的特征标签计算素材与最佳资源的排序，融合渲染后生成输出视频。本发明专利技术的制作方式简单，生成方式灵活，创作门槛低，只需要提供一组素材就能自动制作出一段精彩视频，不需要进行繁琐的操作，更不需要掌握专业性强的知识；避免了制作的作品较为雷同的情况。视频的制作成本低。

【技术实现步骤摘要】
一种基于素材进行资源匹配的视频自动生成方法及系统
本专利技术涉及视频制作
，尤其涉及一种基于素材进行资源匹配的视频自动生成方法及系统。
技术介绍
现有的视频制作技术基本可以分为两类，一种是以人工手动制作为主，其特征为在视频和音乐轨道上手动添加素材完成视频创作。此类技术虽然可达到一定程度的灵活制作，但因此带来的创作门槛较高且创作耗时较长，对手机也有一定的性能要求，否则在处理复杂制作时会导致程序崩溃或耗时过长。另一种是以模板自动化创作为主，其特征为系统会预制一套固定的模板（包含但不限于固定的视频/图片素材、滤镜、音乐MP3、固定的音乐切点），然后将用户的图片或视频素材按固定排序放入模板中生成视频。此类方法缺少灵活性（例如用户不能改变音乐和效果等等），且用户素材不易融入模板，容易造成素材与模板之间产生割裂感，并且产出的作品较为雷同。另一方面，现有技术在制作视频所用素材的获得上，要么通过自己拍摄得到，要么通过互联网下载或付费购买得到。因此在素材收集上，不但效率低而且成本高昂。
技术实现思路
本专利技术的目的在于提供一种基于素材进行资源匹配的视频自动生成方法及系统，用以解决现有技术中存在的制作方式的灵活性和难易程度之间的矛盾，以及模板与素材的不能很好的融合问题。为实现上述目的，本专利技术公开了一种基于素材进行资源匹配的视频自动生成方法，包括：建立资源库，库中所有资源均包含至少一个表征资源特征的特征标签；对用户采集或上传的素材进行解析，并添加元素标签；用户对待生成视频的特征进行偏好选择；根据用户的偏好选择和\或元素标签中的至少一个标签，在资源库中匹配特征标签，得到最佳资源；对素材进行处理；根据元素标签和最佳资源的特征标签计算素材与最佳资源的排序，融合渲染后生成输出视频。进一步的是，建立资源库，库中所有资源均包含至少一个表征资源特征的特征标签，包括：建立空镜库，库中空镜均包含至少一个表征空镜特征的影视标签；建立音乐库，库中音乐均包含至少一个表征音乐特征的乐曲标签；建立效果库，库中效果均包含至少一个表征效果特征的效果标签。进一步的是，还包括：将音乐库与效果库和\或空镜库进行关联，一个乐曲标签至少关联一个效果标签和\或影视标签。进一步的是，对用户采集或上传的素材进行解析，并添加元素标签，包括：素材包括图片和\或视频；优选的，若素材为图片，解析是指：通过图像识别得到图片自身属性、图片内人物属性以及图片内背景属性；若素材为视频，解析是指：首先提取视频的关键帧，通过图像识别得到关键帧内人物属性以及背景属性，然后通过视频分析得到视频自身属性；更加优选的，元素标签为表征素材上述属性特征的标签。进一步的是，根据用户的偏好选择和\或元素标签中的至少一个标签，在资源库中匹配特征标签，得到最佳资源，包括：根据用户的偏好选择和\或元素标签中的至少一个标签，在音乐库中匹配乐曲标签，得到最佳音乐；根据用户的偏好选择和\或元素标签中的至少一个标签，在效果库中匹配效果标签，得到最佳效果；根据用户的偏好选择和\或元素标签中的至少一个标签，在空镜库中匹配影视标签，得到最佳空镜。进一步的是，根据用户的偏好选择和\或元素标签中的至少一个标签，在资源库中匹配特征标签，得到最佳资源，包括：根据用户的偏好选择和\或元素标签中的至少一个标签，在音乐库中匹配乐曲标签，得到最佳音乐；根据用户的偏好选择和\或元素标签中的至少一个标签，在与最佳音乐的乐曲标签关联的效果标签和\或影视标签中匹配，得到最佳效果和\或最佳空镜。进一步的是，对素材进行处理，包括：若素材为图片，则根据元素标签中的至少一个标签和\或影视构图原则对素材进行裁剪；若素材为视频，则根据元素标签和\或影视标签中的至少一个标签对素材进行截取。进一步的是，根据元素标签和最佳资源的特征标签计算素材与最佳资源的排序，包括：提取最佳音乐的音轨和时间轴，根据音轨的特征在时间轴上标记关键点，两个关键点之间的段落为关键段；将最佳效果插入关键点；根据元素标签和影视标签计算素材与最佳空镜的排序，然后插入关键段。进一步的是，偏好包括：音乐偏好、风格偏好、场景偏好。本专利技术还提供了一种基于素材进行资源匹配的视频自动生成系统，包括：获取模块，设置为获取待生成视频的素材，并获取用户对待生成视频的特征进行的偏好选择；资源库模块，设置为存储生成视频所需的多种资源；解析模块，设置为解析素材和资源，并添加特征标签；匹配模块，设置为根据用户的偏好选择和\或特征标签中的至少一个标签，在资源库模块中匹配最佳资源；视频生成模块，设置为根据元素标签和最佳资源的特征标签计算素材与最佳资源的排序，融合渲染后生成输出视频。本专利技术与现有的技术相比，其有益的特点是：1、制作方式简单，创作门槛低，用户只需要提供一组素材就能自动制作出一段精彩视频，不需要进行繁琐的操作，更不需要掌握专业性强的知识；2、视频生成方式灵活。由于在空镜、效果和音乐的匹配上是通过建立相应的资源库，然后根据用户的偏好选择和素材的特点从库中匹配最合适的资源，因此一个资源可以对应多个应用场景，一个素材也可以对应多个资源。同时也避免了制作的作品较为雷同的情况；3、资源的调用来自存储于服务器中资源库的资源，因此用户制作视频的成本更低，对手机的性能要求也较低。附图说明图1为本专利技术公开的一种基于素材进行空镜匹配的视频自动生成方法的流程图；图2为本专利技术公开的一种较优实施例中建立资源库的流程图；图3为本专利技术公开的一种较优实施例中得到最佳资源的流程图；图4为本专利技术公开的另一种较优实施例中建立资源库的流程图；图5为本专利技术公开的另一种较优实施例中得到最佳资源的流程图；图6为本专利技术公开的一种基于素材进行空镜匹配的视频自动生成系统的结构图。具体实施方式为了使本专利技术的目的、技术方案和优点更加清楚，下面结合附图对本专利技术作进一步阐述。在本专利技术的描述中，需要理解的是，术语“上”、“下”、“前”、“后”、“左”、“右”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本专利技术和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本专利技术的限制。实施例1如图1所示，是本专利技术提供的一种基于素材进行资源匹配的视频自动生成方法的流程图，包括以下步骤：步骤S1.建立资源库，库中所有资源均包含至少一个表征资源特征的特征标签；其中，资源为制作视频需要用到的一系列外部资源，即为组成视频的除了用户提供的素材以外的其他元素，包括但不限于：背景音乐、背景图片、转场特效、空镜等。在本实施例中，如图2所示，建立资源库具体包括：步骤S101.建立空本文档来自技高网...

【技术保护点】
1.一种基于素材进行资源匹配的视频自动生成方法，其特征在于，包括：/n建立资源库，库中所有资源均包含至少一个表征资源特征的特征标签；/n对用户采集或上传的素材进行解析，并添加元素标签；/n用户对待生成视频的特征进行偏好选择；/n根据用户的偏好选择和\或元素标签中的至少一个标签，在资源库中匹配特征标签，得到最佳资源；/n对素材进行处理；/n根据元素标签和最佳资源的特征标签计算素材与最佳资源的排序，融合渲染后生成输出视频。/n

【技术特征摘要】
1.一种基于素材进行资源匹配的视频自动生成方法，其特征在于，包括：
建立资源库，库中所有资源均包含至少一个表征资源特征的特征标签；
对用户采集或上传的素材进行解析，并添加元素标签；
用户对待生成视频的特征进行偏好选择；
根据用户的偏好选择和\或元素标签中的至少一个标签，在资源库中匹配特征标签，得到最佳资源；
对素材进行处理；
根据元素标签和最佳资源的特征标签计算素材与最佳资源的排序，融合渲染后生成输出视频。


2.如权利要求1的视频自动生成方法，其特征在于，建立资源库，库中所有资源均包含至少一个表征资源特征的特征标签，包括：
建立空镜库，库中空镜均包含至少一个表征空镜特征的影视标签；
建立音乐库，库中音乐均包含至少一个表征音乐特征的乐曲标签；
建立效果库，库中效果均包含至少一个表征效果特征的效果标签。


3.如权利要求2的视频自动生成方法，其特征在于，还包括：将音乐库与效果库和\或空镜库进行关联，一个乐曲标签至少关联一个效果标签和\或影视标签。


4.如权利要求1的视频自动生成方法，其特征在于，对用户采集或上传的素材进行解析，并添加元素标签，包括：
素材包括图片和\或视频；
优选的，若素材为图片，解析是指：通过图像识别得到图片自身属性、图片内人物属性以及图片内背景属性；若素材为视频，解析是指：首先提取视频的关键帧，通过图像识别得到关键帧内人物属性以及背景属性，然后通过视频分析得到视频自身属性；
更加优选的，元素标签为表征素材上述属性特征的标签。


5.如权利要求2的视频自动生成方法，其特征在于，根据用户的偏好选择和\或元素标签中的至少一个标签，在资源库中匹配特征标签，得到最佳资源，包括：
根据用户的偏好选择和\或元素标签中的至少一个标签，在音乐库中匹配乐曲标签，得到最佳音乐；
根据用户的偏好选择和\或元素标签中的至少一个标签，在效果库中匹配效果...

【专利技术属性】
技术研发人员：陈思多，顾锐，何梦奇，赵祥，曹晋，粟婕，许玉洁，巫文明，宋潘，尹攀，章智，陆景超，王海涛，冯浩然，李靖，陈思霖，龚俊衡，何海林，姚军，朱亮，罗金利，罗智健，
申请(专利权)人：成都品果科技有限公司，
类型：发明
国别省市：四川;51