演奏乐器的选择方法、装置、设备及存储介质制造方法及图纸

本发明专利技术涉及人工智能技术领域，公开了一种演奏乐器的选择方法、装置、设备及存储介质。该方法通过获取当前演奏现场的场景信息后对获得的信息进行处理，得到当前演奏场景中人物的情绪信息以及当前的演奏场景类型；根据得到的情绪信息和演奏场景类型，确定对应的演奏音效，根据演奏音效进行音效特征的筛选，从而选择出符合当前演奏现场需求的演奏乐器。这种演奏乐器的选择方法能够自动、智能地选择适合当前演奏所需的乐器，降低了非专家或编曲创作经验不够的人的创作难度。

【技术实现步骤摘要】
演奏乐器的选择方法、装置、设备及存储介质
本专利技术涉及人工智能
，具体涉及一种演奏乐器的选择方法、装置、设备及存储介质。
技术介绍
各种乐器具有不同的流派和其音色特征，在编曲或进行现场乐器演奏的准备时，对于乐器的正确选择具有重要的地位，不同乐器音色之间的搭配可以使得演奏出来的乐音更加具有欣赏性。在前人的演奏经验中，乐器的搭配逐渐产生了一些规律，这些规律逐渐变为音乐审美体系中的基本准则与规范。这些规律与演奏乐器的特征息息相关。而音乐并不是只有一种，还有很多种乐曲相较于固定的音乐理性规则，它更具有艺术欣赏性。这些时候，演奏乐器需演奏的不同场景类型进行选择。乐器组合方法大多需要依赖于专家或行业编制的固定规则，或者创作者经过丰富的个人创作经验来进行选择。在现有技术中，缺少对演奏乐器的自动化选择的方法，对于非专家或创作经验不够的人来说，在创作乐曲时选择乐器的门槛较高、难度较大且过程较为繁琐。
技术实现思路
本专利技术的主要目的在于解决现有技术中，缺少对演奏乐器的自动化选择的方法，对于非专家或创作经验不够的人来说，在创作乐曲时选择乐器的门槛较高、难度较大且过程较为繁琐的问题。本专利技术第一方面提供了一种演奏乐器的选择方法，包括：获取当前演奏现场的场景信息，其中，所述场景信息包括人物图像和环境图像；利用图像识别算法，对所述场景信息进行人物和环境的分离，得到人物图像和环境图像；根据人脸识别算法，对所述人物图像中的人物进行面部识别处理，得到情绪信息；提取所述环境图像中的场景布局，基于所述场景布局从预设的演奏场景关系表中查询出与所述演奏现场对应的场景类型，其中，所述演奏场景关系表包括至少两个不同的演奏现场的场景布局的数据；根据所述情绪信息和所述场景类型确定对应的演奏音效，并基于所述演奏音效对预先基于所述演奏现场配置的所有乐器进行音效特征的筛选，得到与所述情绪信息和所述场景类型相匹配的演奏乐器。可选的，在本专利技术第一方面的第一种实现方式中，所述场景信息包括所述演奏现场的多帧图像数据；所述利用图像识别算法，对所述场景信息进行人物和环境的分离，得到人物图像和环境图像包括：对多帧所述图像数据进行预处理，得到现场照片，其中所述预处理包括降噪和图像融合；利用所述图像识别算法中的轮廓描绘算法，对所述现场照片中的轮廓边缘特征进行检测，并绘制轮廓，得到人物轮廓和背景轮廓；利用所述图像识别算法中的前景和深景分离算法，将所述人物轮廓和所述背景轮廓对应的图像数据从所述现场照片中提取出来，得到前景照片和深景照片，其中所述前景照片包括人物图像数据，所述深景照片包括背景图像数据。可选的，在本专利技术第一方面的第二种实现方式中，所述根据人脸识别算法，对所述人物图像中的人物进行面部识别处理，得到情绪信息包括：利用人脸识别算法，对所述前景照片中人脸的轮廓进行识别，并提取所述人脸中的表情特征，得到表情特征集；将所述表情特征集，与预设的表情与情绪的对应关系，确定所述人脸对应的情绪信息。可选的，在本专利技术第一方面的第三种实现方式中，所述提取所述环境图像中的场景布局，基于所述场景布局从预设的演奏场景关系表中查询出与所述演奏现场对应的场景类型包括：将所述环境图像输入至预设的场景识别模型中，通过所述场景识别模型提取所述环境图像中的几何特征，得到环境特征集；基于所述环境特征集绘制所述环境图像的场景布局，得到所述演奏现场的效果图；基于所述效果图，从预设的演奏场景关系表中查询出与所述演奏现场对应的场景类型。可选的，在本专利技术第一方面的第四种实现方式中，在所述根据所述情绪信息和所述场景类型确定对应的演奏音效，并基于所述演奏音效对预先基于所述演奏现场配置的所有乐器进行音色特征的筛选，得到与所述情绪信息和所述场景类型相匹配的演奏乐器之前，还包括：获取不同场景类型的演奏现场的音乐配置方案，其中所述音乐配置方案包括常用配乐歌曲的信息和演奏乐器的选择信息，所述配乐歌曲的信息包括演奏乐器的种类信息和歌曲类型的信息；根据所述场景类型及所述演奏乐器的种类信息，建立乐器使用数据库，其中，所述乐器使用数据库包括演奏乐器的种类与场景类型的对应关系表。可选的，在本专利技术第一方面的第五种实现方式中，所述根据所述情绪信息和所述场景类型确定对应的演奏音效，并基于所述演奏音效对预先基于所述演奏现场配置的所有乐器进行音色特征的筛选，得到与所述情绪信息和所述场景类型相匹配的演奏乐器包括：根据所述情绪信息和场景类型，从预配置的演奏音效对应关系表中查询出同时满足所述情绪信息和场景类型的演奏音效；根据所述演奏音效，从所述乐器使用数据库中查询出与所述演奏音效对应的乐器的种类信息；利用音频识别技术，提取所述乐器的种类信息对应的乐器所产生的音色特征；将所述音色特征与所述演奏音效进行匹配，并计算出匹配度，选择匹配度大于预设匹配值的乐器作为所述演奏现场的演奏乐器。可选的，在本专利技术第一方面的第六种实现方式中，所述根据所述情绪信息和场景类型，从预配置的演奏音效对应关系表中查询出同时满足所述情绪信息和场景类型的演奏音效包括：根据所述场景类型，确定所述情绪信息的比重；根据所述比重对所述场景类型和情绪信息进行优先级的排序，其中，所述优先级为用于匹配生成演奏音效的因素影响等级；根据所述优先级，分别计算出所述场景类型和情绪信息在查询所述演奏音效对应关系表时的匹配比例；根据所述场景类型和所述情绪信息，从预配置的演奏音效对应关系表中查询出所述比例的演奏音效。本专利技术第二方面提供了一种演奏乐器的选择装置，包括：场景获取模块，用于获取当前演奏现场的场景信息，其中，所述场景信息包括人物图像和环境图像；场景分离模块，用于利用图像识别算法，对所述场景信息进行人物和环境的分离，得到人物图像和环境图像；情绪识别模块，用于根据人脸识别算法，对所述人物图像中的人物进行面部识别处理，得到情绪信息；场景类型识别模块，用于提取所述环境图像中的场景布局，基于所述场景布局从预设的演奏场景关系表中查询出与所述演奏现场对应的场景类型，其中，所述演奏场景关系表包括至少两个不同的演奏现场的场景布局的数据；音效匹配模块，用于根据所述情绪信息和所述场景类型确定对应的演奏音效，并基于所述演奏音效对预先基于所述演奏现场配置的所有乐器进行音效特征的筛选，得到与所述情绪信息和所述场景类型相匹配的演奏乐器。可选的，在本专利技术第一方面的第一种实现方式中，所述场景信息包括所述演奏现场的多帧图像数据；所述场景分离模块包括：预处理单元，用于对多帧所述图像数据进行预处理，得到现场照片，其中所述预处理包括降噪和图像融合；轮廓识别单元，用于利用所述图像识别算法中的轮廓描绘算法，对所述现场照片中的轮廓边缘特征进行检测，并绘制轮廓，得到人物轮廓和背景轮廓；分离单元，用于利用所述图像识别算法中的前景和深景分离算法，将所述人物轮廓和本文档来自技高网...

【技术保护点】
1.一种演奏乐器的选择方法，其特征在于，所述演奏乐器的选择方法包括：/n获取当前演奏现场的场景信息，其中，所述场景信息包括人物图像和环境图像；/n利用图像识别算法，对所述场景信息进行人物和环境的分离，得到人物图像和环境图像；/n根据人脸识别算法，对所述人物图像中的人物进行面部识别处理，得到情绪信息；/n提取所述环境图像中的场景布局，基于所述场景布局从预设的演奏场景关系表中查询出与所述演奏现场对应的场景类型，其中，所述演奏场景关系表包括至少两个不同的演奏现场的场景布局的数据；/n根据所述情绪信息和所述场景类型确定对应的演奏音效，并基于所述演奏音效对预先基于所述演奏现场配置的所有乐器进行音效特征的筛选，得到与所述情绪信息和所述场景类型相匹配的演奏乐器。/n

【技术特征摘要】
1.一种演奏乐器的选择方法，其特征在于，所述演奏乐器的选择方法包括：
获取当前演奏现场的场景信息，其中，所述场景信息包括人物图像和环境图像；
利用图像识别算法，对所述场景信息进行人物和环境的分离，得到人物图像和环境图像；
根据人脸识别算法，对所述人物图像中的人物进行面部识别处理，得到情绪信息；
提取所述环境图像中的场景布局，基于所述场景布局从预设的演奏场景关系表中查询出与所述演奏现场对应的场景类型，其中，所述演奏场景关系表包括至少两个不同的演奏现场的场景布局的数据；
根据所述情绪信息和所述场景类型确定对应的演奏音效，并基于所述演奏音效对预先基于所述演奏现场配置的所有乐器进行音效特征的筛选，得到与所述情绪信息和所述场景类型相匹配的演奏乐器。


2.根据权利要求1所述的演奏乐器的选择方法，其特征在于，所述场景信息包括所述演奏现场的多帧图像数据；所述利用图像识别算法，对所述场景信息进行人物和环境的分离，得到人物图像和环境图像包括：
对多帧所述图像数据进行预处理，得到现场照片，其中所述预处理包括降噪和图像融合；
利用所述图像识别算法中的轮廓描绘算法，对所述现场照片中的轮廓边缘特征进行检测，并绘制轮廓，得到人物轮廓和背景轮廓；
利用所述图像识别算法中的前景和深景分离算法，将所述人物轮廓和所述背景轮廓对应的图像数据从所述现场照片中提取出来，得到前景照片和深景照片，其中所述前景照片包括人物图像数据，所述深景照片包括背景图像数据。


3.根据权利要求2所述的演奏乐器的选择方法，其特征在于，所述根据人脸识别算法，对所述人物图像中的人物进行面部识别处理，得到情绪信息包括：
利用人脸识别算法，对所述前景照片中人脸的轮廓进行识别，并提取所述人脸中的表情特征，得到表情特征集；
将所述表情特征集，与预设的表情与情绪的对应关系，确定所述人脸对应的情绪信息。


4.根据权利要求1-3任一项所述的演奏乐器的选择方法，其特征在于，所述提取所述环境图像中的场景布局，基于所述场景布局从预设的演奏场景关系表中查询出与所述演奏现场对应的场景类型包括：
将所述环境图像输入至预设的场景识别模型中，通过所述场景识别模型提取所述环境图像中的几何特征，得到环境特征集；
基于所述环境特征集绘制所述环境图像的场景布局，得到所述演奏现场的效果图；
基于所述效果图，从预设的演奏场景关系表中查询出与所述演奏现场对应的场景类型。


5.根据权利要求1-3中任一项所述的演奏乐器的选择方法，其特征在于，在所述根据所述情绪信息和所述场景类型确定对应的演奏音效，并基于所述演奏音效对预先基于所述演奏现场配置的所有乐器进行音色特征的筛选，得到与所述情绪信息和所述场景类型相匹配的演奏乐器之前，还包括：
获取不同场景类型的演奏现场的音乐配置方案，其中所述音乐配置方案包括常用配乐歌曲的信息和演奏乐器的选择信息，所述配乐歌曲的信息包括演奏乐器的种类信息和歌曲类型的信息；
根据所述场...

【专利技术属性】
技术研发人员：杨艾琳，蒋慧军，万欣茹，李剑锋，肖京，
申请(专利权)人：平安科技深圳有限公司，
类型：发明
国别省市：广东;44