处理方法、处理装置、电子设备制造方法及图纸

本申请公开了一种处理方法、处理装置、电子设备。处理方法包括：确定音频中的每一个声音与视频中的每一个对象的对应关系；根据所述对应关系确定感兴趣对象对应的感兴趣声音；增强所述感兴趣声音并减弱除所述感兴趣声音外的其他声音。本申请的处理方法、处理装置、电子设备通过增强感兴趣对象对应的感兴趣声音并减弱除感兴趣声音外的其他声音，能够重点突出感兴趣声音，从而能够使得音频与视频相匹配。

【技术实现步骤摘要】
处理方法、处理装置、电子设备
本申请涉及音频处理
，更具体而言，特别涉及一种处理方法、处理装置、电子设备。
技术介绍
在相关技术中，录制视频时通常也会录制音频。在场景比较复杂时，视频中的画面和音频中的声音都是多种多样的，因此，容易使得视频和对应的音频之间不匹配、不协调。
技术实现思路
本申请的实施方式提供一种处理方法、处理装置、电子设备。本申请的实施方式的处理方法包括：确定音频中的每一个声音与视频中的每一个对象的对应关系，根据所述对应关系确定感兴趣对象对应的感兴趣声音，增强所述感兴趣声音并减弱除所述感兴趣声音外的其他声音。本申请的实施方式的处理装置包括第一确定模块、第二确定模块和处理模块。所述第一确定模块用于确定音频中的每一个声音与视频中的每一个对象的对应关系，所述第二确定模块用于根据所述对应关系确定感兴趣对象对应的感兴趣声音，所述处理模块用于增强所述感兴趣声音并减弱除所述感兴趣声音外的其他声音。本申请的实施方式的电子设备包括处理器。所述处理器用于：确定音频中的每一个声音与视频中的每一个对象的对应关系，根据所述对应关系确定感兴趣对象对应的感兴趣声音，增强所述感兴趣声音并减弱除所述感兴趣声音外的其他声音。本申请实施方式的处理方法、处理装置、电子设备通过增强感兴趣对象对应的感兴趣声音并减弱除感兴趣声音外的其他声音，能够重点突出感兴趣声音，从而能够使得音频与视频相匹配。本申请的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本申请的实践了解到。附图说明本申请的上述和/或附加的方面和优点从结合下面附图对实施方式的描述中将变得明显和容易理解，其中：图1是本申请某些实施方式的处理方法的流程示意图；图2是本申请某些实施方式的处理装置的示意图；图3是本申请某些实施方式的电子设备的结构示意图；图4和图5是本申请某些实施方式的处理方法的场景示意图；图6至图11是本申请实施方式的处理方法的流程示意图；图12是本申请某些实施方式的处理方法的场景示意图。具体实施方式下面详细描述本申请的实施方式，所述实施方式的实施方式在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施方式是示例性的，仅用于解释本申请，而不能理解为对本申请的限制。请参阅图1，本申请实施方式的处理方法包括：01：确定音频中的每一个声音与视频中的每一个对象的对应关系；02：根据对应关系确定感兴趣对象对应的感兴趣声音；03：增强感兴趣声音并减弱除感兴趣声音外的其他声音。请参阅图2，本申请实施方式的处理装置100包括第一确定模块10、第二确定模块20和处理模块30。本申请的处理方法可以由本申请实施方式的处理装置100实现，其中，步骤01可以由第一确定模块10实现，步骤02可以由第二确定模块20实现，步骤03可以由处理模块30实现，也即是说，第一确定模块10用于确定音频中的每一个声音与视频中的每一个对象的对应关系。第二确定模块20用于根据对应关系确定感兴趣对象对应的感兴趣声音。处理模块30用于增强感兴趣声音并减弱除感兴趣声音外的其他声音。请参阅图3，本申请实施方式的电子设备1000包括处理器200。本申请实施方式的处理方法可以由本申请实施方式的电子设备1000实现，其中，步骤01、步骤02、步骤03均可以由处理器200实现，也即是说，处理器200可用于：确定音频中的每一个声音与视频中的每一个对象的对应关系；根据对应关系确定感兴趣对象对应的感兴趣声音；增强感兴趣声音并减弱除感兴趣声音外的其他声音。处理器200可以是指驱动板。驱动板可以是中央处理单元(CentralProcessingUnit，CPU)，还可以是其他通用处理器、数字信号处理器(DigitalSignalProcessor，DSP)、专用集成电路(ApplicationSpecificIntegratedCircuit，ASIC)、现成可编程门阵列(Field-ProgrammableGateArray，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。在某些实施方式中，电子设备1000包括成像元件300和声电元件400。成像元件300用于录制视频，声电元件400用于录制音频。其中，成像元件300可以是电荷耦合器件(ChargeCoupledDevice，CCD)，电荷耦合器件可以将图像光信号变为电信号，电荷耦合器件可以利用少数载流子的注入、存储和转移等物理过程来完成几种电路功能，电荷耦合器件具有体积小、重量轻、功耗低、可靠性好以及光谱响应宽等优点。声电元件400可以是声音传感器，声音传感器内置一个对声音敏感的电容式驻极体话筒，声波使话筒内的驻极体薄膜振动导致电容发生变化，而产生与之对应变化的微小电压，经过模拟讯号转换为数字讯号后被数据采集器接收。声音传感器在电子设备1000中可以用于录制音频。在某些实施方式中，电子设备1000包括显示屏，显示屏用于显示成像元件300录制的视频画面。本申请实施方式的电子设备1000可以是配置有处理器200、成像元件300和声电元件400的终端设备。例如，电子设备1000可以包括智能手机、摄像机、平板电脑或其他支持音频处理的终端设备。在相关技术中，录制视频时通常也会录制音频。在场景比较复杂时，视频中的画面和音频中的声音都是多种多样的，因此，容易形成视频和对应的音频之间不匹配、不协调等问题。为了解决这些问题，本申请公开的处理方法、处理装置100、电子设备1000通过增强感兴趣对象对应的感兴趣声音并减弱除感兴趣声音外的其他声音，能够重点突出感兴趣声音，从而能够使得音频与视频相匹配。本申请实施方式的处理方法可以由本申请实施方式的处理装置100实现，也可以由本申请实施方式的电子设备1000实现。视频中的对象可以是人物、动物、植物等可以拍摄到并通过显示屏显示出来画面的对象，视频中的对象还可以是不能通过显示屏显示出画面但能够对画面产生影响的对象，例如：画面中有树枝摆动则认为风和树枝都是视频中的对象；音频中声音可以是视频对象发出的声音，音频中声音还可以是风、雷声等未拍摄出画面但可以录制出音频的声音。如图4所示，在一个实施例中，视频中的对象为对象A、对象B和对象C，对象A和对象B可以是视频中的狮子A和狮子B，对象C可以是风。音频中的声音为声音a、声音b和声音c，其中，声音a可以是狮子A发出的吼叫声，声音b可以是狮子B发出的吼叫声，声音c可以是风产生的场景噪音。首先，确定音频中的每一个声音与视频中的每一个对象的对应关系，例如：确定音频中声音a与狮子A为对应关系；声音b与狮子B为对应关系；声音c与风为对应关系。其次，可以根据对应关系确定感兴趣对象对应的感兴趣声音，例如：可以确定感兴趣对象为狮子A和感兴趣对象狮子B，感兴趣声音为感兴趣声音a和感兴趣声音b。最后，可以增强感兴趣声音并减弱除本文档来自技高网...

【技术保护点】
1.一种处理方法，其特征在于，所述处理方法包括：/n确定音频中的每一个声音与视频中的每一个对象的对应关系；/n根据所述对应关系确定感兴趣对象对应的感兴趣声音；/n增强所述感兴趣声音并减弱除所述感兴趣声音外的其他声音。/n

【技术特征摘要】
1.一种处理方法，其特征在于，所述处理方法包括：
确定音频中的每一个声音与视频中的每一个对象的对应关系；
根据所述对应关系确定感兴趣对象对应的感兴趣声音；
增强所述感兴趣声音并减弱除所述感兴趣声音外的其他声音。


2.根据权利要求1所述的处理方法，其特征在于，所述对象与所述声音之间存在预设关系，所述确定音频中的每一个声音与视频中的每一个对象的对应关系，包括：
根据所述预设关系确定所述音频中的每一个所述声音与所述视频中的每一个所述对象的所述对应关系。


3.根据权利要求1所述的处理方法，其特征在于，所述确定音频中的每一个声音与视频中的每一个对象的对应关系，包括：
在一个所述声音对应多个所述对象时，根据多个所述对象的动作状态确定所述对应关系。


4.根据权利要求1所述的处理方法，其特征在于，在所述根据所述对应关系确定感兴趣对象对应的感兴趣声音前，所述处理方法还包括：
确定所述视频中的对焦对象；
确定所述对焦对象为所述感兴趣对象。


5.根据权利要求4所述的处理方法，其特征在于，所述确定所述视频中的对焦对象，包括：
确定所述视频在录制过程中的对焦位置所对应的所述对象为所述对焦对象。


6...

【专利技术属性】
技术研发人员：崔志佳，范泽华，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：广东;44