音视频处理系统和方法技术方案

本申请涉及一种音视频处理系统和方法，其中，该音视频处理系统包括：获取模块、时间轴标注模块以及干扰处理模块，获取模块，用于获取原始音视频数据，将原始音视频数据发送至时间轴标注模块；时间轴标注模块，用于对原始音视频数据进行时间轴标注，得到预处理数据并发送至干扰处理模块；干扰处理模块，用于接收预处理数据，根据深度学习算法识别主音频频率和噪音频率，清除预处理数据的噪音；比对视频帧图像与标准帧图像对应的感兴趣区域，识别并清除预处理数据的干扰视频帧，得到目标数据。通过本申请，解决了音视频采集设备的抗干扰能力低下的问题，实现了提高音视频采集设备抗干扰能力的技术效果。力的技术效果。力的技术效果。

【技术实现步骤摘要】
音视频处理系统和方法


[0001]本申请涉及视频处理
，特别是涉及一种音视频处理系统和方法。

技术介绍

[0002]随着视频领域的快速发展，视频采集卡在各行各业得到广泛的应用，如教育录制、网络视频会议、远程培训、高清医疗、多媒体高清视频采集等。获取高清的音视频信息，成为这些领域日益迫切的需求。
[0003]现有的音视频处理技术，通过收集到的语音连续程度对语音的重要性进行判断，实现对重要音视频数据的处理。但是，在录制现场环境较为嘈杂时，最终得到音视频会包含噪音干扰和/或画面干扰，导致采集到音视频数据质量低下。
[0004]针对相关技术中存在音视频采集设备的抗干扰能力低下的问题，目前还没有提出有效的解决方案。

技术实现思路

[0005]在本实施例中提供了一种音视频处理系统和方法，以解决相关技术中音视频采集设备的抗干扰能力低下的问题。
[0006]第一个方面，在本实施例中提供了一种音视频处理系统，所述音视频处理系统包括获取模块、时间轴标注模块以及干扰处理模块，所述时间轴标注模块分别与所述获取模块以及干扰处理模块连接；
[0007]所述获取模块，用于对所述原始音频数据进行时间轴标注，得到预处理数据并发送至所述时间轴标注模块；
[0008]所述干扰处理模块，用于接收预处理数据，根据深度学习算法识别主音频频率和噪音频率，清除所述预处理数据的噪音；比对视频帧图像与标准帧图像对应感兴趣区域，识别并清除所述预处理数据的干扰视频帧，得到目标数据。
[0009]在其中的一个实施例中，所述获取模块包括音频获取单元和图像获取单元，所述音频获取单元与所述时间轴标注模块连接，所述图像获取单元与所述时间轴标注模块连接；所述音频获取单元，用于获取原始音频数据，将所述原始音频数据发送至所述时间轴标注模块；所述图像获取单元，用于获取的原始视频数据，将所述原始视频数据发送至所述时间轴标注模块。
[0010]在其中的一个实施例中，所述时间轴标注模块包括实时时间轴单元和音视频标注单元，所述实时时间轴单元分别与所述获取模块和所述音视频标注单元连接，所述音视频标注单元与所述干扰处理模块连接；所述实时时间轴单元，用于根据所述原始音视频数据的采集时间生成音频时间轴和视频时间轴并发送至所述音视频标注单元；所述音视频标注单元用于根据所述音频时间轴和所述视频时间轴对所述音视频数据进行时间轴标注，得到预处理数据。
[0011]在其中的一个实施例中，所述音视频处理系统还包括延迟校对模块，用于接收所
述预处理数据并进行音画同步，得到同步数据。
[0012]在其中的一个实施例中，所述延迟校对模块包括时间轴对照单元、音频移动单元，所述时间轴对照单元分别与所述音频移动单元和所述时间轴标注模块连接；所述时间轴对照单元用于对所述预处理数据的音频时间轴和视频时间轴进行对照，得到对照结果并发送至所述音频移动单元；所述音频移动单元用于根据所述对照结果将所述音频时间轴和所述视频时间轴对齐，得到所述同步数据。
[0013]在其中的一个实施例中，所述干扰处理模块包括噪音识别单元、主音频识别单元以及噪音清除单元，所述噪音识别单元和所述主音频识别单元分别与所述时间轴标注模块连接，所述噪音清除单元分别与所述噪音识别单元和所述主音频识别单元连接；所述噪音识别单元用于根据所述预设噪音频率对所述预处理数据进行噪音识别，生成噪音识别结果并发送至所述噪音清除单元；所述噪音清除单元用于根据所述噪音识别结果清除噪音，根据所述主音频识别结果对所述主音频数据进行滤波，得到目标音频数据。
[0014]在其中的一个实施例中，所述干扰处理模块还包括受扰画面识别单元和受扰画面清除单元，所述受扰画面识别单元分别与所述时间轴标注模块和所述受扰画面清除单元连接；所述受扰画面识别单元用于根据视频帧图像与标准帧图像的交并比识别受扰视频帧，得到受扰画面识别结果并发送至所述受扰画面清除单元；所述受扰画面清除单元，用于根据所述受扰画面识别结果清除预设时间范围内的适配帧图像，得到目标视频数据，所述受扰视频帧对应的时间刻度位于所述预设范围内。
[0015]在其中的一个实施例中，音视频处理系统还包括特征码编入模块，所述特征码编入模块与所述时间轴标注模块连接；所述特征码编入模块用于接收所述预处理数据并对所述预处理数据设置使用权限，得到加密数据。
[0016]在其中的一个实施例中，所述特征码编入模块还包括特征码生成单元和解码次数限制单元，所述特征生成单元和所述解码次数限制单元分别与所述时间轴标注模块连接；所述特征码生成单元，用于生成特征码，并将所述特征码作为使用权限的解锁密钥发送至指定客户端；所述解码次数限制单元用于设定所述加密数据的解码次数。
[0017]第二个方面，在本实施例中提供了一种音视频处理方法，该方法包括：获取原始音视频数据；对所述原始音视频数据进行时间轴标注，得到预处理数据；识别主音频频率和噪音频率，清除所述预处理数据的噪音；比对视频帧图像与标准帧图像对应感兴趣区域，识别并清除所述预处理数据的干扰视频帧，得到目标数据。该方法还在用于通过上述第一个方面所述的音视频数据获取系统实现。
[0018]与相关技术相比，在本实施例中提供的音视频处理系统和方法，通过设置获取模块、时间轴标注模块以及干扰处理模块，所述时间轴标注模块分别与所述获取模块以及干扰处理模块连接；所述获取模块，用于获取原始音视频数据，将所述原始音视频数据发送至所述时间轴标注模块；所述时间轴标注模块，用于对所述原始音视频数据进行时间轴标注，得到预处理数据并发送至所述干扰处理模块；所述干扰处理模块，用于接收预处理数据，根据深度学习算法识别主音频频率和噪音频率，清除所述预处理数据的噪音；比对视频帧图像与标准帧图像对应感兴趣区域，识别并清除所述预处理数据的干扰视频帧，得到目标数据，完成了对音视频采集设备采集到的原始音视频数据进行抗干扰处理，解决了音视频采集设备的抗干扰能力低下的问题，实现了提高音视频采集设备抗干扰能力的技术效果。
[0019]本申请的一个或多个实施例的细节在以下附图和描述中提出，以使本申请的其他特征、目的和优点更加简明易懂。
附图说明
[0020]此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：
[0021]图1是根据本实施例的音视频处理系统的示意图；
[0022]图2是根据本申请实施例的音视频处理系统的获取模块示意图；
[0023]图3是根据本申请实施例的音视频处理系统的时间轴标注模块示意图；
[0024]图4是根据本申请实施例的音视频处理系统的延迟校对模块示意图；
[0025]图5是根据本申请实施例的音视频处理系统的干扰处理模块示意图；
[0026]图6是根据本申请另一实施例的音视频处理系统的干扰处理模块示意图；
[0027]图7是根据本申请实施例的音视频处理系统的受扰画面处理过程示本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种音视频处理系统，其特征在于，包括：获取模块、时间轴标注模块以及干扰处理模块，所述时间轴标注模块分别与所述获取模块以及干扰处理模块连接；所述获取模块，用于获取原始音视频数据，将所述原始音视频数据发送至所述时间轴标注模块；所述时间轴标注模块，用于对所述原始音视频数据进行时间轴标注，得到预处理数据并发送至所述干扰处理模块；所述干扰处理模块，用于接收预处理数据，根据深度学习算法识别主音频频率和噪音频率，清除所述预处理数据的噪音；比对视频帧图像与标准帧图像对应的感兴趣区域，识别并清除所述预处理数据的干扰视频帧，得到目标数据。2.根据权利要求1所述的音视频处理系统，其特征在于，所述获取模块包括音频获取单元和图像获取单元，所述音频获取单元与所述时间轴标注模块连接，所述图像获取单元与所述时间轴标注模块连接；所述音频获取单元，用于获取的原始音频数据，将所述原始音频数据发送至所述时间轴标注模块；所述图像获取单元，用于获取的原始视频数据，将所述原始视频数据发送至所述时间轴标注模块。3.根据权利要求1所述的音视频处理系统，其特征在于，所述时间轴标注模块包括实时时间轴单元和音视频标注单元，所述实时时间轴单元分别与所述获取模块和所述音视频标注单元连接，所述音视频标注单元与所述干扰处理模块连接；所述实时时间轴单元，用于根据所述原始音视频数据的采集时间生成音频时间轴和视频时间轴并发送至所述音视频标注单元；所述音视频标注单元用于根据所述音频时间轴和所述视频时间轴对所述音视频数据进行时间轴标注，得到预处理数据。4.根据权利要求1所述的音视频处理系统，其特征在于，所述音视频处理系统还包括延迟校对模块，所述延迟校对模块与所述时间轴标注模块连接；所述延迟校对模块，用于接收所述预处理数据并进行音画同步，得到同步数据。5.根据权利要求4所述的音视频处理系统，其特征在于，所述延迟校对模块包括时间轴对照单元、音频移动单元，所述时间轴对照单元分别与所述音频移动单元和所述时间轴标注模块连接；所述时间轴对照单元用于对所述预处理数据的音频时间轴和视频时间轴进行对照，得到对照结果并发送至所述音频移动单元；所述音频移动单元用于根据所述对照结果将所述音频时间轴和所述视频时间轴对齐，得到所述同步数据。6....

【专利技术属性】
技术研发人员：马飞，
申请(专利权)人：浙江大华技术股份有限公司，
类型：发明
国别省市：