一种结合yolo3与flownet2网络的监控视频压缩及解压方法技术

本发明专利技术提供一种结合yolo3与flownet2网络的监控视频压缩及解压方法，压缩的实现步骤如下：准备监控视频文件；切分视频文件，提取视频文件中的所有帧图像数据；利用yolo3网络对帧图像数据进行目标检测，检测目标根据实际需求设置；对检测到目标与未检测到目标的视频段首帧图像数据进行压缩；利用flownet2网络提取检测到目标的视频段相邻帧之间光流信息；利用网络重构一帧并与原帧相减获得残差数据；对光流信息以及残差数据进行取整量化以及算术编码熵编码。本方法删除了监控视频中大量时间与空间上的冗余信息，在监控视频上比传统的视频压缩方法(如H.263，H.26)具有更高的压缩比，节省了存储空间，提升了储存效益。

A method of video compression and decompression based on yolo3 and flowet2

【技术实现步骤摘要】
一种结合yolo3与flownet2网络的监控视频压缩及解压方法
本专利技术涉及深度学习领域，具体地说是一种结合yolo3与flownet2网络的监控视频压缩及解压方法。
技术介绍
视频压缩一直是学术界和工业界的研究热点之一。随着信息技术的飞速发展，多媒体信息逐渐成为人类获取外界信息最主要的载体。视频压缩是通过视频编码改变视频内容格式的过程，目标是减少视频所占用的储存空间。当今的视频存储中，有很大一部分来自监控视频。特别随着数字化生活的进一步推进，日常生活中会产生大量高清监控视频。与普通视频相比，监控视频往往有如下几种特点：一、视频内容稳定：对于监控视频的性质而言，监控视频内容场景通常比较稳定，少有剧烈变化，视频帧数通常较低。特别在夜间，监控视频内容往往不发生改变；二、视频背景固定：由于监控摄像头往往是固定的，监控视频背景在较长一段时间中基本不会发生改变；三、视频目标明确：监控视视频目通常具有较高的针对性，大多聚焦于对行人以及车辆的监控，视频目标明确。因此，监控视频比普通视频具有更高的压缩潜力。传统的视频压缩方法(H.263，H264等)基于帧内预测、帧间预测、量化和编码等技术对视频进行压缩，对普通视频压缩已经取得了优秀的成果，并且广泛应用到实际中。但是传统的视频压缩方法需要储存每一帧的数据，这种方法并不能很好的压缩监控视频，监控视频中仍存在大量时间与内容冗余信息。近年来，随着深度学习技术的发展，尤其是卷积神经网络在图像处理和计算机领域的成功，让利用深度学习技术对视频进行高效压缩成为可能。鉴于此，研发一种基于深度学习技术对视频进行压缩的方法具有十分重要的现实意义。
技术实现思路
本专利技术的技术任务是针对现有技术的不足，提供一种结合yolo3与flownet2网络的监控视频压缩及解压方法，本方法通过yolo3网络对输入的监控视频帧数据进行目标检测，对检测到目标帧数据通过flownet2提取光流数据并进行压缩并储存，删除了监控视频中大量时间与空间上的冗余信息。本方法在监控视频上比传统的视频压缩方法如H.263，H.264等具有更高的压缩比，节省了存储空间，提升了储存效益。本专利技术解决其技术问题所采用的技术方案是：1、本专利技术提供一种结合yolo3与flownet2网络的监控视频压缩及解压方法，该方法的实现步骤如下：S1、准备监控视频文件；S2、切分视频文件，将视频文件切分成一帧一帧的图像文件，提取视频文件中的所有帧图像数据；S3、利用yolo3网络对帧图像数据进行目标检测，检测目标根据实际需求设置；S4、对检测到目标与未检测到目标的视频段首帧图像数据进行压缩；S5、利用flownet2网络提取检测到目标的视频段相邻帧之间光流信息；S6、利用网络重构一帧并与原帧相减获得残差数据；S7、对光流信息以及残差数据进行取整量化以及算术编码熵编码。方案优选地，步骤S2中，通过ffmpeg工具提取视频文件中的所有帧图像数据。方案优选地，步骤S4中，利用JPEG或JPEG2000对检测到目标与未检测到目标的视频段首帧图像数据进行压缩。方案优选地，步骤S4中，对连续的未检测到目标的帧图像数据，对首帧使用传统图像压缩方式进行压缩并保持，其余帧图像不保存；对连续的检测到目标的帧图像数据，对首帧使用传统图像压缩方式进行压缩并保持；方案优选地，步骤S5中，对连续的检测到目标的帧图像数据，对其余帧图像利用flownet2网络提取检测到目标的视频段相邻帧之间光流信息。方案优选地，步骤S6中，将光流信息与其前一帧图像数据利用MotionCompensation网络重构该帧。2、本专利技术另提供一种监控视频解压缩的方法，该方法的实现步骤如下：A、对首帧图像数据进行解压；B、对未检测到目标的视频段复制首帧数据；C、对检测到目标的视频段利用光流信息以及残差数据通过MotionCompensation网络重构该段帧数据；D、将所有重构帧图像合成完整视频。方案优选地，步骤A中，利用JPEG或JPEG2000对首帧图像数据进行解压。方案优选地，步骤C中，对检测到目标的视频段利用光流信息以及残差数据通过MotionCompensation网络重构该段帧数据。方案优选地，步骤D中，将所有重构帧图像通过ffmpeg工具合成完整视频。本专利技术的一种结合yolo3与flownet2网络的监控视频压缩及解压方法与现有技术相比所产生的有益效果是：本专利技术通过yolo3网络对输入的监控视频帧数据进行目标检测，对检测到目标帧数据通过flownet2提取光流数据并进行压缩并储存，删除了监控视频中大量时间与空间上的冗余信息。本方法在监控视频上比传统的视频压缩方法如H.263，H.264等具有更高的压缩比。附图说明为了更清楚地描述本专利技术自动喷雾结合捕尘网的工作原理，下面将附上简图作进一步说明。附图1是本专利技术一种结合yolo3与flownet2网络的监控视频压缩方法的流程示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。实施例一请参阅图1，本专利技术的一种结合yolo3与flownet2网络的监控视频压缩方法，该方法通过yolo3网络对输入的监控视频帧数据进行目标检测，对检测到目标帧数据通过flownet2提取光流数据并进行压缩并储存，该方法的实现步骤如下：S1、准备监控视频文件；S2、切分视频文件，将视频文件切分成一帧一帧的图像文件，提取视频文件中的所有帧图像数据；S3、利用yolo3网络对帧图像数据进行目标检测，检测目标根据实际需求设置；S4、对检测到目标与未检测到目标的视频段首帧图像数据进行压缩；S5、利用flownet2网络提取检测到目标的视频段相邻帧之间光流信息；S6、利用网络重构一帧并与原帧相减获得残差数据；S7、对光流信息以及残差数据进行取整量化以及算术编码熵编码。上述步骤S2中，通过ffmpeg工具提取视频文件中的所有帧图像数据。上述步骤S4中，利用传统图像压缩方式(JPEG或JPEG2000)对检测到目标与未检测到目标的视频段首帧图像数据进行压缩。上述步骤S4中，对连续的未检测到目标的帧图像数据，对首帧使用传统图像压缩方式(JPEG或JPEG2000)进行压缩并保持，其余帧图像不保存；对连续的检测到目标的帧图像数据，对首帧使用传统图像压缩方式进行压缩并保持；上述步骤S5中，对连续的检测到目标的帧图像数据，对其余帧图像利用flownet2网络提取检测到目标的视频段相邻帧之间光流信息本文档来自技高网...

【技术保护点】
1.一种结合yolo3与flownet2网络的监控视频压缩方法，其特征在于，该方法通过yolo3网络对输入的监控视频帧数据进行目标检测，对检测到目标帧数据通过flownet2提取光流数据并进行压缩并储存，/n该方法的实现步骤如下：/nS1、准备监控视频文件；/nS2、切分视频文件，将视频文件切分成一帧一帧的图像文件，提取视频文件中的所有帧图像数据；/nS3、利用yolo3网络对帧图像数据进行目标检测，检测目标根据实际需求设置；/nS4、对检测到目标与未检测到目标的视频段首帧图像数据进行压缩；/nS5、利用flownet2网络提取检测到目标的视频段相邻帧之间光流信息；/nS6、利用网络重构一帧并与原帧相减获得残差数据；/nS7、对光流信息以及残差数据进行取整量化以及算术编码熵编码。/n

【技术特征摘要】
1.一种结合yolo3与flownet2网络的监控视频压缩方法，其特征在于，该方法通过yolo3网络对输入的监控视频帧数据进行目标检测，对检测到目标帧数据通过flownet2提取光流数据并进行压缩并储存，
该方法的实现步骤如下：
S1、准备监控视频文件；
S2、切分视频文件，将视频文件切分成一帧一帧的图像文件，提取视频文件中的所有帧图像数据；
S3、利用yolo3网络对帧图像数据进行目标检测，检测目标根据实际需求设置；
S4、对检测到目标与未检测到目标的视频段首帧图像数据进行压缩；
S5、利用flownet2网络提取检测到目标的视频段相邻帧之间光流信息；
S6、利用网络重构一帧并与原帧相减获得残差数据；
S7、对光流信息以及残差数据进行取整量化以及算术编码熵编码。


2.根据权利要求1所述的一种结合yolo3与flownet2网络的监控视频压缩方法，其特征在于，步骤S2中，通过ffmpeg工具提取视频文件中的所有帧图像数据。


3.根据权利要求1或2所述的一种结合yolo3与flownet2网络的监控视频压缩方法，其特征在于，步骤S4中，利用JPEG或JPEG2000对检测到目标与未检测到目标的视频段首帧图像数据进行压缩。


4.根据权利要求1或2所述的一种结合yolo3与flownet2网络的监控视频压缩方法，其特征在于，步骤S4中，对连续的未检测到目标的帧图像数据，对首帧使用传统图像压缩方式进行压缩并保持，其余帧图像不保存；
对连...

【专利技术属性】
技术研发人员：汝佩哲，李锐，金长新，
申请(专利权)人：济南浪潮高新科技投资发展有限公司，
类型：发明
国别省市：山东;37