一种基于超分辨率技术的目标检测系统技术方案

技术编号:31741050 阅读:17 留言:0更新日期:2022-01-05 16:19
本发明专利技术提供了一种基于超分辨率技术的目标检测系统,包括:目标图像获取单元、超分辨率重建单元、目标检测单元和信息监管平台;所述目标图像获取单元用于采集待检测目标的图像信息;所述超分辨率重建单元用于对输入的图像进行超分辨率重建;所述目标检测单元通过超分目标检测模型对待测目标进行检测,并通过绊线检测方法判断是否有越界或入侵行为,并在有越界或入侵行为时进行报警提示;所述信息监管平台用于接收所述目标检测单元发送的目标检测信息和报警信息,并对检测目标及报警信息进行可视化显示,及向所述目标图像获取单元发送图像采集控制信息,本发明专利技术可对小目标和低分辨率目标进行精确检测,检测模式多样,且用户可进行远程智能管理。行远程智能管理。行远程智能管理。

【技术实现步骤摘要】
一种基于超分辨率技术的目标检测系统


[0001]本专利技术涉及目标检测
,尤其涉及到一种基于超分辨率技术的目标检测系统。

技术介绍

[0002]随着监控技术的日益成熟,目标检测系统被广泛应用在各行各业,例如,安全监测、交通违规检测等等。小目标由于分辨率低而缺乏辨别性的细节特征,容易和背景混淆,因而难以被正确检测,目前的目标检测系统,多对待检测的目标图像直接进行特征提取和检测识别,虽然这些算法对一般的目标检测具有优秀的检测识别能力,但对低清目标、小目标检测等特殊情况下的的检测能力依然略显不足,但若将超分辨率算法与目标检测算法结合,则可较好地改善特殊应用场景下的检测能力,超分辨率技术是指利用算法将图像从低分辨率恢复到高分辨率的过程,其可以增强图像的细节和局部特征,使得识别更加精准。
[0003]综上所述,提供一种可对小目标和低分辨率目标进行精确检测,检测模式多样,且用户可进行远程智能管理的基于超分辨率技术的目标检测系统,是本领域技术人员急需解决的问题。

技术实现思路

[0004]本方案针对上文提到的问题和需求,提出一种基于超分辨率技术的目标检测系统,其由于采取了如下技术方案而能够解决上述技术问题。
[0005]为实现上述目的,本专利技术提供如下技术方案:一种基于超分辨率技术的目标检测系统,包括:目标图像获取单元、超分辨率重建单元、目标检测单元和信息监管平台;
[0006]所述目标图像获取单元用于采集待检测目标的图像信息,进行缓存和预处理,并将预处理后的图像信息发送至所述超分辨率重建单元;
[0007]所述超分辨率重建单元用于对输入的图像进行超分辨率重建,并将超分辨率重建结果输出至所述目标检测单元;
[0008]所述目标检测单元通过超分目标检测模型对待测目标进行检测,并通过绊线检测方法判断是否有越界或入侵行为,并在有越界或入侵行为时进行报警提示;
[0009]所述信息监管平台用于接收所述目标检测单元发送的目标检测信息和报警信息,并对检测目标及报警信息进行可视化显示,及向所述目标图像获取单元发送图像采集控制信息。
[0010]进一步地,所述目标图像获取单元包括视觉获取装置、电控模块和图像预处理模块;
[0011]所述视觉获取装置包括接收模块、摄像机模块和图像数据存储模块,所述接收模块用于通过图像传输接口接收外部待检测目标图像,所述摄像机模块用于按照所述电控模块的控制指令进行图像采集,所述图像数据存储模块用于对接收的外部待检测目标图像和采集的图像进行分类存储;
[0012]所述电控模块包括变焦驱动电机、补光灯组、电子继电器、光线传感器和智能云台,所述变焦驱动电机、所述补光灯组、所述电子继电器和所述光线传感器均与所述智能云台电连接,所述智能云台用于接收所述信息监管平台发送的图像采集控制信息,基于所述图像采集控制信息解析得到参数信息,根据所述参数信息控制所述摄像机模块工作,所述变焦驱动电机用于驱动所述摄像机模块进行变焦,所述光线传感器用于检测环境光线信息,所述补光灯组用于在所述光线信息低于设定阈值时进行自动补光,所述电子继电器用于控制所述摄像机模块的工作开关;
[0013]所述图像预处理模块包括待测图像处理模块,所述待测图像处理模块用于对待检测图像进行尺寸标准化、滤波处理和通过平滑操作去除图像噪声。
[0014]更进一步地,所述图像预处理模块还包括训练数据处理模块,所述训练数据处理模块用于将数据集按照一定比例划分为训练集、测试集和验证集,并对所述训练集进行随机角度旋转和镜像处理,然后将训练集中的所有图像进行下采样,缩小至原图像的四分之一倍,并将下采样后的图像通过插值算法恢复到原图像尺寸,至此可得到训练集中所有原图像的低清版本,经过预处理后的训练数据,每一幅图像都将有低清和原图两个图像,并对图像进行标注,标注图像内目标物体的类别和坐标。
[0015]更进一步地,所述超分辨率重建单元包括输入模块、超分辨率重建模块,所述输入模块获取低分辨率的待检测目标图像传输至所述超分辨率重建模块,所述超分辨率重建模块包括三层的卷积神经网络,第一层卷积通过9*9*64的卷积核对输入的图像进行特征提取,第二层卷积对第一层卷积生成的特征图通过1*1*32的卷积核进行非线性映射,第三层卷积对映射后的特征图通过5*5*1的卷积核进行重建,得到重建后的高分辨率图像。
[0016]更进一步地,通过第一损失函数和所述训练集对超分辨率重建网络进行训练优化,所述第一损失函数为均方差函数化,所述第一损失函数为均方差函数其中,N表示像素点个数,a
i
表示预测得到的高分辨率图像的第i个像素点,b
i
表示标准高分辨率图像的第i个像素点。
[0017]更进一步地,所述超分目标检测模型包括图像输入层和目标检测子网络层,将所述超分辨率重建单元输出的重建图像输入所述图像输入层,所述目标检测子网络层采用基于FSSD的目标检测网络进行目标检测分类和目标定位,所述目标检测子网络层包括去掉后面三个卷积层的SSD网络,利用所述去掉后面三个卷积层的SSD网络进行特征提取,将提取的不同尺寸特征图通过特征融合模块进行特征融合得到同尺寸的特征图,然后将各个特征图进行合并,并将合并后的特征图输入一个倒金字塔网络得到特征金字塔,再通过倒金字塔模块生成不同尺寸特征图进行目标检测,利用多个特征图可同时进行Softmax分类和位置回归,采用非极大值抑制算法获取最佳的目标检测框。
[0018]更进一步地,所述特征融合模块采用亚像素重排列方法将小尺寸特征图转换为大尺寸特征图,所述亚像素重排列方法包括将一张尺寸为p*q的图像输入到卷积网络中,进行多层卷积操作,得到n*n张尺寸为p*q的特征图,将所述特征图通过像素重排列,将其合成一张尺寸为np*nq的特征图。
[0019]更进一步地,通过第二损失函数和所述训练集对目标检测子网络进行训练优化,所述第二损失函数为其中,K为匹配到真实框的默认框个数,L
x

SSD网络的分类损失,L
y
为SSD网络的定位损失,α为用于调整分类损失和定位损失的比例系数。
[0020]进一步地,所述信息监管平台包括信息存储模块、可视化显示模块和交互模块,所述信息存储模块用于接收所述目标检测单元发送的目标检测信息和报警信息,并对信息按照存储列表进行分类存储,所述信息存储模块包括存储列表和报警数据管理模块,所述报警数据管理模块用于对报警事件的历史数据进行记录和周期统计,所述交互模块用于输入远程信息图像采集控制指令、参数或外部待检测目标图像数据;所述可视化显示模块用于对目标检测地点、时间、目标名称、坐标位置信息进行显示,所述可视化显示模块包括信息处理服务器和智能显示屏,所述交互模块和所述智能显示屏均与所述信息处理服务器相连接。
[0021]从上述的技术方案可以看出,本专利技术的有益效果是:本专利技术可对小目标和低分辨率目标进行精确检测,检测速率快,且检测模式多样,用户可进行实时目标检测或远程的图像数据传输检本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于超分辨率技术的目标检测系统,其特征在于,包括:目标图像获取单元、超分辨率重建单元、目标检测单元和信息监管平台;所述目标图像获取单元用于采集待检测目标的图像信息,进行缓存和预处理,并将预处理后的图像信息发送至所述超分辨率重建单元;所述超分辨率重建单元用于对输入的图像进行超分辨率重建,并将超分辨率重建结果输出至所述目标检测单元;所述目标检测单元通过超分目标检测模型对待测目标进行检测,并通过绊线检测方法判断是否有越界或入侵行为,并在有越界或入侵行为时进行报警提示;所述信息监管平台用于接收所述目标检测单元发送的目标检测信息和报警信息,并对检测目标及报警信息进行可视化显示,及向所述目标图像获取单元发送图像采集控制信息。2.如权利要求1所述的基于超分辨率技术的目标检测系统,其特征在于,所述目标图像获取单元包括视觉获取装置、电控模块和图像预处理模块;所述视觉获取装置包括接收模块、摄像机模块和图像数据存储模块,所述接收模块用于通过图像传输接口接收外部待检测目标图像,所述摄像机模块用于按照所述电控模块的控制指令进行图像采集,所述图像数据存储模块用于对接收的外部待检测目标图像和采集的图像进行分类存储;所述电控模块包括变焦驱动电机、补光灯组、电子继电器、光线传感器和智能云台,所述变焦驱动电机、所述补光灯组、所述电子继电器和所述光线传感器均与所述智能云台电连接,所述智能云台用于接收所述信息监管平台发送的图像采集控制信息,基于所述图像采集控制信息解析得到参数信息,根据所述参数信息控制所述摄像机模块工作,所述变焦驱动电机用于驱动所述摄像机模块进行变焦,所述光线传感器用于检测环境光线信息,所述补光灯组用于在所述光线信息低于设定阈值时进行自动补光,所述电子继电器用于控制所述摄像机模块的工作开关;所述图像预处理模块包括待测图像处理模块,所述待测图像处理模块用于对待检测图像进行尺寸标准化、滤波处理和通过平滑操作去除图像噪声。3.如权利要求2所述的基于超分辨率技术的目标检测系统,其特征在于,所述图像预处理模块还包括训练数据处理模块,所述训练数据处理模块用于将数据集按照一定比例划分为训练集、测试集和验证集,并对所述训练集进行随机角度旋转和镜像处理,然后将训练集中的所有图像进行下采样,缩小至原图像的四分之一倍,并将下采样后的图像通过插值算法恢复到原图像尺寸,至此可得到训练集中所有原图像的低清版本,经过预处理后的训练数据,每一幅图像都将有低清和原图两个图像,并对图像进行标注,标注图像内目标物体的类别和坐标。4.如权利要求3所述的基于超分辨率技术的目标检测系统,其特征在于,所述超分辨率重建单元包括输入模块和超分辨率重建模块,所述输入模块获取低分辨率的待检测目标图像传输至所述超分辨率重建模块,所述超分辨率重建模块包括三层的卷积神经网络,第一层卷积通过9*9*64的卷积核对输入的图像进行特征提取,第二层...

【专利技术属性】
技术研发人员:赵丽张笑钦
申请(专利权)人:温州大学大数据与信息技术研究院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1