基于DSIFT与EVM实现三维荧光光谱谱图水样排放源识别追踪的方法及其系统技术方案

本发明专利技术涉及一种基于DSIFT与EVM实现三维荧光光谱谱图水样排放源识别追踪的方法，包括以下步骤：采集不同企业客户的三维荧光谱图，并按照一定比例对数据集进行划分；对预处理后的光谱谱图进行稠密SIFT特征提取，并保存对应每个样本的特征向量；建立基于威布尔分布的EVM模型；将测试样本对应的特征矩阵输入EVM模型进行预测，实现开集识别判定。本发明专利技术还涉及一种基于DSIFT与EVM实现三维荧光光谱谱图水样排放源识别追踪的系统、装置、处理器及存储介质。采用了本发明专利技术的基于DSIFT与EVM实现三维荧光光谱谱图水样排放源识别追踪的方法、系统、装置、处理器及其计算机可读存储介质，所需样本量少、时效性高，在保证已知客户类别分类精度的前提下，有效地提高了未知水样的识别追踪。踪。踪。

【技术实现步骤摘要】
基于DSIFT与EVM实现三维荧光光谱谱图水样排放源识别追踪的方法及其系统


[0001]本专利技术涉及环境监管
，尤其涉及水样识别追踪领域，具体是指一种基于
DSIFT
与
EVM
实现三维荧光光谱谱图水样排放源识别追踪的方法
、
系统
、
装置
、
处理器及其计算机可读存储介质
。

技术介绍

[0002]随着环境保护要求的不断发展，对自然环境水体以及排入水体的水质进行快速在线监测的需求日益迫切
。
实现全过程水质监控，从供水到污水处理完整的水循环管理，是环境监管领域的重点和难点
。
为便于后续不同企业客户荧光谱图的相似度比对
、
水样的异常监测预警
、
溯源以及异常程度评价，有关环境监管部门常常需要首先实现不同企业客户基于三维荧光光谱的水样识别追踪
。
三维荧光光谱谱图是一定范围内激发
、
发射波长条件下荧光强度的集合
,
含有丰富的有机物荧光信息，可对水样中有机物进行充分的识别和解析
。
在所需样品量少的情况下可以实现更安全
、
更完整以及更精确地判别
。
[0003]不同企业客户的水样溶解有机物构成不同，其荧光光谱也会发生变化
。
不同时间下，某一时间点下对于当前水样荧光光谱的判别可能并不适用于后几个月甚至后几个星期的情况
。
现有的方法常常需要工作人员沿着水体流向或排水管网向上游逐步排查，检测和对比各个企业客户水样，以实现不同客户水样的识别及追踪
。
但这种方法费时费力，难以实现实时监测，同时要求工作人员具有较强的专业知识和经验
。
[0004]目前，基于三维荧光光谱的分析所取得的许多进展依赖于闭集设置条件，即训练和测试数据有着相同的标签和特征空间
。
然而在现实情况中，环境往往是开放可变
、
不可预测的，存在未知水样源，易误判为已知客户
。
相似性度量方法又存在阈值敏感
、
模型性能易受影响的问题
。
同时，工业数据图像难以采集，样本量较少
。
深度神经网络特征提取方法需要大量不同场景的图像数据，训练困难，计算量大，难以针对性地提取不同企业客户谱图独立的位置
、
形状
、
纹理等特征信息
。
因此，亟需构建一种独立性的特征提取方法以及简单高效的水样排放源开集识别方法或系统
。
[0005]针对上述问题，本专利技术提出了一种基于
DSIFT
和
EVM
的不同客户三维荧光光谱水样的识别追踪方法及系统
。
首先提取各个客户光谱样本的特征向量，构建各个企业客户水质信息的特征向量库，同时引入极值机方法
(The Extreme Value Machine
，
EVM)
，从样本概率分布角度实现开集判定
。
从而快速识别已知客户
、
拒绝未知客户水样，避免单一决策，提高排查效率，为后续的应急处理提供参考
。

技术实现思路

[0006]本专利技术的目的是克服了上述现有技术的缺点，提供了一种满足效率高
、
操作简便
、
适用范围较为广泛的基于
DSIFT
与
EVM
实现三维荧光光谱谱图水样排放源识别追踪的方法
、
系统
、
装置
、
处理器及其计算机可读存储介质
。
[0007]为了实现上述目的，本专利技术的基于
DSIFT
与
EVM
实现三维荧光光谱谱图水样排放源识别追踪的方法
、
系统
、
装置
、
处理器及其计算机可读存储介质如下：
[0008]该基于
DSIFT
与
EVM
实现三维荧光光谱谱图水样排放源识别追踪的方法，其主要特点是，所述的方法包括以下步骤：
[0009](1)
采集不同企业客户的水样，并进行紫外可见吸收光谱测试得到三维荧光光谱谱图，对光谱谱图进行裁剪
、
缩放的图像预处理操作，并按照一定比例划分为训练集和测试集；
[0010](2)
对预处理后的光谱谱图进行稠密
SIFT
特征提取，获得对应每个像素位置的特征描述子，并保存对应每个样本的特征向量；
[0011](3)
将所有训练数据的特征与对应的类别标签作为
EVM
算法的输入，建立基于威布尔分布的
EVM
模型；
[0012](4)
将测试样本对应的特征矩阵输入训练后的
EVM
模型进行预测，从样本概率分布角度进行开集判定
。
[0013]较佳地，所述的步骤
(1)
具体包括以下步骤：
[0014](1.1)
对不同客户的三维荧光谱图进行裁剪，保留对应的荧光强度集合区域裁去其他区域，并将图像缩放为统一像素大小；
[0015](1.2)
根据对应数据集和模型按照一定比例，任意选择
x
个类作为已知类，
y
个类作为未知类，且未知类设定为同一个类别标签
。
[0016]较佳地，所述的步骤
(2)
具体包括以下步骤：
[0017](2.1)
输入统一像素大小的源图像并将其转化为灰度图；创建高斯滤波器，并求出其
x、y
方向的梯度；分别与源图像作卷积运算生成源图像在
x、y
方向的方向梯度
G
x
、G
y
，并计算图像的梯度幅值
|J(x
，
y)|
和梯度幅角
θ
J(x
，
y)
；
[0018](2.2)
将图像等分成一个个相同大小的邻域块，并将每个邻域块划分为1个4×4的
cell
，在每个
cell
中，使用具有8个
bin
的方向直方图量化梯度信息，累积
cell
中所有像素的梯度方向构建直方图，对加权后的量化梯度进行
16
次采样生成
128
维的特征向量作为对应位置的特征描述子；
[0019](2.3)
将单位特征向量中的值阈值化，重新归一化为单位长度，将其展为一维特征向量；将所有样本的一维特征拼接成
n
×
d
维的特征矩阵，其中
n
...

【技术保护点】

【技术特征摘要】
1.
一种基于
DSIFT
与
EVM
实现三维荧光光谱谱图水样排放源识别追踪的方法，其特征在于，所述的方法包括以下步骤：
(1)
采集不同企业客户的水样，并进行紫外可见吸收光谱测试得到三维荧光光谱谱图，对光谱谱图进行裁剪
、
缩放的图像预处理操作，并按照一定比例划分为训练集和测试集；
(2)
对预处理后的光谱谱图进行稠密
SIFT
特征提取，获得对应每个像素位置的特征描述子，并保存对应每个样本的特征向量；
(3)
将所有训练数据的特征与对应的类别标签作为
EVM
算法的输入，建立基于威布尔分布的
EVM
模型；
(4)
将测试样本对应的特征矩阵输入训练后的
EVM
模型进行预测，从样本概率分布角度进行开集判定
。2.
根据权利要求1所述的基于
DSIFT
与
EVM
实现三维荧光光谱谱图水样排放源识别追踪的方法，其特征在于，所述的步骤
(1)
具体包括以下步骤：
(1.1)
对不同客户的三维荧光谱图进行裁剪，保留对应的荧光强度集合区域裁去其他区域，并将图像缩放为统一像素大小；
(1.2)
根据对应数据集和模型按照一定比例，任意选择
x
个类作为已知类，
y
个类作为未知类，且未知类设定为同一个类别标签；所述的步骤
(2)
具体包括以下步骤：
(2.1)
输入统一像素大小的源图像并将其转化为灰度图；创建高斯滤波器，并求出其
x、y
方向的梯度；分别与源图像作卷积运算生成源图像在
x、y
方向的方向梯度
G
x
、G
y
，并计算图像的梯度幅值
|J(x
，
y)|
和梯度幅角
θ
J(x
，
y)
；
(2.2)
将图像等分成一个个相同大小的邻域块，并将每个邻域块划分为1个4×4的
cell
，在每个
cell
中，使用具有8个
bin
的方向直方图量化梯度信息，累积
cell
中所有像素的梯度方向构建直方图，对加权后的量化梯度进行
16
次采样生成
128
维的特征向量，作为对应像素位置的特征描述子；
(2.3)
将单位特征向量中的值阈值化，重新归一化为单位长度，将其展为一维特征向量；将所有样本的一维特征拼接成
n
×
d
维的特征矩阵，其中
n
表示样本的数目，
d
表示样本特征的维数；所述的步骤
(3)
具体包括以下步骤：
(3.1)
拟合训练样本的边界分布，输入所有训练数据的特征向量和类别标签，计算每两个特征向量之间的余弦距离并乘以边界缩放尺度，得到距离矩阵，并根据距离矩阵
、
对应样本类别标签和排序标号三部分数据进行威布尔拟合；
(3.2)
选择边界分布和极值向量的最优组合来覆盖每一类，基于贪婪算法对现有样本模型减少冗余，选择能够表示一类的特征点的最小子集，使其能够覆盖整个类；所述的步骤
(4)
具体包括以下步骤：
(4.1)
计算消除冗余后的
EVM
模型中所有样本数据
x
和测试样本
x
’
对应的余弦距离矩阵
M
l
；根据
M
l
和
EVM
模型中的
weibull
模型数据计算测试样本的评估概率
ψ
(x
，
x
’
，
k
i
，
λ
i
)
；
(4.2)
对于每一个测试样本
x
’
，选取
EVM
模型的样本数据
x
中每一个类别对应的最大的若干个评估概率
ψ
(x
，
x
’
，
k
i
，
λ
i
)
，并计算出每个类的平均评估概率对于任意
测试样本
x
’
，计算属于类
C
i
的概率；
(4.3)
基于反向威布尔分布函数得出样本属于未知类的概率，设定概率阈值
δ
来定义所有已知类和不支持的开放空间之间的边界，得到分类决策函数
y
*
。3.
根据权利要求2所述的基于
DSIFT
与
EVM
实现三维荧光光谱谱图水样排放源识别追踪的方法，其特征在于，所述的步骤
(2.1)
中生成源图像在
x、y
方向的方向梯度
G
x
、G
y
，具体为：根据以下公式生成源图像在
x、y
方向的方向梯度
G
x
、G
y
：：：所述的步骤
(2.1)
中计算图像梯度幅值
|J(x,y)|
和梯度幅角
θ
J(x,y)
，具体为：，具体为：其中，
f
为图像特征块，
g
为高斯核卷积模板，
I(x,y)
为源图像，
g(x,y)
为二维高斯函数；所述的步骤
(2.2)
中量化梯度信息，具体为：根据以下公式计算幅值权值和量化梯度信息：
ω
(
θ
J(x,y)
‑
θ
t
)
＝
max(0,cos(
θ
J(x,y)
‑
θ
t
))
；
|J(x,y,
θ
t
)|
＝
ω
(
θ
J(x
，
y)
‑
θ
t
)|J(x,y)|......(6)
其中，
θ
t
表示8个方向角度，
ω
(
θ
J(x,y)
‑
θ
t
)
表示源图像在特征点
(x,y)
处对应方向角度的权重值，
|J(x,y,
θ
t
)|
为对应方向...

【专利技术属性】
技术研发人员：姜庆超，穆文豪，周承宇，
申请(专利权)人：华东理工大学，
类型：发明
国别省市：