一种基于多网络特征融合的输电线路悬挂异物检测方法技术

本发明专利技术公开了一种基于多网络特征融合的输电线路悬挂异物检测方法，首先构建输电线路悬挂异物图像数据集；其次对输电线路悬挂异物图像融合特征提取；再构建与训练基于贝叶斯优化的随机森林输电线路悬挂异物分类识别模型；输电线路悬挂异物分类识别：利用测试集的融合特征X对随机森林分类模型中M棵CART决策树进行测试，得到预测类别{C1(X)、C2(X)、Cm(X)}；对于测试得到的分类结果进行投票，选择在M棵CART决策树分类结果中出现频率最高的作为最终的分类结果；本发明专利技术具有较好的检测精度和检测速度，且更有利于实际应用，可为电网运维人员开展输电线路悬挂异物清障工作提供参考。员开展输电线路悬挂异物清障工作提供参考。员开展输电线路悬挂异物清障工作提供参考。

【技术实现步骤摘要】
一种基于多网络特征融合的输电线路悬挂异物检测方法


[0001]本专利技术属于输电线路监测图像数据处理
，具体涉及一种基于多网络特征融合的输电线路悬挂异物检测方法。

技术介绍

[0002]输电线路的运行和维护对电网的安全平稳运行具有重大意义。我国建设的输电线路错综复杂、地域差异性明显，部分线路邻近城市、施工工地等地区，可能存在鸟巢、气球、风筝等异物悬挂于线路上会缩短放电距离而引发输电故障。但由于其具有偶然性和突发性的特点，依靠人工巡检存在发现不及时，效率低下等问题。

技术实现思路

[0003]鉴于此，本专利技术的目的在于提供一种基于多网络特征融合的输电线路悬挂异物检测方法，用于准确识别出输电线路悬挂异物，为电网运维人员开展输电线路悬挂异物清障工作提供参考。
[0004]为实现上述目的，本专利技术提供如下技术方案：一种基于深度卷积特征的电网危害鸟种分类识别方法，包括如下步骤：
[0005]一种基于多网络特征融合的输电线路悬挂异物检测方法，包括如下步骤：
[0006]S1、构建输电线路悬挂异物图像数据集：针对电网人工巡检与无人机巡检拍摄的输电线路悬挂异物图像，采用Otus最大类间方差阈值分割法与形态学方法提取异物目标区域，运用泊松融合算法将输电线路真实背景与异物目标区域进行融合，生成虚拟的异物图像扩充图像样本，构建包含N种输电线路悬挂异物图像数据集，并按照一定的比例划分为训练集与测试集；
[0007]S2、输电线路悬挂异物图像融合特征提取：搭建GoogLeNet、DarkNet
‑
53、VGG
‑
19、ResNet
‑
50、Xception卷积神经网络模型，采用大规模数据集MS COCO进行预训练，对预训练的5个网络模型结构进行微调，并利用扩充后的异物图像训练集重新训练微调后的5个网络模型；
[0008]利用重新训练好的5个网络模型分别对输电线路悬挂异物图像数据集进行特征提取，采用特征可视化Grad
‑
CAM++算法生成每个网络模型特征提取层对应的类激活热力图，获得每个特征层的决策区域，据此挑选出每个网络模型的最佳特征提取层；并对最佳特征提取层的决策区域进行分析，挑取具有互补性的特征进行级联融合，获得最佳的异物图像融合特征；
[0009]S3、构建与训练基于贝叶斯优化的随机森林输电线路悬挂异物分类识别模型：采用Bootstrap重采样的方法对训练集的融合特征Z进行M次随机有放回的采样，生成M个样本集用于训练M棵CART决策树，同时控制每个样本集的样本数量相同；定义训练集的融合特征变量为S，随机地在S个特征变量里面选择s个特征变量组成该节点的分裂特征变量子集，根据基尼系数选择最优分裂特征变量和最优分裂值，生成包含M棵CART决策树的随机森林分
类模型，同时使用贝叶斯优化随机森林的超参数，通过5倍交叉验证对模型进行训练，以平均均方根误差(RMSE)作为控制函数，寻找最优超参数：
[0010][0011]式中：n为样本数目；y
i
为第i个样本的真实值；为第i
th
个样本的预测值；
[0012]S4、输电线路悬挂异物分类识别：利用测试集的融合特征X对随机森林分类模型中M棵CART决策树进行测试，得到预测类别{C1(X)、C2(X)、
…
、C
m
(X)}；对于测试得到的分类结果进行投票，选择在M棵CART决策树分类结果中出现频率最高的作为最终的分类结果：
[0013][0014]式中：f
RF
(x)为分类结果，f
l
(x)为第l棵CART决策树对样本x的分类结果，M为CART决策树的数量，c为异物分类类别数，i为c类中的某一类，I(
·
)代表分类结果为i时的情况。
[0015]进一步地，步骤S1中，结合泊松融合和Otsu最大类间方差阈值分割法与形态学方法对异物图像进行扩充：将输入大小为W
×
H的异物图像进行灰度化，并将灰度值的范围G＝{0，1，2，
…
，L
‑
1}，灰度值为i(i∈G)的个数设置为n
i
，灰度值i出现的概率为p
i
＝n
i
/W
×
H；设置初始阈值T为0，将[0，T]灰度值区间的像素归为目标区域，[T+1，L
‑
1]灰度值区间的像素归为背景区域，通过改变T的取值使得计算目标区域和背景区域的类间方差最大化，求出最佳分割阈值，实现图像分割；对分割得到的二值图像进行开操作，先进行腐蚀再进行膨胀操作，获得连通区域并对不同区域进行着色，基于最大连通区域求其质心和外接矩形，最后通过裁剪提取目标区域Z；
[0016]设置提取目标区域Z为目标场景，输电线路真实图像为背景场景K，v为引导场，分别计算目标场景Z和背景场景K的梯度场，将Z的梯度场和K的梯度场进行融合得到融合场景的梯度场；通过构建带狄利克雷边界条件的泊松方程求解融合场景的梯度场与引导场之间的最小值，完成异物目标区域与输电线路真实图像真实背景的泊松融合过程。并将输电线路悬挂异物图像数据集按照8：2的比例划分为训练集与测试集。
[0017]进一步地，步骤S2中，对预训练的5个网络模型结构进行微调，将GoogLeNet、DarkNet
‑
53、VGG
‑
19、ResNet
‑
50、Xception的全连接层的维数由1000调整为N(输电线路悬挂异物种数)，并将最后的分类输出层调整为N(输电线路悬挂异物种数)分类；利用S1中划分好的训练集重新训练微调后的5个网络模型，采用批量梯度下降法对损失函数进行优化，寻求最优的参数。
[0018]进一步地，利用重新训练后的5个卷积神经网络模型对输电线路悬挂异物图像数据集进行特征提取，利利用特征可视化Grad
‑
CAM++算法决策出将GoogLeNet、DarkNet
‑
53、ResNet
‑
50和Xception的全局平均池化层和VGG
‑
19的最后一个dropout层作为特征提取层；将GoogLeNet、DarkNet
‑
53、VGG
‑
19、ResNet
‑
50、Xception提取得到的特征分别命名为F
G
、F
D
、F
V
、F
R
、F
X
，并对每个卷积神经网络的分类决策区域进行分析后，最终确定通过公式(2)将F
G
、F
D
和F
E
进行级联融合，获得最佳的异物图像融合特征F。
[0019]F＝concatenate(F
G
,F
D
,F
X
)本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于多网络特征融合的输电线路悬挂异物检测方法，其特征在于，包括如下步骤：S1、构建输电线路悬挂异物图像数据集：针对电网人工巡检与无人机巡检拍摄的输电线路悬挂异物图像，采用Otus最大类间方差阈值分割法与形态学方法提取异物目标区域，运用泊松融合算法将输电线路真实背景与异物目标区域进行融合，生成虚拟的异物图像扩充图像样本，构建包含N种输电线路悬挂异物图像数据集，并按照一定的比例划分为训练集与测试集；S2、输电线路悬挂异物图像融合特征提取：搭建GoogLeNet、DarkNet
‑
53、VGG
‑
19、ResNet
‑
50、Xception卷积神经网络模型，采用大规模数据集MS COCO进行预训练，对预训练的5个网络模型结构进行微调，并利用扩充后的异物图像训练集重新训练微调后的5个网络模型；利用重新训练好的5个网络模型分别对输电线路悬挂异物图像数据集进行特征提取，采用特征可视化Grad
‑
CAM++算法生成每个网络模型特征提取层对应的类激活热力图，获得每个特征层的决策区域，据此挑选出每个网络模型的最佳特征提取层；并对最佳特征提取层的决策区域进行分析，挑取具有互补性的特征进行级联融合，获得最佳的异物图像融合特征；S3、构建与训练基于贝叶斯优化的随机森林输电线路悬挂异物分类识别模型：采用Bootstrap重采样的方法对训练集的融合特征Z进行M次随机有放回的采样，生成M个样本集用于训练M棵CART决策树，同时控制每个样本集的样本数量相同；定义训练集的融合特征变量为S，随机地在S个特征变量里面选择s个特征变量组成该节点的分裂特征变量子集，根据基尼系数选择最优分裂特征变量和最优分裂值，生成包含M棵CART决策树的随机森林分类模型，同时使用贝叶斯优化随机森林的超参数，通过5倍交叉验证对模型进行训练，以平均均方根误差(RMSE)作为控制函数，寻找最优超参数：式中：n为样本数目；y
i
为第i个样本的真实值；为第i
th
个样本的预测值；S4、输电线路悬挂异物分类识别：利用测试集的融合特征X对随机森林分类模型中M棵CART决策树进行测试，得到预测类别{C1(X)、C2(X)、
…
、C
m
(X)}；对于测试得到的分类结果进行投票，选择在M棵CART决策树分类结果中出现频率最高的作为最终的分类结果：式中：f
RF
(x)为分类结果，f
l
(x)为第l棵CART决策树对样本x的分类结果，M为CART决策树的数量，c为异物分类类别数，i为c类中的某一类，I(
·
)代表分类结果为i时的情况。2.根据权利要求1所述的一种基于多网络特征融合的输电线路悬挂异物检测方法，其特征在于，步骤S1中，结合泊松融合和Otsu最大类间方差阈值分割法与形态学方法对异物图像进行扩充：将输入大小为W
×
H的异物图像进行灰度化，并将灰度值的范围G＝{0，1，2，
…
，L
...

【专利技术属性】
技术研发人员：邱志斌，周志彪，李俊轩，童志鹏，吴睿文，张润，余沿臻，朱轩，
申请(专利权)人：南昌大学，
类型：发明
国别省市：