一种基于图像融合特征学习重建的遥感影像云去除方法技术

本发明专利技术涉及一种基于图像融合特征学习重建的遥感影像云去除方法，包括：获取有云影像、多张参考影像，与有云影像和参考影像一一对应的云及云影掩膜；确定第一参考影像；将有云影像中云及云影的像元替换成第一参考影像中与其对应位置的像元，得到第一融合图像；对第一融合图像进行裁剪并分类，得到第一图像集和第二图像集；对第二图像集进行处理，得到第三图像集；基于第三图像集和第二图像集，获取图像重建数据集；基于图像重建数据集对图像重建模型训练，获取训练好的图像重建模型；对第一图像集中的每一张裁剪图片及其云及云影掩膜叠加后，输入训练好的图像重建模型中，得到预测图像集；基于第二图像集和预测图像集，得到最终的云去除影像。终的云去除影像。终的云去除影像。

【技术实现步骤摘要】
一种基于图像融合特征学习重建的遥感影像云去除方法


[0001]本专利技术涉及图像处理
，尤其涉及一种基于图像融合特征学习重建的遥感影像云去除方法。

技术介绍

[0002]遥感影像直观性强，蕴含地表信息丰富，在防灾减灾、资源普查、农业调查和军事领域取得了广泛应用。由于遥感影像成像机理的限制，遥感影像极易受到云层干扰，严重限制了遥感影像的使用。云对遥感影像的影响复杂，薄云削弱地表辐射，造成影像失真和模糊；厚云遮挡地表信息，且在地表形成阴影区域。
[0003]现有对遥感影像云去除的研究仍集中于单一类型的薄云或者厚云，无法同时去除遥感影像中的薄云、厚云和云阴影，且原始地表信息特征难以准确恢复，存在去除前后色彩差异大，整体一致性差的问题。

技术实现思路

[0004](一)要解决的技术问题
[0005]鉴于现有技术的上述缺点、不足，本专利技术提供一种基于图像融合特征学习重建的遥感影像云去除方法，其解决了现有对遥感影像云去除的研究仍集中于单一类型的薄云或者厚云，无法同时去除遥感影像中的薄云、厚云和云阴影，且原始地表信息特征难以准确恢复，存在去除前后色彩差异大，整体一致性差的技术问题。
[0006](二)技术方案
[0007]为了达到上述目的，本专利技术采用的主要技术方案包括：
[0008]本专利技术实施例提供一种基于图像融合特征学习重建的遥感影像云去除方法，包括：
[0009]S1、获取遥感卫星针对指定区域所拍摄的有云影像、多张参考影像；以及分别与所述有云影像和多张参考影像一一对应的云及云影掩膜；所述有云影像为遥感卫星针对指定区域在第一时刻所拍摄的影像，且所述有云影像中显示有云；所述参考影像为遥感卫星针对指定区域在第二时刻所拍摄的影像；所述第二时刻与第一时刻不同；
[0010]S2、根据与所述有云影像和多张参考影像一一对应的云及云影掩膜，在多张所述参考影像中确定第一参考影像；
[0011]S3、将所述有云影像中云及云影的像元替换成所述第一参考影像中与该云及云影的像元对应位置的像元，得到第一融合图像；
[0012]S4、针对所述第一融合图像进行裁剪，获取多张裁剪图片，并对裁剪图片进行分类，得到第一图像集和第二图像集；
[0013]S5、针对所述第二图像集进行处理，得到第三图像集；
[0014]S6、基于所述第三图像集和所述第二图像集，获取图像重建数据集；
[0015]S7、基于所述图像重建数据集，对预先获取的图像重建模型进行训练，获取训练好
的图像重建模型；
[0016]S8、对所述第一图像集中的每一张裁剪图片及其云及云影掩膜叠加后，输入至所述训练好的图像重建模型中，得到预测图像集；
[0017]S9、基于所述第二图像集和所述预测图像集，得到所述有云影像所对应的最终的云去除影像。
[0018]优选地，
[0019]所述第一参考影像为在满足公式(1)的参考影像中所对应的云占比最小的参考影像；
[0020]其中，参考影像所对应的云占比为所述参考影像中云及云影像元的数量与所述参考影像中所有像元的数量之比；
[0021]所述公式(1)为：
[0022][0023]P
cloud
表示有云影像中云及云影的像元位置的集合；
[0024]P
Reference
表示参考影像中云及云影的像元位置的集合。
[0025]优选地，所述S4具体包括：
[0026]S41、针对所述第一融合图像进行裁剪，获取多张裁剪图片；
[0027]其中每一张裁剪图片的尺寸均为256*256；
[0028]S42、判断每一张裁剪图片中是否含有所述第一参考影像中的像元，获取判断结果；
[0029]S43、基于每一张裁剪图片所对应的判断结果，对裁剪图片进行分类，得到第一图像集和第二图像集；
[0030]其中，所述第一图像集包括判断结果为含有所述第一参考影像中的像元的裁剪图片；
[0031]所述第二图像集包括判断结果为没有含有所述第一参考影像中的像元的裁剪图片。
[0032]优选地，所述S5具体包括：
[0033]S51、获取所述第二图像集中每一裁剪图片分别在所述第一参考影像中所一一对应的影像区域；
[0034]S52、获取每一影像区域中的云占比；
[0035]所述影像区域中的云占比为所述影像区域中云及云影像元的数量与所述影像区域中所有像元的数量之比；
[0036]S53、基于影像区域中的云占比，对第二图像集中与该影像区域对应的裁剪图片按照预设策略进行处理，获取第三图像集；
[0037]所述预设策略包括：
[0038]若影像区域中的云占比大于0％且小于100％时，使用该影像区域中非云区域的像元将与其对应的裁剪图片中对应位置的像元进行替换，得到对应的替换后的裁剪图片；
[0039]其中，该影像区域中非云区域是依据第一参考图像的云及云影掩膜得到的；
[0040]若影像区域中的云占比等于0时，则从云区域掩膜集中随机选取一张云及云影掩膜图片，并使用所述云及云影掩膜图片中有云区域的像元对与所述影像区域对应的裁剪图
片中对应位置的像元进行替换，得到对应的替换后的裁剪图片；
[0041]所述云区域掩膜集为对有云影像的云及云影掩膜按照尺寸为256*256进行裁剪所得到的多张云及云影掩膜图片。
[0042]优选地，所述S6中所述图像重建数据集包括多对图像；
[0043]其中每一对图像均包括一张第三图像集中的替换后的裁剪图片以及与其对应的第二图像集中的裁剪图片。
[0044]优选地，所述S7具体包括：
[0045]S71、基于所述图像重建数据集，获取所述图像重建数据集每对图像中的第三图像集中的替换后的裁剪图片所对应的融合掩膜图片；
[0046]其中，当该替换后的裁剪图片是通过从云区域掩膜集中随机选取一张云及云影掩膜图片，并使用所述云及云影掩膜图片中有云区域的像元对与影像区域对应的裁剪图片中对应位置的像元进行替换得到的时，所述替换后的裁剪图片所对应的融合掩膜图片为所述云及云影掩膜图片；
[0047]当该替换后的裁剪图片是通过使用影像区域中非云区域的像元将与其对应的裁剪图片中对应位置的像元进行替换得到时，所述替换后的裁剪图片所对应的融合掩膜图片为影像区域中非云区域；
[0048]S72、分别将所述第三图像集中每一替换后的裁剪图片以及与该替换后的裁剪图片所对应的融合掩膜图片作为所述预先获取的图像重建模型的输入图像以及将与替换后的裁剪图片对应的第二图像集中的裁剪图片作为所述预先获取的图像重建模型的目标图像，并输入至所述预先获取的图像重建模型中，所述预先获取的图像重建模型基于所述输入图像和所述目标图像进行训练，获取训练好的图像重建模型；
[0049]所述预测图像集中包括所述训练好的图像重建模型针对第一图像集中的每一张裁剪图片进行预测所本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于图像融合特征学习重建的遥感影像云去除方法，其特征在于，包括：S1、获取遥感卫星针对指定区域所拍摄的有云影像、多张参考影像；以及分别与所述有云影像和多张参考影像一一对应的云及云影掩膜；所述有云影像为遥感卫星针对指定区域在第一时刻所拍摄的影像，且所述有云影像中显示有云；所述参考影像为遥感卫星针对指定区域在第二时刻所拍摄的影像；所述第二时刻与第一时刻不同；S2、根据与所述有云影像和多张参考影像一一对应的云及云影掩膜，在多张所述参考影像中确定第一参考影像；S3、将所述有云影像中云及云影的像元替换成所述第一参考影像中与该云及云影的像元对应位置的像元，得到第一融合图像；S4、针对所述第一融合图像进行裁剪，获取多张裁剪图片，并对裁剪图片进行分类，得到第一图像集和第二图像集；S5、针对所述第二图像集进行处理，得到第三图像集；S6、基于所述第三图像集和所述第二图像集，获取图像重建数据集；S7、基于所述图像重建数据集，对预先获取的图像重建模型进行训练，获取训练好的图像重建模型；S8、对所述第一图像集中的每一张裁剪图片及其云及云影掩膜叠加后，输入至所述训练好的图像重建模型中，得到预测图像集；S9、基于所述第二图像集和所述预测图像集，得到所述有云影像所对应的最终的云去除影像。2.根据权利要求1所述的基于图像融合特征学习重建的遥感影像云去除方法，其特征在于，所述第一参考影像为在满足公式(1)的参考影像中所对应的云占比最小的参考影像；其中，参考影像所对应的云占比为所述参考影像中云及云影像元的数量与所述参考影像中所有像元的数量之比；所述公式(1)为：P
cloud
表示有云影像中云及云影的像元位置的集合；P
Reference
表示参考影像中云及云影的像元位置的集合。3.根据权利要求2所述的基于图像融合特征学习重建的遥感影像云去除方法，其特征在于，所述S4具体包括：S41、针对所述第一融合图像进行裁剪，获取多张裁剪图片；其中每一张裁剪图片的尺寸均为256*256；S42、判断每一张裁剪图片中是否含有所述第一参考影像中的像元，获取判断结果；S43、基于每一张裁剪图片所对应的判断结果，对裁剪图片进行分类，得到第一图像集和第二图像集；其中，所述第一图像集包括判断结果为含有所述第一参考影像中的像元的裁剪图片；所述第二图像集包括判断结果为没有含有所述第一参考影像中的像元的裁剪图片。4.根据权利要求3所述的基于图像融合特征学习重建的遥感影像云去除方法，其特征
在于，所述S5具体包括：S51、获取所述第二图像集中每一裁剪图片分别在所述第一参考影像中所一一对应的影像区域；S52、获取每一影像区域中的云占比；所述影像区域中的云占比为所述影像区域中云及云影像元的数量与所述影像区域中所有像元的数量之比；S53、基于影像区域中的云占比，对第二图像集中与该影像区域对应的裁剪图片按照预设策略进行处理，获取第三图像集；所述预设策略包括：若影像区域中的云占比大于0％且小于100％时，使用该影像区域中非云区域的像元将与其对应的裁剪图片中对应位置的像元进行替换，得到对应的替换后的裁剪图片；其中，该影像区域中非云区域是依据第一参考图像的云及云影掩膜得到的；若影像区域中的云占比等于0时，则从云区域掩膜集中随机选取一张云及云影掩膜图片，并使用所述云及云影掩膜图片中有云区域的像元对...

【专利技术属性】
技术研发人员：张旭晴，张成要，王凤艳，陈峰，吴翔，安志磊，
申请(专利权)人：吉林大学，
类型：发明
国别省市：