本发明专利技术针对现有超分辨率技术在重建岩心图像时,存在的细节模糊或色彩偏差等问题,提出了一种基于深度卷积神经网络的Raw格式岩心图像超分辨率重建算法。首先,模拟相机图像处理器的线性处理部分合成线性图像数据集;然后,通过一个双层卷积神经网络,分别训练高低分辨率图像之间的纹理、色彩映射关系;最后,将重建出的线性高分辨率图像,模拟相机图像处理器的非线性处理部分,获得纹理清晰且色彩逼真的岩心重建图像。本发明专利技术所述的方法能获得很好的岩心图像重建效果。的岩心图像重建效果。
【技术实现步骤摘要】
基于Raw格式岩心图像超分辨率重建
[0001]本专利技术涉及图像超分辨率重建技术,具体涉及一种基于Raw格式岩心图像的超分辨率重建方法,属于数字图像处理领域。
技术介绍
[0002]在地质勘探开发中,通过研究钻取的岩心能获得重要的地质信息。特别地,高清的岩心图像更有利于研究人员进行分析。基于线阵相机的扫描仪,采集的图像分辨率较高,但扫描存在不稳定、成像时间长的问题。而基于面阵相机的扫描仪,通过一次成像,能大大减少岩心图像的采集时间;但为了使同样大小的岩心进入视野,采集的图像分辨率会有所下降。因此,如何提升岩心图像分辨率,从而达到后续的分析要求,具有重要的研究意义。
[0003]随着数据集的越加广泛与训练模型深度的加深,单幅图像超分辨率技术得到了很大的发展,但目前很多超分辨率方法在应用于岩心图像时,表现不佳。首先,许多方法通过固定的下采样来获得低分辨率图像,但这种简单的退化模型并不能反应真实场景图像的退化过程。其次,退化模型应该基于线性图像,但许多方法是基于相机图像处理器(Image Signal Processor,ISP)处理后的非线性图像,由于经过色调校正、有损压缩等非线性处理,会使模型重建出的高分辨率图像出现伪影。为了解决这一问题,有研究者直接通过光学变焦方法拍摄现实场景中的图像对作为数据集。但针对岩心这种小视场图像,高低分辨率之间不同程度的畸变与较大视场差因素增大了对齐数据的难度。Xu等提出了一种方法,先模拟ISP过程合成数据集,再使用一个双层卷积神经网络进行学习,其重建的图像色彩能直接取决于分支2输入图像的色彩。但为得到逼真的色彩,需根据每次拍摄的坏境,对分支2输入图像的色彩进行调整;且只能根据重建结果反馈给输入进行调整,该过程比较繁琐和耗时。
技术实现思路
[0004]本专利技术的目的是使通过超分辨率技术重建的岩心图像纹理清晰与色彩逼真。本专利技术利用Raw格式岩心图像中多出的高位信息,与线性图像的后期可塑性,提出了一种基于深度卷积神经网络的Raw格式岩心图像超分辨率重建方法。
[0005]本专利技术基于Raw格式岩心图像构建数据集,利用16位Raw格式图像比8位RGB图像多出的高位信息,来使岩心图像重建的纹理结构更加清晰;利用线性图像未经过相机图像处理器中的色调调整,图像增强与图像压缩处理,使得重建后的图像在色彩调整方面更加便利;然后通过构建的双层卷积神经网络分别学习高低分辨率图像之间的纹理特征与色彩特征。进一步地,结合卷积神经网络强大的学习能力,重建出高分辨率线性图像;然后对重建得到的高分辨率线性图像进行ISP非线性处理,使得岩心图像纹理清晰,色彩逼真。
[0006]本专利技术提出的基于Raw格式岩心图像超分辨率重建方法,主要包括以下操作步骤:
[0007](1)将Raw格式岩心图像模拟相机图像处理器线性处理,得到低分辨率拜尔图像,低分辨率线性彩色图像和高分辨率标签图像组成的数据集;
[0008](2)针对输入的低分辨率拜尔图像和低分辨率线性彩色图像,构建双层卷积神经网络,用于预测未知的高分辨率线性彩色图像轮廓特征与色彩特征;
[0009](3)利用步骤一生成的数据集,训练步骤二中构建的双层卷积神经网络;
[0010](4)将Raw格式岩心图像输入步骤三训练好的模型,重建出高分辨率线性彩色图像;
[0011](5)将步骤四得到的高分辨率线性彩色图像模拟相机图像处理器的非线性处理,最终得到高分辨率彩色图像。
附图说明
[0012]图1是本专利技术模拟相机ISP的线性处理与非线性处理结构
[0013]图2是本专利技术提出的双层卷积神经网络网络分支一
[0014]图3是本专利技术提出的双层卷积神经网络网络分支二
[0015]图4是本专利技术提出的通道注意力机制结构图
[0016]图5是本专利技术与不同方法重建结果对比图
具体实施方式
[0017]下面结合附图对本专利技术进一步说明:
[0018]基于Raw格式岩心图像的超分辨率重建方法,具体可以分为以下几个步骤:
[0019](1)将Raw格式岩心图像模拟相机图像处理器线性处理,得到低分辨率拜尔图像,低分辨率线性彩色图像和高分辨率标签图像组成的数据集;
[0020](2)针对输入的低分辨率拜尔图像和低分辨率线性彩色图像,构建双层卷积神经网络,用于预测未知的高分辨率线性彩色图像轮廓特征与色彩特征;
[0021](3)利用步骤一生成的数据集,训练步骤二中构建的双层卷积神经网络;
[0022](4)将Raw格式岩心图像输入步骤三训练好的模型,重建出高分辨率线性彩色图像;
[0023](5)将步骤四得到的高分辨率线性彩色图像模拟相机图像处理器的非线性处理,最终得到高分辨率彩色图像。
[0024]为了方便说明,首先引入如下概念:
[0025]Dcraw算法:一种开源的,用于处理Raw格式图像的算法,根据不同相机的拍摄参数,去除拍摄时的文本信息,以及扩展图像的位深。
[0026]DDFAPD算法:一种色彩插值算法,根据指定模式,将拜尔格式图像插值成彩色图像。
[0027]具体地,所述步骤(1)中,模拟相机ISP中的线性处理(如图1中的线性化操作),生成低分辨率拜尔图像、低分辨率线性彩色图像以及高分辨率标签彩色图像。首先通过Dcraw算法将Raw格式岩心图像中的文本信息去掉,并转换为16位拜尔格式图像,接着进行归一化。然后对得到的拜尔格式图像进行白平衡调整和DDFAPD色彩插值,得到中间结果P,接着对P进行色彩空间转换,将图像转换到一个与设备无关的色彩空间,然后通过行归一化,确保图像中白色在任何空间都呈白色,取逆后,获得高分辨率线标签图像。为了获得低分辨拜尔图像B,将上节得到的中间结果P像经过下面的退化函数:
[0028]B=F
bayer
(F
down
(P*K
d
*K
m
))+n
[0029]其中K
d
为离焦模糊,K
m
为运动模糊,F
down
为采样因子为2的下采样,而F
bayer
表示拜尔采样,其将三通道图像经过RGGB顺序采样恢复成单通道的拜尔格式图像,n为方差取决于Raw格式岩心图像亮度强度的异方差高斯噪声:
[0030][0031]其中,δ
s
、δ
c
表示随机标准差,x表示Raw格式图像每个像素位置的亮度强度。接着使用DDFAPD 插值算法对低分辨率线性彩色图像进行色彩插值,并对得到的图像进行色彩空间转换,这里需要保证与处理高分辨率线性彩色图像时的参数一样。最后获得低分辨率线性彩色图像。
[0032]所述步骤(2)中,针对输入的低分辨率拜尔图像和低分辨率线性彩色图像,构建双层卷积神经网络,如图2和3所示,是本专利技术构建的双层卷积神经网络的两个分支,利用卷积神经网络强大的学习能力,分别学习高低分辨率图像之间的纹本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.基于Raw格式岩心图像的超分辨率重建方法,其特征在于包括以下步骤:(1)将Raw格式岩心图像模拟相机图像处理器线性处理,得到低分辨率Bayer图像,低分辨率线性彩色图像和高分辨率标签图像组成的数据集;(2)针对输入的低分辨率Bayer图像和低分辨率线性彩色图像,构建双层卷积神经网络,用于预测未知的高分辨率线性彩色图像轮廓特征与色彩特征;(3)利用步骤一生成的数据集,训练步骤二中构建的双层卷积神经网络;(4)将Raw格式岩心图像输入步骤三训练好的模型,重建出高分辨率线性彩色图像;(5)将步骤四得到的高分辨率线性彩色图像模拟相机图像处理器的非线性处理,最终得到高分辨率彩色图像。2.根据权利要求1所述的基于Raw格式岩心图像的超分辨率重建方法,其特征在于步骤一中模拟相机图像处理器线性处理生成高分辨率标签图像;首先通过开源的Dcraw算法将Raw格式岩心图像中的文本信息去除,并转换为16位Bayer格式图像;在归一化后,对得到的图像进行白平衡调整与色彩插值,得到中间结果P;然后对P进行色彩空间转换得到高分辨率标签图像。3.根据权利...
【专利技术属性】
技术研发人员:卿粼波,黄帅坤,陈洪刚,何小海,滕奇志,
申请(专利权)人:四川大学,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。