图像修复方法、装置、电子设备及计算机可读存储介质制造方法及图纸

技术编号:37381284 阅读:17 留言:0更新日期:2023-04-27 07:22
本申请公开一种图像修复方法、装置、电子设备及计算机可读存储介质,获得有破损区域的待修复图像,确定破损区域断裂结构线的图像特征,基于图像特征确定任意两个断裂结构线之间的拟合精度,拟合精度作为因变量,图像特征作为自变量,进行线性回归分析,确定断裂结构线在破损区域的拟合模型,基于拟合模型在破损区域内绘制连接断裂结构线的连接线,连接线将破损区域分为多个子区域,在破损区域边界选取第一图像匹配块,在完好区域中,选取与第一图像匹配块像素相似度最高的第二图像匹配块,在第二图像匹配块周围通过对搜索框添加随机扰动选取第三图像匹配块,基于第三图像匹配块和第二图像匹配块中至少一个进行子区域填充。达到较好的修复效果。较好的修复效果。较好的修复效果。

【技术实现步骤摘要】
图像修复方法、装置、电子设备及计算机可读存储介质


[0001]本申请涉及图像修复领域,更具体地说,涉及一种图像修复方法、装置、电子设备及计算机可读存储介质。

技术介绍

[0002]当图像破损之后,需要对图像中的破损区域进行图像修复。但是目前大多数的图像修复方法,对于整体结构一致性的图像有较好的修复效果,但是当图像的破损区域的结构信息比较复杂时,在修复图像之后一般都会产生模糊从而导致图像的修复效果不佳。

技术实现思路

[0003]有鉴于此,本申请提供了一种图像修复方法、装置、电子设备及计算机可读存储介质,用于解决图像修复效果不佳的问题。
[0004]为了实现上述目的,现提出的方案如下:
[0005]一种图像修复方法,所述图像修复方法包括:
[0006]获得待修复的图像,所述待修复的图像中具有图像破损区域;
[0007]确定所述图像破损区域的各断裂结构线的多个图像特征;
[0008]基于所述多个图像特征确定任意两个断裂结构线之间的拟合精度;
[0009]将所述拟合精度作为因变量,将所述多个图像特征作为自变量进行多元线性回归分析,确定所述断裂结构线在所述图像破损区域的拟合模型;
[0010]基于所述拟合模型在所述图像破损区域内绘制用于连接断裂结构线的连接线,其中,所述连接线将所述图像破损区域划分为多个子区域且所述连接线为光滑曲线;
[0011]在所述图像破损区域边界通过搜索框选取第一图像匹配块,其中,所述第一图像匹配块包括:所述图像完好区域的一部分以及所述图像破损区域的一部分;
[0012]在所述待修复的图像的所述图像完好区域中,选取与所述第一图像匹配块中的所述图像完好区域像素相似度最高的第二图像匹配块;
[0013]在所述第二图像匹配块周围的所述图像完好区域中,通过对搜索框添加随机扰动的方式选取第三图像匹配块;
[0014]基于所述第三图像匹配块和所述第二图像匹配块中的至少一个,对所述子区域进行像素填充。
[0015]可选的,所述确定所述图像破损区域的各断裂结构线的多个图像特征,包括:
[0016]确定所述图像破损区域的各所述断裂结构线的像素梯度、曲率和弧度,所述弧度为预设长度的断裂结构线的弧度。
[0017]可选的,所述在所述图像破损区域边界通过搜索框选取第一图像匹配块,包括:
[0018]引用patchmatch算法的全局随机搜索在所述图像破损区域边界通过搜索框进行随机搜索,获得多个图像匹配块;
[0019]根据预设选取方式,从所述多个图像匹配块中选取第一图像匹配块,其中,所述预
设选取方式包括:先验知识、随机指定中的至少一种。
[0020]可选的,所述在所述第二图像匹配块周围的所述图像完好区域中,通过对搜索框添加随机扰动的方式选取第三图像匹配块,包括:
[0021]对所述搜索框添加随机扰动,以扩大所述搜索框的空间范围;
[0022]在所述第二图像匹配块周围的所述图像完好区域中,使用添加所述随机扰动的所述搜索框进行搜索,并基于峰值信噪比PSNR和结构相似度SSIM从搜索结果中选取第三图像匹配块。
[0023]可选的,所述基于所述第三图像匹配块和所述第二图像匹配块中的至少一个,对所述子区域进行像素填充,包括:
[0024]确定所述第三图像匹配块和所述第二图像匹配块中优选匹配块,所述优选匹配块与所述第一图像匹配块中的所述图像完好区域像素相似度最高,使用所述优选匹配块对所述子区域进行像素填充,所述优选匹配块为所述第三图像匹配块和所述第二图像匹配块中的一个。
[0025]可选的,选取目标图像匹配块的过程服从二维高斯分布,所述目标图像匹配块为:所述第一图像匹配块、所述第二图像匹配块和所述第三图像匹配块中的至少一个。
[0026]一种图像修复装置,所述图像修复装置包括:
[0027]图像获取单元,用于获得待修复的图像,所述待修复的图像中具有图像破损区域;
[0028]图像特征确定单元,用于确定所述图像破损区域的各断裂结构线的多个图像特征;
[0029]拟合精度确定单元,用于基于所述多个图像特征确定任意两个断裂结构线之间的拟合精度;
[0030]线性回归分析单元,用于将所述拟合精度作为因变量,将所述多个图像特征作为自变量进行多元线性回归分析,确定所述断裂结构线在所述图像破损区域的拟合模型;
[0031]连接线绘制单元,用于基于所述拟合模型在所述图像破损区域内绘制用于连接断裂结构线的连接线,其中,所述连接线将所述图像破损区域划分为多个子区域且所述连接线为光滑曲线;
[0032]第一选取单元,用于在所述图像破损区域边界通过搜索框选取第一图像匹配块,其中,所述第一图像匹配块包括:所述图像完好区域的一部分以及所述图像破损区域的一部分;
[0033]第二选取单元,用于选取与所述第一图像匹配块中的所述图像完好区域像素相似度最高的第二图像匹配块;
[0034]第三选取单元,用于在所述第二图像匹配块周围的所述图像完好区域中,通过对搜索框添加随机扰动的方式选取第三图像匹配块;
[0035]像素填充单元,用于基于所述第三图像匹配块和所述第二图像匹配块中的至少一个,对所述子区域进行像素填充。
[0036]可选的,所述图像特征确定单元,具体用于:
[0037]确定所述图像破损区域的各所述断裂结构线的像素梯度、曲率和弧度,所述弧度为预设长度的断裂结构线的弧度。
[0038]一种电子设备,包括存储器和处理器;
[0039]所述存储器,用于存储程序;
[0040]所述处理器,用于执行所述程序,实现上述任一种图像修复方法的各个步骤。
[0041]一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时,实现上述的任一种图像修复方法的各个步骤。
[0042]本申请通过一种图像修复方法、装置、电子设备及计算机可读存储介质,首先获得待修复的图像,确定图像破损区域的图像特征,对图像特征和断裂结构线的拟合精度进行多元线性分析,拟合出断裂结构线在图像破损区域的拟合模型,再基于拟合模型绘制用于连接断裂结构线的连接线,绘制出的连接线有多个,将图像破损区域划分为多个子区域,在图像破损区域边界通过搜索框选取第一图像匹配块,在图像完好区域选择与第一图像匹配块像素信息仙相似度最高的第二图像匹配块,从第二图像匹配块周围的图像完好区域选择第三图像匹配块,选择第二图像匹配块和第三图像匹配块中的至少一个对子区域进行填充。通过多次选择用于填充的图像匹配块并从中选择最合适的填充的图像匹配块来对子区域进行填充,可以极大程度的保证选择的图像匹配块与子区域的图像匹配块匹配程度最高,保证了图像的修复效果。达到较好的图像修复效果。
附图说明
[0043]为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种图像修复方法,其特征在于,所述图像修复方法包括:获得待修复的图像,所述待修复的图像中具有图像破损区域;确定所述图像破损区域的各断裂结构线的多个图像特征;基于所述多个图像特征确定任意两个断裂结构线之间的拟合精度;将所述拟合精度作为因变量,将所述多个图像特征作为自变量进行多元线性回归分析,确定所述断裂结构线在所述图像破损区域的拟合模型;基于所述拟合模型在所述图像破损区域内绘制用于连接断裂结构线的连接线,其中,所述连接线将所述图像破损区域划分为多个子区域且所述连接线为光滑曲线;在所述图像破损区域边界通过搜索框选取第一图像匹配块,其中,所述第一图像匹配块包括:所述图像完好区域的一部分以及所述图像破损区域的一部分;在所述待修复的图像的所述图像完好区域中,选取与所述第一图像匹配块中的所述图像完好区域像素相似度最高的第二图像匹配块;在所述第二图像匹配块周围的所述图像完好区域中,通过对搜索框添加随机扰动的方式选取第三图像匹配块;基于所述第三图像匹配块和所述第二图像匹配块中的至少一个,对所述子区域进行像素填充。2.根据权利要求1所述的方法,其特征在于,所述确定所述图像破损区域的各断裂结构线的多个图像特征,包括:确定所述图像破损区域的各所述断裂结构线的像素梯度、曲率和弧度,所述弧度为预设长度的断裂结构线的弧度。3.根据权利要求1所述的方法,其特征在于,所述在所述图像破损区域边界通过搜索框选取第一图像匹配块,包括:引用patchmatch算法的全局随机搜索在所述图像破损区域边界通过搜索框进行随机搜索,获得多个图像匹配块;根据预设选取方式,从所述多个图像匹配块中选取第一图像匹配块,其中,所述预设选取方式包括:先验知识、随机指定中的至少一种。4.根据权利要求1所述的方法,其特征在于,所述在所述第二图像匹配块周围的所述图像完好区域中,通过对搜索框添加随机扰动的方式选取第三图像匹配块,包括:对所述搜索框添加随机扰动,以扩大所述搜索框的空间范围;在所述第二图像匹配块周围的所述图像完好区域中,使用添加所述随机扰动的所述搜索框进行搜索,并基于峰值信噪比PSNR和结构相似度SSIM从搜索结果中选取第三图像匹配块。5.根据权利要求1所述的方法,其特征在于,所述基于所述第三图像匹配块和所述第二图像匹配块中的至少一个,对所述子区域进行像素填充,包括:确定所述第三图像匹配块和所述第二图像匹...

【专利技术属性】
技术研发人员:尹洋甘勋李科
申请(专利权)人:中国农业银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1