System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 图像处理方法、装置及存储介质制造方法及图纸_技高网

图像处理方法、装置及存储介质制造方法及图纸

技术编号:44311771 阅读:5 留言:0更新日期:2025-02-18 20:25
本公开是关于一种图像处理方法、装置及存储介质。图像处理方法包括:在拍照过程中确定参考帧图像以及移动帧图像;对参考帧图像以及移动帧图像进行第一次配准处理,得到第一配准图像以及第一运动特征;基于第一配准图像以及所述参考帧图像进行第二次配准处理,得到第二运动特征;进行图像融合,得到目标图像。本公开通过在第二次配准针对第一次配准图像以及参考帧图像进行配准,并将二者的第二运动特征与第一运动特征进行叠加,得到配准后融合后的图像,减少了配准过程中因插值法计算而造成的配准失误率。

【技术实现步骤摘要】

本公开涉及图像处理领域,尤其涉及图像处理方法、装置及存储介质


技术介绍

1、随着终端技术的发展,用户对终端拍照所显示的图像画质要求越来越高。

2、为了提升拍照的图像画质,通常采用多帧融合的方式对拍摄画面进行去噪,以提升画质。在多帧融合的去噪方式中,需要对不同帧号的图像进行配准处理。

3、相关技术中,配准处理的过程较为复杂,而且会导致配准后的图像画质降低的问题,进而影响用户体验。


技术实现思路

1、为克服相关技术中存在的问题,本公开提供一种图像处理方法、装置及存储介质。

2、根据本公开实施例的第一方面,提供一种图像处理方法,包括在拍照过程中确定参考帧图像以及移动帧图像;对所述参考帧图像以及所述移动帧图像进行第一次配准处理,得到第一配准图像以及第一运动特征,所述第一运动特征为所述移动帧图像与所述第一配准图像之间的运动特征;基于所述第一配准图像以及所述参考帧图像进行第二次配准处理,得到第二运动特征,所述第二运动特征为所述参考帧图像与所述第一配准图像之间的运动特征;基于所述参考帧图像、所述第一配准图像、所述移动帧、所述第一运动特征以及所述第二运动特征进行图像融合,得到目标图像。

3、一种实施方式中,所述基于所述第一配准图像以及所述参考帧图像进行第二次配准处理,包括:基于第一采样比例,对所述参考帧图像进行下采样,得到第一参考帧图像,并基于所述第一采样比例,对所述第一配准图像进行下采样,得到第一采样图像,其中,所述第一采样比例大于0,且小于1;基于所述第一参考帧图像,构建第一图像金字塔,所述第一参考帧图像为所述第一图像金字塔第一层,所述第一图像金字塔为n层,第n层对应的第n帧参考帧图像由第n-1层对应的第n-1帧参考帧图像基于所述第一采样比例进行下采样得到,并基于所述第一采样图像,构建第二图像金字塔,所述第一采样图像为所述第二图像金字塔第一层,所述第二图像金字塔为n层,第n层对应的第n帧采样图像由第n-1层对应的第n-1帧采样图像基于所述第一采样比例进行下采样得到,其中,n为大于1的整数;基于第n帧参考帧图像以及第n帧采样图像确定第一光流特征,所述第一光流特征用于表征所述第n帧参考帧图像与第n帧采样第二图像之间的光流场的运动特征;对所述第一光流特征进行上采样迭代,得到第二运动特征。

4、另一种实施方式中,所述对所述第一光流特征进行上采样迭代,得到第二运动特征,包括:基于所述第n帧参考帧图像以及所述第n帧采样图像,确定所述第一光流特征的初始值以及第一光流特征增量;对所述第一光流特征的初始值以及所述第一光流特征增量进行特征融合,得到所述第一光流特征;对所述第一光流特征基于第二采样比例进行上采样,得到第二光流采样特征,并基于所述第二光流采样特征确定第二光流特征的初始值,所述第二采样比例为所述第一采样比例的倒数;基于所述第n-1帧参考帧图像以及所述第n-1帧采样图像,确定第二光流特征增量;对所述第二光流特征的初始值以及所述第二光流特征增量进行特征融合,得到所述第二运动特征。

5、又一种实施方式中,确定所述第一光流特征的初始值,包括:基于第一搜索块在所述第n帧采样图像中确定第一目标子区域以及第一目标子区域的第一相邻区域;分别对所述第一目标子区域以及所述第一相邻区域进行光流特征提取,得到所述第一目标子区域对应的第一目标光流特征,以及每个第一相邻区域对应的第一候选光流特征;对所述第一目标光流特征与所述第一光流特征进行相似度比对,得到第一相似度结果,并对每个第一候选光流特征与所述第一光流特征进行相似度比对,得到至少一个第二相似度结果;若所述第一相似度结果大于全部所述第二相似度结果,则确定所述第一目标光流特征为第二候选光流特征;若存在所述至少一个第二相似度结果大于所述第一相似度结果,则确定所述至少一个第二相似度结果中的相似度结果最大值对应的第一候选光流特征为第二候选光流特征;对所述第二候选光流特征与零向量基于进行筛选比对,以确定所述第一光流特征的初始值。

6、又一种实施方式中,所述对所述第二候选光流特征与零向量进行筛选比对,以确定所述第一光流特征的初始值,包括:若所述第二候选光流特征的度量值小于或等于第一度量阈值,则确定所述第二光流候选特征的度量值为所述第一光流特征的初始值;若所述第二候选光流特征的度量值大于第一度量阈值,则对所述零向量与所述第一光流特征进行相似度比对,得到第三相似度结果,并基于所述第三相似度结果确定所述第一光流特征的初始值,包括:若所述第三相似度结果大于所述第一相似度结果,且所述第三相似度结果与所述第一相似度结果的差值大于第一相似度阈值,则确定零向量为所述第一光流特征的初始值。

7、又一种实施方式中,所述确定所述第二光流特征的初始值,包括:基于第二搜索块在所述第n-1帧采样图像中确定第二目标子区域以及与第二目标子区域相邻的第二相邻区域;分别对所述第二目标子区域以及所述第二相邻区域进行光流特征提取,得到所述第二目标子区域对应的第二目标光流特征,以及每个第二相邻区域对应的第三候选光流特征;对所述第二目标光流特征与所述第二光流采样特征进行相似度比对,得到第四相似度结果,并对每个第三候选光流特征与所述第二光流采样特征进行相似度比对,得到至少一个第五相似度结果;若所述第四相似度结果大于全部所述第五相似度结果,则确定所述第二目标光流特征为第四候选光流特征;若存在所述至少一个第五相似度结果大于所述第四相似度结果,则确定所述至少一个第五相似度结果中的相似度结果最大值对应的第三候选光流特征为第四候选光流特征;对所述第四候选光流特征与零向量进行筛选比对,以确定所述第二光流特征的初始值。

8、又一种实施方式中,所述对所述第四候选光流特征与零向量进行筛选比对,以确定所述第二光流特征的初始值,包括:若所述第四候选光流特征的度量值小于或等于第二度量阈值,则确定所述第四光流候选特征的度量值为所述第二光流特征的初始值;若所述第四候选光流特征的度量值大于第二度量阈值,则对所述零向量与所述第二光流采样特征进行相似度比对,得到第六相似度结果,并基于所述第六相似度结果确定所述第二光流特征的初始值,包括:若所述第六相似度结果大于所述第四相似度结果,且所述第六相似度结果与所述第一相似度结果的差值大于第二相似度阈值,则确定零向量为所述第二光流特征的初始值。

9、又一种实施方式中,所述得到第二运动特征之后,还包括:对所述第一运动特征以及所述第二运动特征进行特征融合,得到第三运动特征,所述第三运动特征用于表征所述第二次配准处理后所述参考帧图像与所述移动帧图像之间的运动特征;确定所述第一运动特征对应第一图像块的相似度为第四相似度结果,并确定所述第三运动特征对应的第二图像块的相似度为第五相似度结果,所述第一图像块基于所述第一配准图像确定,所述第二图像块基于所述参考帧图像确定;若所述第四相似度结果小于所述第五相似度结果,则确定所述第二光流特征增量;若所述第四相似度结果大于或等于所述第五相似度结果,则将所述第二运动特征置零后,确定所述第二光流特征增量。...

【技术保护点】

1.一种图像处理方法,其特征在于,包括:

2.根据权利要求1所述的图像处理方法,其特征在于,所述基于所述第一配准图像以及所述参考帧图像进行第二次配准处理,包括:

3.根据权利要求2所述的图像处理方法,其特征在于,所述对所述第一光流特征进行上采样迭代,得到第二运动特征,包括:

4.根据权利要求3所述的图像处理方法,其特征在于,确定所述第一光流特征的初始值,包括:

5.根据权利要求4所述的图像处理方法,其特征在于,所述对所述第二候选光流特征与零向量进行筛选比对,以确定所述第一光流特征的初始值,包括:

6.根据权利要求3所述的图像处理方法,其特征在于,所述确定所述第二光流特征的初始值,包括:

7.根据权利要求6所述的图像处理方法,其特征在于,所述对所述第四候选光流特征与零向量进行筛选比对,以确定所述第二光流特征的初始值,包括:

8.根据权利要求1所述的图像处理方法,其特征在于,所述得到第二运动特征之后,还包括:

9.根据权利要求2所述的图像处理方法,其特征在于,任一层所述第一图像金字塔对应的光流数目,基于当前层的参考帧图像面积与第二搜索块的面积比确定;

10.一种图像处理装置,其特征在于,包括:

11.根据权利要求10所述的图像处理装置,其特征在于,所述配准单元基于所述第一配准图像以及所述参考帧图像进行第二次配准处理,包括:

12.根据权利要求11所述的图像处理装置,其特征在于,所述配准单元确定对所述第一光流特征进行上采样迭代,得到第二运动特征,包括:

13.根据权利要求12所述的图像处理装置,所述配准单元确定所述第一光流特征的初始值,包括:

14.根据权利要求13所述的图像处理装置,其特征在于,所述配准单元对所述第二候选光流特征与零向量进行筛选比对,以确定所述第一光流特征的初始值,包括:

15.根据权利要求12所述的图像处理装置,其特征在于,所述配准单元确定所述第二光流特征的初始值,包括:

16.根据权利要求15所述的图像处理装置,其特征在于,所述配准单元对所述第四候选光流特征与零向量进行筛选比对,以确定所述第二光流特征的初始值,包括:

17.根据权利要求10所述的图像处理装置,其特征在于,所述配准单元到第二运动特征之后,还包括:

18.根据权利要求11所述的图像处理装置,其特征在于,所述处理单元用于:

19.一种图像处理装置,其特征在于,包括:

20.一种存储介质,其特征在于,所述存储介质中存储有指令,当所述存储介质中的指令由终端的处理器执行时,使得所述终端能够执行权利要求1至9中任一项所述的图像处理方法。

...

【技术特征摘要】

1.一种图像处理方法,其特征在于,包括:

2.根据权利要求1所述的图像处理方法,其特征在于,所述基于所述第一配准图像以及所述参考帧图像进行第二次配准处理,包括:

3.根据权利要求2所述的图像处理方法,其特征在于,所述对所述第一光流特征进行上采样迭代,得到第二运动特征,包括:

4.根据权利要求3所述的图像处理方法,其特征在于,确定所述第一光流特征的初始值,包括:

5.根据权利要求4所述的图像处理方法,其特征在于,所述对所述第二候选光流特征与零向量进行筛选比对,以确定所述第一光流特征的初始值,包括:

6.根据权利要求3所述的图像处理方法,其特征在于,所述确定所述第二光流特征的初始值,包括:

7.根据权利要求6所述的图像处理方法,其特征在于,所述对所述第四候选光流特征与零向量进行筛选比对,以确定所述第二光流特征的初始值,包括:

8.根据权利要求1所述的图像处理方法,其特征在于,所述得到第二运动特征之后,还包括:

9.根据权利要求2所述的图像处理方法,其特征在于,任一层所述第一图像金字塔对应的光流数目,基于当前层的参考帧图像面积与第二搜索块的面积比确定;

10.一种图像处理装置,其特征在于,包括:

11.根据权利要求10所述的图像处理装置,其特征在于,所述配...

【专利技术属性】
技术研发人员:蒋兴儒
申请(专利权)人:北京小米移动软件有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1