本公开提供一种图像对齐方法及装置、计算机可读介质和电子设备，涉及图像处理技术领域。该方法包括：获取至少两帧待处理图像；对所述待处理图像进行图像配准处理，得到所述待处理图像之间的初始光流图像；确定所述初始光流图像中的遮挡区域；基于所述遮挡区域对所述初始光流图像进行修复，确定目标光流图像，并通过所述目标光流图像实现对所述待处理图像的图像对齐。本公开能够对光流图像进行平滑更新，有效避免光流图像由于遮挡区域产生的扭曲和断层现象导致图像对齐不准确的问题，提升待处理图像的光流图像的准确性，进而提高图像对齐结果的准确性，保证待处理图像的图像融合结果。
【技术实现步骤摘要】
所属的技术人员能够理解，本公开的各个方面可以实现为系统、方法或程序产品。因此，本公开的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“系统”。本公开的示例性实施方式还提供一种电子设备。该电子设备可以是上述终端设备101、102、103和服务器105。一般的，该电子设备可以包括处理器与存储器，存储器用于存储处理器的可执行指令，处理器配置为经由执行可执行指令来执行上述图像对齐方法。下面以图9中的移动终端900为例，对该电子设备的构造进行示例性说明。本领域技术人员应当理解，除了特别用于移动目的的部件之外，图9中的构造也能够应用于固定类型的设备。如图9所示，移动终端900具体可以包括：处理器901、存储器902、总线903、移动通信模块904、天线1、无线通信模块905、天线2、显示屏906、摄像模块907、音频模块908、电源模块909与传感器模块910。处理器901可以包括一个或多个处理单元，例如：处理器901可以包括ap(application processor，应用处理器)、调制解调处理器、gpu(graphics processingunit，图形处理器)、isp(image signal processor，图像信号处理器)、控制器、编码器、解码器、dsp(digital signal processor，数字信号处理器)、基带处理器和/或npu(neural-network processing unit，神经网络处理器)等。本示例性实施方式中的图像对齐方法可以由ap、gpu或dsp来执行，当方法涉及到神经网络相关的处理时，可以由npu来执行，例如npu可以加载神经网络参数并执行神经网络相关的算法指令。编码器可以对图像或视频进行编码(即压缩)，以减小数据大小，便于存储或发送。解码器可以对图像或视频的编码数据进行解码(即解压缩)，以还原出图像或视频数据。移动终端900可以支持一种或多种编码器和解码器，例如：jpeg(joint photographicexperts group，联合图像专家组)、png(portable network graphics，便携式网络图形)、bmp(bitmap，位图)等图像格式，mpeg(moving picture experts group，动态图像专家组)1、mpeg10、h.1063、h.1064、hevc(high efficiency video coding，高效率视频编码)等视频格式。处理器901可以通过总线903与存储器902或其他部件形成连接。存储器902可以用于存储计算机可执行程序代码，可执行程序代码包括指令。处理器901通过运行存储在存储器902的指令，执行移动终端900的各种功能应用以及数据处理。存储器902还可以存储应用数据，例如存储图像，视频等文件。移动终端900的通信功能可以通过移动通信模块904、天线1、无线通信模块905、天线2、调制解调处理器以及基带处理器等实现。天线1和天线2用于发射和接收电磁波信号。移动通信模块904可以提供应用在移动终端900上3g、4g、5g等移动通信解决方案。无线通信模块905可以提供应用在移动终端900上的无线局域网、蓝牙、近场通信等无线通信解决方案。显示屏906用于实现显示功能，如显示用户界面、图像、视频等。摄像模块907用于实现拍摄功能，如拍摄图像、视频等。音频模块908用于实现音频功能，如播放音频，采集语音等。电源模块909用于实现电源管理功能，如为电池充电、为设备供电、监测电池状态等。传感器模块910可以包括一种或多种传感器，用于实现相应的感应检测功能。例如，传感器模块910可以包括惯性传感器，其用于检测移动终端900的运动位姿，输出惯性传感数据。本公开的示例性实施方式还提供了一种计算机可读存储介质，其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施方式中，本公开的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当程序产品在终端设备上运行时，程序代码用于使终端设备执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施方式的步骤。需要说明的是，本公开所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、rf等等，或者上述的任意合适的组合。此外，可以以一种或多种程序设计语言的任意组合来编写用于执行本公开操作的程序代码，程序设计语言包括面向对象的程序设计语言—诸如java、c++等，还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(lan)或广域网(wan)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。本领域技术人员在考虑说明书及实践这里公开的专利技术后，将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限。
技术介绍
1、图像配准(image registration)是指对齐或者融合叠加两个或多个来自不同来源、在不同时间和角度拍摄的图像的过程。其中，图像对齐技术广泛应用于计算机视觉各类任务，尤其目前的智能手机摄影已经出现了从单摄到双摄、多摄本文档来自技高网...
【技术保护点】
1.一种图像对齐方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述基于所述遮挡区域对所述初始光流图像进行修复，确定目标光流图像，包括：
3.根据权利要求2所述的方法，其特征在于，所述遮挡区域包括边缘像素以及中间像素，所述基于所述非遮挡区域中的光流值对所述遮挡区域进行填充处理，确定所述目标光流图像，包括：
4.根据权利要求3所述的方法，其特征在于，所述在所述非遮挡区域中确定所述边缘像素对应的邻近光流值，并根据所述邻近光流值更新所述边缘像素的光流值，得到第一光流值，包括：
5.根据权利要求4所述的方法，其特征在于，所述基于所述邻近光流值确定至少一个所述边缘像素的更新光流值，包括：
6.根据权利要求4所述的方法，其特征在于，所述对所述更新光流值进行加权处理，得到所述边缘像素对应的第一光流值，包括：
7.根据权利要求1所述的方法，其特征在于，所述待处理图像包括第一图像和第二图像，所述确定所述初始光流图像中的遮挡区域，包括：
8.根据权利要求1所述的方法，其特征在于，所述确定所述初始光流图像中的遮挡区域，包括：
9.一种图像对齐装置，其特征在于，包括：
10.一种计算机可读介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至8中任一项所述的方法。
11.一种电子设备，其特征在于，包括：
...
【技术特征摘要】
1.一种图像对齐方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述基于所述遮挡区域对所述初始光流图像进行修复，确定目标光流图像，包括：
3.根据权利要求2所述的方法，其特征在于，所述遮挡区域包括边缘像素以及中间像素，所述基于所述非遮挡区域中的光流值对所述遮挡区域进行填充处理，确定所述目标光流图像，包括：
4.根据权利要求3所述的方法，其特征在于，所述在所述非遮挡区域中确定所述边缘像素对应的邻近光流值，并根据所述邻近光流值更新所述边缘像素的光流值，得到第一光流值，包括：
5.根据权利要求4所述的方法，其特征在于，所述基于所述邻近光流值确定至少一个所述边缘像素的...
【专利技术属性】
技术研发人员：李政青，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。