本发明专利技术涉及使用至少一个附加图像的图像增强和边缘验证方法和设备。一种图像处理系统,包括图像处理器,其被配置成对第一和第二图像分别执行第一和第二边缘检测操作以获得各第一和第二边缘图像,以使用来自第一和第二边缘图像的边缘应用联合边缘加权操作,基于边缘加权操作的结果生成边缘掩蔽,利用该边缘掩蔽来获得第三边缘图像,并基于第三边缘图像生成第三图像。仅以示例的方式,在给定实施例中,第一图像可包括由深度成像器生成的第一深度图像,第二图像可包括与第一图像基本上相同场景的二维图像,并且第三图像可包括相对于第一深度图像具有增强边缘质量的增强深度图像。
【技术实现步骤摘要】
【国外来华专利技术】【专利摘要】本专利技术涉及使用至少一个附加图像的图像增强和边缘验证方法和设备。一种图像处理系统,包括图像处理器,其被配置成对第一和第二图像分别执行第一和第二边缘检测操作以获得各第一和第二边缘图像,以使用来自第一和第二边缘图像的边缘应用联合边缘加权操作,基于边缘加权操作的结果生成边缘掩蔽,利用该边缘掩蔽来获得第三边缘图像,并基于第三边缘图像生成第三图像。仅以示例的方式,在给定实施例中,第一图像可包括由深度成像器生成的第一深度图像,第二图像可包括与第一图像基本上相同场景的二维图像,并且第三图像可包括相对于第一深度图像具有增强边缘质量的增强深度图像。【专利说明】使用至少一个附加图像的图像增强和边缘验证方法和设备
本专利技术一般地涉及图像处理,并且更具体地涉及诸如深度图及其他类型的深度图 之类的图像的处理。
技术介绍
已知有用于检测图像中的边缘的多种不同技术。此类技术一般地在应用于高分辨 率图像时产生可接受的结果,诸如由数字式照相机产生的照片或其他二维(2D)图像。然 而,许多重要机器视觉应用利用由诸如结构光(SL)照相机或飞行时间(Tf)照相机之类的 深度成像器产生的三维(3D)图像。这些深度图像常常是低分辨率图像且通常包括高噪声 且模糊的边缘。 常规边缘检测技术一般地在被应用于深度图像时表现并不很好。例如,这些常规 技术可遗漏给定深度图像中的重要边缘或将多个伪边缘连同重要边缘一起定位。结果产生 的检测边缘质量差,并且因此破坏后续图像处理操作的有效性,诸如特征提取、图案识别、 姿势识别、对象识别和跟踪。
技术实现思路
在一个实施例中,一种图像处理系统包括图像处理器,其被配置成对各第一和第 二图像执行第一和第二边缘检测操作以获得相应的第一和第二边缘图像,以使用来自第一 和第二边缘图像的边缘应用联合边缘加权操作,基于边缘加权操作的结果生成边缘掩蔽, 利用该边缘掩蔽来获得第三边缘图像,并基于第三边缘图像生成第三图像。 仅以示例的方式,给定实施例中的第一图像可包括由深度成像器生成的第一深度 图像,第二图像可包括与第一图像基本上相同场景的二维图像,并且第三图像可包括相对 于第一深度图像具有增强边缘质量的增强深度图像。 本专利技术的其他实施例包括但不限于方法、设备、系统、处理设备、集成电路以及具 有体现在其中的计算机程序代码的计算机可读存储介质。 【专利附图】【附图说明】 图1是一个实施例中的包括被配置成用于图像增强和边缘验证的图像处理器的 图像处理系统的框图。 图2是用于使用图1系统的图像处理器的灰度图像来产生增强深度图像的示例性 过程的流程图。 图3图示出可在图2过程的联合边缘加权操作中使用的不同像素近邻。 【具体实施方式】 在本文中将结合示例性图像处理系统来举例说明本专利技术的实施例,该示例性图像 处理系统包括用于生成具有可靠边缘的增强深度图像的图像处理器或其他类型的处理设 备。然而,应理解的是本专利技术实施例更一般地可应用于涉及到通过利用一个或多个附加图 像来增强一个图像中的边缘质量的任何图像处理系统或关联设备或技术。 图1示出了本专利技术的实施例中的图像处理系统100。图像处理系统100包括从一 个或多个图像源105接收图像并将已处理图像提供给一个或多个图像目的地107的图像处 理器102。图像处理器102还通过网络104与多个处理设备106通信。 虽然图像源105和图像目的地107在图1中被示为与处理设备分离,但可至少部 分地利用处理设备106中的一个或多个来实现此类源和目的地的至少子集。相应地,可通 过网络104将图像提供给图像处理器102以用于来自处理设备106中的一个或多个的处 理。同样地,已处理图像可被图像处理器102通过网络104传送至处理设备106中的一个 或多个。因此可将此类处理设备视为图像源或图像目的地的示例。 给定图像源可包括例如诸如被配置成生成深度图像的SL照相机或ToF照相机之 类的3D成像器或者被配置成生成灰度图像、彩色图像、红外图像或其他类型的2D图像的2D 成像器。还可能的是单个成像器或其他图像源能够提供深度图像和诸如灰度图像、彩色图 像或红外图像之类的相应2D图像两者。例如,某些类型的现有3D照相机能够产生给定场 景的深度图以及相同场景的2D图像。替换地,提供给定场景的深度图的3D成像器能够接 近于提供基本上相同场景的2D图像的单独高分辨率摄像机或其他2D成像器地被布置。 图像源的另一示例是向图像处理器102提供图像以用于处理的存储设备或服务 器。 给定图像目的地可包括例如计算机或移动电话的人机接口的一个或多个显示屏, 或者从图像处理器102接收已处理图像的至少一个存储设备或服务器。 并且,虽然图像源105和图像目的地107在图1中被示为与图像处理器102分离, 但可至少部分地将图像处理器102与公共处理设备的一个或多个图像源和所述一个或多 个图像目的地的至少子集组合。因此,例如,给定图像源和图像处理器102可在同一处理设 备上共同地实现。同样地,给定图像目的地和图像处理器102可在同一处理设备上共同地 实现。 在本实施例中,图像处理器102被配置成对各第一和第二图像执行第一和第二边 缘检测操作以获得相应的第一和第二边缘图像,使用来自第一和第二边缘图像的边缘来应 用联合边缘加权操作,基于边缘加权操作的结果来生成边缘掩蔽,利用该边缘掩蔽来获得 第三边缘图像,并基于第三边缘图像来生成第三图像。 如图1中所示的图像处理器102包括预处理模块110、边缘检测模块112、联合边 缘加权模块114、边缘掩蔽模块115、边缘去水印模块116和后处理模块118。 作为上述第一、第二和第三图形的一个可能示例,给定实施例中的第一图像可包 括由诸如SL照相机或ToF照相机之类的深度成像器产生的深度图像,第二图像可包括与第 一图像基本上相同场景的2D图像,并且第三图像可包括相对于第一深度图像具有增强边 缘质量的增强深度图像。上文已指出单个成像器或其他图像源能够提供深度图像和诸如灰 度图像、彩色图像或红外图像之类的相应2D图像两者。替换地,能够分别由单独3D和2D 成像器来提供第一和第二图像。并且,可使用多个附加图像来增强第一图像,与在某些实施 例中仅使用第二图像相反。在其他实施例中可接收、处理和生成其他类型和布置的图像。 在其他实施例中,能够改变图1实施例中的图像处理器102中所示的模块的特定 数目和布置。例如,在其他实施例中,可将这些模块中的两个或更多个组合成较少数目的模 块。可使用其他常规图像处理集成电路或被适当地修改成执行如本文公开的处理操作的其 他类型的图像处理电路来实现图像处理器102的模块110、112、115、116和118中的一个或 多个的至少一部分。可在本专利技术的一个或多个实施例中使用的图像处理电路的一个可能示 例是被适当地重配置成执行与模块110、112、114、115、116和118中的一个或多个相关联的 功能的另外常规图形处理器。 下面将结合图2的流程图来更详细地描述图像处理器102的操作。此流程图图示 出用于使用至少一个附加图像的图像增强和边缘验证的示例性过程,在这种情况下,本文档来自技高网...
【技术保护点】
一种方法,包括:对第一图像和第二图像分别执行第一边缘检测操作和第二边缘检测操作以获得相应的第一边缘图像和第二边缘图像;使用来自第一边缘图像和第二边缘图像的边缘来应用联合边缘加权操作;基于边缘加权操作的结果生成边缘掩蔽;利用边缘掩蔽来获得第三边缘图像;以及基于第三边缘图像来生成第三图像;其中,所述执行第一边缘检测操作和第二边缘检测操作、应用联合边缘加权操作、生成边缘掩蔽、利用边缘掩蔽和生成第三图像在包括被耦合到存储器的处理器的至少一个处理设备中实施。
【技术特征摘要】
【国外来华专利技术】...
【专利技术属性】
技术研发人员:D·V·帕芬诺韦,D·V·帕克荷门科,I·L·马祖仁克,D·V·扎塞夫,D·N·巴宾,
申请(专利权)人:LSI公司,
类型:发明
国别省市:美国;US
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。