立体图像处理装置和立体图像处理方法制造方法及图纸

技术编号:11556570 阅读:146 留言:0更新日期:2015-06-04 06:20
本发明专利技术提供立体图像处理装置,其对于基线长度方向的图像区域尺寸小的对象物,也能够高精度地计算出视差。该装置(100)包括:立体图像获取单元(101),获取立体图像的基准图像和参照图像;图像剪切单元(102),从立体图像获取基准像素数据和参照像素数据;相位校正单元(103),分别对于上述像素数据进行使基准像素数据的值更加左右对称的相位校正处理;开窗单元(104),分别对于相位校正完毕的上述像素数据进行开窗;相位相关单元(105),计算开窗完毕的上述两个像素数据之间的相位相关值;以及峰值位置检测单元(106),基于相位相关值,计算参照图像的对应点相对基准图像的基准点的视差。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及计算立体图像的参照图像的对应点相对立体图像的基准图像的基准 点的视差的。
技术介绍
以往,已知有基于立体图像测量至对象物的距离的立体图像处理装置。这样的立 体图像处理装置(以下仅称为"立体图像处理装置")从参照图像提取相对基准图像的对应 点。这里,"对应点"是指参照图像中的拍摄到与基准图像的基准点相同的对象物的点。并 且,立体图像处理装置基于照相机参数和对应点相对基准点的偏移量即视差,计算至对象 物的距离。 已在研究将立体图像处理装置适用于安全装置等,该安全装置测量至车载摄像机 所拍摄的前方车辆或行人的距离。另外,近年来,这样的安全装置也逐步向小型车普及。因 此,要求立体图像处理装置中所使用的立体照相机小型化。 立体照相机小型化后,拍摄基准图像的照相机和拍摄参照图像的照相机之间的间 隔变窄,视差减小。因此,要求立体图像处理装置高精度地计算视差。 作为高精度地计算视差的技术,例如已有专利文献1中记载的现有技术。该现有 技术使用一维POC(Phase Only Correlation,仅相位相关性)方式计算视差。 具体而言,现有技术使用汉宁窗,分别从基准图像和参照图像剪切一维的像素数 据串,对剪切出的像素数据串实施一维傅立叶变换并进行合成。接着,现有技术对合成的数 据串的振幅成分进行标准化,并进行一维逆傅立叶变换,由此求相位限定相关系数。然后, 现有技术基于求得的相位限定相关系数的相关峰值,计算上述视差。 现有技术文献 专利文献 专利文献1 :日本特开2008-123141号公报
技术实现思路
专利技术要解决的问题 然而,现有技术有以下的问题:对于基线长度方向的图像区域大小小的对象物,难 以高精度地计算视差。这里,"基线长度方向的图像区域大小"是指基线长度方向上的图像 区域在立体图像上所占的大小。 作为基线长度方向的图像区域大小小的对象物,例如可举出处于远离照相机的位 置的行人。特别是在将立体图像处理装置应用于上述安全装置的情况下,优选对于基线长 度方向的图像区域大小小的对象物,也能够更高精度地计算视差。 本专利技术的目的在于,提供,其对于基线长 度方向的图像区域大小小的对象物,也能够高精度地计算视差。 解决问题的方案 本专利技术的立体图像处理装置包括:立体图像获取单元,获取立体图像的基准图像 和参照图像;图像剪切单元,分别从所述基准图像和所述参照图像剪切与所述立体图像的 基线长度方向平行的局部图像,并获取一维像素数据串,该一维像素数据串表示该局部图 像的所述基线长度方向上的像素值的分布;相位校正单元,分别对于基准像素数据和参照 像素数据进行相位校正处理,该基准像素数据是从所述基准图像获取的所述一维像素数据 串,该参照像素数据是从所述参照图像获取的所述一维像素数据串,所述相位校正处理是 在对于所述基准像素数据进行处理时,使该基准像素数据的值更加左右对称的处理;开窗 单元,分别对于相位校正完毕基准像素数据和相位校正完毕参照像素数据进行开窗,所述 相位校正完毕基准像素数据是对于所述基准像素数据进行所述相位校正处理所得的数据, 所述相位校正完毕参照像素数据是对于所述参照像素数据进行所述相位校正处理所得的 数据;相位相关单元,计算表示开窗完毕基准像素数据和开窗完毕参照像素数据之间的相 关程度的相位相关值,所述开窗完毕基准像素数据是对于所述相位校正完毕基准像素数据 进行所述开窗所得的数据,所述开窗完毕参照像素数据是对于所述相位校正完毕参照像素 数据进行所述开窗所得的数据;以及峰值位置检测单元,基于所述相位相关值,计算所述参 照图像的对应点相对于所述基准图像的基准点的视差。 本专利技术的立体图像处理方法包括以下步骤:获取立体图像的基准图像和参照图像 的步骤;分别从所述基准图像和所述参照图像剪切与所述立体图像的基线长度方向平行的 局部图像,并获取一维像素数据串的步骤,该一维像素数据串表示该局部图像的所述基线 长度方向上的像素值的分布;分别对于基准像素数据和参照像素数据进行相位校正处理的 步骤,该基准像素数据是从所述基准图像获取的所述一维像素数据串,该参照像素数据是 从所述参照图像获取的所述一维像素数据串,所述相位校正处理是在对于所述基准像素数 据进行处理时,使所述基准像素数据的值更加左右对称的处理;分别对于相位校正完毕基 准像素数据和相位校正完毕参照像素数据进行开窗的步骤,所述相位校正完毕基准像素数 据是对于所述基准像素数据进行所述相位校正处理所得的数据,所述相位校正完毕参照像 素数据是对于所述参照像素数据进行所述相位校正处理所得的数据;计算表示开窗完毕基 准像素数据和开窗完毕参照像素数据之间的相关程度的相位相关值的步骤,所述开窗完毕 基准像素数据是对于所述相位校正完毕基准像素数据进行所述开窗所得的数据,所述开窗 完毕参照像素数据是对于所述相位校正完毕参照像素数据进行所述开窗所得的数据;以及 基于所述相位相关值,计算所述参照图像的对应点相对于所述基准图像的基准点的视差的 步骤。 专利技术的效果 根据本专利技术,对于基线长度方向的图像区域大小小的对象物,也能够高精度地计 算出视差。【附图说明】 图1是表示实施方式1的立体图像处理装置的结构的一例的方框图。 图2是表示实施方式2的立体图像处理装置的结构的一例的方框图。 图3是表示实施方式2的立体图像处理装置的动作的一例的流程图。 图4是表示实施方式2中的相位校正完毕数据生成处理的一例的流程图。 图5是表示实施方式3的立体图像处理装置的结构的一例的方框图。 图6是用于说明实施方式3中的微分滤波器的效果的图。 图7是表示实施方式3的立体图像处理装置的动作的一例的流程图。 图8是表示实施方式3中的相位校正完毕数据生成处理的一例的流程图。 图9是表示实施方式4的立体图像处理装置的结构的一例的方框图。 图10是表示实施方式4的立体图像处理装置的动作的一例的流程图。 图11是表示实施方式4中的至检测出匹配度最大的位置为止的处理的概要的示 意图。 图12是表示实施方式4中的子像素推测处理的动作的一例的流程图。 图13是表示实施方式4中的从剪切局部图像到计算出反相滤波器系数为止的处 理的概要的示意图。 图14是用于说明实施方式4中的利用反相滤波器系数进行的滤波的概念的示意 图。 图15是表示实施方式4中的使用了 sine函数的峰值位置检测处理的一例的概要 的示意图。 图16是表示实施方式4中的使用了二次曲线近似的峰值位置检测处理的一例的 概要的示意图。【具体实施方式】 本专利技术涉及以下的立体图像处理,在对从基准图像获取的像素数据串开窗所得的 数据和对从参照图像获取的像素数据串开窗所得的数据之间,比较相位特性,由此求立体 图像的视差。更具体而言,本专利技术涉及以下的立体图像处理:计算基准像素数据和参照像素 数据之间的相位差,并基于计算结果求视差。 在以上述方式计算相位差的情况下,用于上述开窗的窗函数的最佳形状是左右对 称且两端相连的零形状。但是在像素数据的两端,作为开窗对象的像素数据的值大不相同 时,由这样的窗函数开窗产生的对于像素数据的相位特性的影响变得显著。在像素数据的 两端大不相同的像素数据的一例是像素数据左端的(最初的)亮度值为〇,而右端的(最后 的)亮度值成为255的边缘本文档来自技高网...
<a href="http://www.xjishu.com/zhuanli/55/CN104685535.html" title="立体图像处理装置和立体图像处理方法原文来自X技术">立体图像处理装置和立体图像处理方法</a>

【技术保护点】
立体图像处理装置,包括:立体图像获取单元,获取立体图像的基准图像和参照图像;图像剪切单元,分别从所述基准图像和所述参照图像,剪切与所述立体图像的基线长度方向平行的局部图像,并获取表示所述局部图像的所述基线长度方向上的像素值的分布的一维像素数据串;相位校正单元,分别对于基准像素数据和参照像素数据进行相位校正处理,该基准像素数据是从所述基准图像获取的所述一维像素数据串,该参照像素数据是从所述参照图像获取的所述一维像素数据串,所述相位校正处理是在对于所述基准像素数据进行处理时,使该基准像素数据的值更加左右对称的处理;开窗单元,分别对于相位校正完毕基准像素数据和相位校正完毕参照像素数据进行开窗,所述相位校正完毕基准像素数据是对于所述基准像素数据进行所述相位校正处理所得的数据,所述相位校正完毕参照像素数据是对于所述参照像素数据进行所述相位校正处理所得的数据;相位相关单元,计算表示开窗完毕基准像素数据和开窗完毕参照像素数据之间的相关程度的相位相关值,所述开窗完毕基准像素数据是对于所述相位校正完毕基准像素数据进行所述开窗所得的数据,所述开窗完毕参照像素数据是对于所述相位校正完毕参照像素数据进行所述开窗所得的数据;以及峰值位置检测单元,基于所述相位相关值,计算所述参照图像的对应点相对于所述基准图像的基准点的视差。...

【技术特征摘要】
【国外来华专利技术】...

【专利技术属性】
技术研发人员:南里卓也黑河久石原健西村洋文
申请(专利权)人:松下知识产权经营株式会社
类型:发明
国别省市:日本;JP

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1