为了缩短图像识别处理所需的处理时间，针对由2个摄像机拍摄物体所得的2个源图像，修正部(26a、26b)以将2个源图像左右并排的情况下成为相同高度的方式进行修正。视差运算部(28)基于修正后的2个源图像，通过块匹配处理来计算视差。视差图像生成部(30)基于由视差运算部(28)计算出的视差来生成视差图像。在块匹配处理中使用的块为包含纵向上m个像素且横向上n个像素的像素数的矩形的情况下，第一缩小图像生成部(32)生成将修正后的2个源图像中的1个图像以纵向的像素数成为1/m且横向的像素数成为1/n的方式缩小而得到的第一缩小图像。由此，使第一缩小图像的分辨率与视差图像的分辨率相等。而且，图像识别部(34)基于视差图像和第一缩小图像对物体进行图像识别处理。
【技术实现步骤摘要】
【国外来华专利技术】图像处理装置
本专利技术涉及对物体进行图像识别的图像处理装置。
技术介绍
作为对物体进行图像识别的图像处理装置，已知有进行如下图像识别处理的装置：基于由两个摄像机拍摄的2个源图像，计算源图像间的物体位置的偏离量即视差并生成视差图像，使用该视差图像和源图像识别物体的三维位置(例如参照专利文献1)。现有技术文献专利文献1：日本特开2009－146217号公报
技术实现思路
专利技术要解决的课题但是，存在考虑到减轻图像处理装置的处理负担等，基于通过块匹配计算出的视差来生成视差图像的情况。在这种情况下，按块匹配中使用的每个块即按多个像素计算1个视差，因此，按多个像素对应1个视差信息的视差图像与按1个像素对应1个亮度信息的源图像相比，外观上的分辨率降低。但是，在视差图像的分辨率与源图像的分辨率不同的情况下，在使用视差图像和源图像进行的图像识别处理中，需要每次计算两个图像间对应的像素的位置，由此可能导致图像识别处理所需的时间变长。与之相对，通过并行地进行图像识别处理，能够缩短处理时间，但是处理所需要的电路结构会变得大型化或复杂化。因此，本专利技术鉴于上述问题而完成，其目的在于提供一种能够缩短物体的图像识别处理所需的处理时间的图像处理装置。用于解决课题的方案因此，本专利技术涉及的图像处理装置，其基于由2个摄像机拍摄的2个源图像，通过块匹配计算视差，并基于计算出的视差生成视差图像。而且，生成将2个源图像中的至少1个源图像与视差图像相应地缩小而得到的缩小图像，基于视差图像和缩小图像对物体进行图像识别。专利技术效果根据本专利技术的图像处理装置，能够缩短物体的图像识别处理所需的处理时间。附图说明图1是表示图像识别系统的概略结构的说明图。图2是表示立体摄像机和基于其的三角测量技术的说明图。图3是表示图像识别LSI的处理内容的框图。图4表示块匹配处理的方法，(a)是基准图像的第一块的设定方法，(b)是比较图像的第二块的搜索方法。图5是表示图像识别LSI的其他方式的处理内容的框图。符号说明10立体摄像机101摄像机102摄像机101a拍摄元件102a拍摄元件22图像处理LSI24通信总线28视差运算部30视差图像生成部32第一缩小图像生成部34图像识别部36a第二缩小图像生成部36b第二缩小图像生成部具体实施方式下面，参照附图详述用于实施本专利技术的第一实施方式的一例。本实施方式的图像处理装置是在立体摄像机在相同时刻从不同的位置拍摄物体而得到的一对图像上，通过块匹配计算物体的位置偏离(视差)，并基于计算出的视差用公知的转换式计算物体的三维位置、即对物体进行图像识别的装置。该装置能够应用于监视可疑者的侵入等的监视系统、预测与障碍物碰撞的危险性来辅助车辆安全行驶的车载系统等需要进行物体识别的各种系统。图1表示包含图像处理装置的图像识别系统的一例。图像识别系统包括：由2个摄像机101、102构成的立体摄像机10；控制立体摄像机10的摄像机控制部12；作为临时存储区域的RAM(RandomAccessMemory，随机存取存储器)14；存储程序和各种初始值的ROM(ReadOnlyMemory，只读储存器)16；进行图像识别系统整体的控制的CPU(CentralProcessingUnit，中央处理单元)18；将由图像识别系统识别的物体的识别信息向图像识别系统的外部输出的外部IF(Interface，接口)20；和图像处理LSI(LargeScaleIntegration，大规模集成电路)22，各构成要素经由通信总线24进行数据的发送接收。如图2所示，立体摄像机10具有例如CCD(ChargeCoupledDevice，电荷耦合器件)图像传感器或CMOS(ComplementaryMetalOxideSemiconductor，互补金属氧化物半导体)图像传感器等拍摄元件101a、102a，将从拍摄对象物通过透镜101b、102b射入拍摄元件101a、102a的光与其强度对应地转换成电信号。电信号作为表示所拍摄的物体的亮度信息的源图像数据，经由通信总线24输出到RAM14或直接输出到图像处理LSI22。源图像的大小也取决于拍摄元件101a、102a的像素数，但是在本实施方式中例如是10兆字节左右的大小。将该立体摄像机10的光轴在三维空间的xyz坐标系的xz平面中与z轴平行地配置，并且将透镜101b、102b沿着x轴排列的情况下，将来自拍摄对象物A的光通过一个摄像机101的透镜101b射入拍摄元件101a时的x坐标x1和来自拍摄对象物A的光通过另一个摄像机102的透镜102b射入拍摄元件102a时的x坐标x2的差值的绝对值|x1－x2|作为视差δ得到。而且，拍摄对象物A的z坐标、即从立体摄像机10到拍摄对象物A的距离D，使用视差δ、2个摄像机的基线长度(光轴间隔)b、以及透镜101b、102b与拍摄元件101a、101b之间的焦点距离f，通过下式求得。D＝b×f/δ以下，在本说明书中，为便于说明，将y方向设为高度方向，立体摄像机10以将摄像机101和摄像机102横向排列且平行地配置在相同高度的位置上的“平行同位立体”的摄像机为前提，不过当然不限于这样的配置。摄像机控制部12为对摄像机101和摄像机102进行控制的控制电路。具体而言，摄像机控制部12进行控制，以使摄像机101和摄像机102的拍摄时刻为同时。这是因为，如果拍摄时刻不同，则在该时刻期间拍摄对象物的位置发生了变化的情况下，不能根据拍摄对象物的最新位置计算视差δ。此外，摄像机控制部12进行控制，以使摄像机101和摄像机102的曝光量相等。这是因为，在后述的块匹配处理中，关于同一拍摄对象物，如果在2个源图像中以同一亮度值相对应，则匹配精度提高。图像处理LSI22是通过经由通信总线24输入从立体摄像机10输出的2个源图像数据而对物体进行图像识别的图像处理装置。图3表示在图像处理LSI22中进行的处理的内容。图像处理LSI22包含修正部26a、26b、视差运算部28、视差图像生成部30、第一缩小图像生成部32和图像识别部34。修正部26a、26b针对输入的2个源图像数据，以将2个源图像左右并排的情况下拍摄的物体成为相同高度的方式进行转换，使由视差运算部28进行的后述的块匹配处理变得容易。用于转换的修正数据是通过参照修正数据表(存储在ROM16中)而得到的，该修正数据表通过预先进行校正(calibration)而生成。在该校正中，预先测量透镜101b、102b的变形、摄像机101、102的安装位置、角度的误差等各种误差来计算修正数据。视差运算部28构成基于由修正部26a、26b修正后的2个源图像数据通过块匹配处理来计算视差的视差运算单元。如图4(a)所示，块匹配处理将源图像的一方(以下称为“基准图像”)通过规定形状的第一块(图中的粗实线)以包含多个像素的方式划分，并且如图4(b)所示，将源图像的另一方(以下称为“比较图像”)通过与第一块相同的大小、形状、位置的第二块(图中的粗实线)划分，将该第二块在横向上各错开1个像素，在各位置上计算关于第一块内和第二块内的2个亮度图案(pattern)的相关值，搜索相关值最低、即相关最高的位置。在本实施方式中，相关值的计算方法使用差分绝对值和(SAD本文档来自技高网...
【技术保护点】
一种图像处理装置，其特征在于，包括：视差运算单元，其基于由2个摄像机拍摄的2个源图像，通过块匹配计算视差；视差图像生成单元，其基于由所述视差运算单元计算出的视差来生成视差图像；第一缩小图像生成单元，其生成将所述2个源图像中的至少1个源图像与所述视差图像相应地缩小而得到的第一缩小图像；和图像识别单元，其基于所述视差图像和所述第一缩小图像，对所述物体进行图像识别。
【技术特征摘要】
【国外来华专利技术】2012.10.29 JP 2012-2375911.一种图像处理装置，其特征在于，包括：视差运算单元，其基于由2个摄像机拍摄物体而得到的2个源图像，通过块匹配计算视差；视差图像生成单元，其基于由所述视差运算单元计算出的视差来生成视差图像；第一缩小图像生成单元，其生成将所述2个源图像中的至少1个源图像按照与所述视差图像相对应的方式缩小而得到的第一缩小图像；和图像识别单元，其基于所述视差图像和所述第一缩小图像，对所述物体进行图像识别，其中，所述第一缩小图像生成单元根据所述块匹配中使用的块的形状缩小所述2个源图像中的至少1个源图像，所述块的形状为正方形或长方形，在所述块中包含的像素数为纵向上m个像素且横向上n个像素的情况下，所述第一缩小图像生成单元使用规定数k，以下述方式生成所述第一缩小图像：所述第一缩小图像的纵向的像素数为所述至少1个源图像的纵向的像素数除以(m×k)而得到的像素数，并且所述第一缩小图像的横向的像素数为所述至少1个源图像的横向的像素数除以(n×k)而得到的像素数，其中，所述规定数k为1以上的自然数。2.根据权利要求1所述的图像处理装置，其特征在于：所述规定...
【专利技术属性】
技术研发人员：的野春树，大塚裕史，
申请(专利权)人：日立汽车系统株式会社，
类型：发明
国别省市：日本;JP
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。