根据深度信息处理图像的方法及装置制造方法及图纸

一种根据深度信息处理图像的方法及装置。此方法先取得由立体成像系统拍摄的左图像及右图像，以及此左图像及右图像中相对应的多个像素的深度图，此深度图记录各个像素的深度。接着，显示此左图像及右图像其中之一，以作为待处理图像。然后，接收对于待处理图像中至少一个像素的选取操作，并查询深度图，以在待处理图像中查找其深度在选取操作所选取像素的深度前后的预设范围内的多个目标像素，据此决定至少一个选取区块。最后，对选取区块执行图像处理。

【技术实现步骤摘要】
根据深度信息处理图像的方法及装置
本专利技术是有关于一种处理图像的方法及装置，且特别是有关于一种根据像素的深度信息处理图像的方法及装置。
技术介绍
采用传统电荷耦合元件（Charge-CoupledDevice，简称：CCD）相机在拍摄照片的过程中只会对整个图像采样一次，因此对于颜色亮暗明显的图像，会出现对整个图像中明亮的区域过度曝光，阴暗的区域曝光不足的现象。宽动态范围（WideDynamicRange，简称：WDR）技术采用特殊的数字信号处理（DigitalSignalProcessing，简称：DSP）电路，其可对图像中的明亮部分及阴暗部分分别进行合适的曝光，然后再利用图像融合的技术将两个图像中曝光较佳的明亮度分及阴暗部分取出并进行重组，使得重组后的图像中的明亮部分和阴暗部分都有合适的曝光。然而，由于WDR技术只针对图像中的明亮部分及阴暗部分进行处理，未能区分这些部分的景深。若使用者欲拍摄的图像中包含景深较近的拍摄主体以及景深较远的背景等需要强烈亮暗对比的区域，则执行WDR将会得到暗部噪声被放大且主体和背景对比不明显的结果。
技术实现思路
本专利技术提供一种根据深度信息处理图像的方法及装置，通过深度信息决定选取区块，而可仅针对选取区块进行图像处理。本专利技术的根据深度信息处理图像的方法适用于电子装置。此方法先取得由立体成像系统拍摄的左图像及右图像，以及此左图像及右图像中相对应的多个像素的深度图，此深度图记录各个像素的深度。接着，显示此左图像及右图像其中之一，以作为待处理图像。然后，接收对于待处理图像中至少一个像素的选取操作，并查询深度图，以在待处理图像中查找其深度在选取操作所选取像素的深度前后的第一预设范围内的多个目标像素，据此决定至少一个选取区块。最后，对选取区块执行图像处理。在本专利技术的一实施例中，在上述取得由立体成像系统拍摄的左图像及右图像的步骤之后，所述方法还包括计算左图像及右图像相对应的各个像素的像差，并根据立体成像系统的左镜头及右镜头拍摄左图像及右图像的焦距、左镜头及右镜头的镜头间距以及各个像素的像差，估测各个像素的深度。在本专利技术的一实施例中，上述计算左图像及右图像相对应的各个像素的像差的步骤包括根据各个像素在左图像及右图像中的位置，计算各个像素在左图像及右图像之间的位移，以作为像差。在本专利技术的一实施例中，在上述决定选取区块的步骤之后，所述方法还包括接收对于深度的容许度(tolerance)的调整操作，而根据此调整操作所调整的容许度，调整各个选取区块的涵盖范围。在本专利技术的一实施例中，在上述接收对于待处理图像中像素的选取操作的步骤之后，所述方法还包括将深度图所记录的深度的数值范围重新映射至选取操作所选取像素的深度前后的第二预设范围，以将调整操作可调整的涵盖范围限制在第二预设范围内。在本专利技术的一实施例中，上述对选取区块执行图像处理的步骤还包括根据待处理图像中各个像素的深度，对选取区块以及待处理图像中的其他区块执行图像处理。在本专利技术的一实施例中，上述根据待处理图像中各个像素的深度，对选取区块以及待处理图像中的其他区块执行图像处理的步骤包括根据待处理图像中各个像素的深度，增加对于选取区块执行图像处理的强度。在本专利技术的一实施例中，上述图像处理包括亮度、对比度、色温、白平衡、锐利度、鲜艳度调整，或噪声消除或特定颜色保留。本专利技术的根据深度信息处理图像的装置包括检索模块、显示模块、区块选取模块及图像处理模块。其中，检索模块是用以取得由立体成像系统拍摄的左图像及右图像，以及左图像及右图像中相对应的多个像素的深度图，此深度图记录各个像素的深度。显示模块是用以在显示单元中显示左图像及右图像其中之一，以作为待处理图像。区块选取模块是用以接收对于待处理图像中至少一个像素的选取操作，据此查询深度图，以在待处理图像中查找其深度在选取操作所选取像素的深度前后的第一预设范围内的多个目标像素，以决定至少一个选取区块。图像处理模块是用以对选取区块执行图像处理。在本专利技术的一实施例中，上述的装置还包括深度分析模块，其是用以计算检索模块所取得的左图像及右图像相对应的各个像素的像差，并根据立体成像系统的左镜头及右镜头拍摄左图像及右图像的焦距、左镜头及右镜头的镜头间距以及各个像素的像差，估测各个像素的深度。在本专利技术的一实施例中，上述的深度分析模块是根据各个像素在左图像及右图像中的位置，计算各个像素在左图像及右图像的间的位移，以作为像差。在本专利技术的一实施例中，上述的区块选取模块还接收对于深度的容许度的调整操作，并根据此调整操作所调整的容许度，以及待处理图像中各个像素的深度，调整各个选取区块的涵盖范围。在本专利技术的一实施例中，上述的装置还包括映射模块，其是用以将深度图所记录的深度的数值范围重新映射至选取操作所选取像素的深度前后的第二预设范围，以将调整操作可调整的涵盖范围限制在第二预设范围内。在本专利技术的一实施例中，上述的图像处理模块还根据待处理图像中各个像素的深度，对选取区块以及待处理图像中的其他区块执行图像处理。在本专利技术的一实施例中，上述的图像处理模块是根据待处理图像中各个像素的深度，增加对于选取区块执行图像处理的强度。在本专利技术的一实施例中，上述的图像处理包括亮度、对比度、色温、白平衡、锐利度、鲜艳度调整，或噪声消除或特定颜色保留。在本专利技术的一实施例中，上述的立体成像系统内建在所述装置中。基于上述，本专利技术的根据深度信息处理图像的方法及装置通过查询待处理图像的深度图，以提供使用者可经由点选图像以选取所欲处理的区块，并对此选取区块进行特定的图像处理。而通过仅针对选取区块进行图像处理，或是针对选取区块及其他区块分别进行不同种类或强度的图像处理，而可获得较佳的处理效果。为让本专利技术的上述特征和优点能更明显易懂，下文特举实施例，并配合附图作详细说明如下。附图说明图1是依照本专利技术一实施例所示的根据深度信息处理图像的装置的方块图；图2是依照本专利技术一实施例所示的根据深度信息处理图像的方法流程图；图3(a)～3(c)是依照本专利技术一实施例所示的根据深度信息处理图像的范例；图4是依照本专利技术一实施例所示的根据深度信息处理图像的方法流程图；图5(a)～5(b)是依照本专利技术一实施例所示的根据深度信息处理图像的范例；图6是依照本专利技术一实施例所示的根据深度信息处理图像的方法流程图。附图标记说明：10：图像处理装置；12：显示单元；14：存储单元；142：检索模块；144：显示模块；146：区块选取模块；148：图像处理模块；16：处理单元；32：图像；34、50：深度图；36、52、54：选取区块；T1、T2、T3：触碰点；S202～S210、S402～S416、S602～S610：根据深度信息处理图像的方法步骤。具体实施方式立体成像系统的双镜头可拍摄同一区域不同角度的图像，而结合左、右镜头所拍摄图像间的像差信息以及预知的镜头间距，则可准确估测出图像中各个物件的深度信息。据此，本专利技术即通过立体成像系统所拍摄的左图像及右图像，估测图像中像素的深度信息，并将此深度信息套用在使用者对于图像中特定区块的选取上。通过查询使用者在图像中点选区域的深度，从而圈选出此区域周围深度值相近的像素所形成的区块。之后，即可选择性地仅针对此区块内的像素进行特定图像处理，或是针对此区块内及区块外的像素本文档来自技高网...

【技术保护点】
一种根据深度信息处理图像的方法，适用于一电子装置，其特征在于，该方法包括下列步骤：取得由一立体成像系统拍摄的一左图像及一右图像，以及该左图像及该右图像中相对应的多个像素的一深度图，该深度图记录各所述像素的一深度；显示该左图像及该右图像其中的一图像以作为一待处理图像；接收对于该待处理图像中至少一像素的一选取操作；查询该深度图，以在该待处理图像中查找其深度在该选取操作所选取像素的所述深度前后的一第一预设范围内的多个目标像素，据此决定至少一选取区块；以及执行一图像处理在所述选取区块。

【技术特征摘要】
1.一种根据深度信息处理图像的方法，适用于一电子装置，其特征在于，该方法包括下列步骤：取得由一立体成像系统拍摄的一左图像及一右图像，以及该左图像及该右图像中相对应的多个像素的一深度图，该深度图记录各所述像素的一深度；显示该左图像及该右图像其中的一图像以作为一待处理图像；接收对于该待处理图像中至少一像素的一选取操作；重新映射该深度图所记录的所述深度的数值范围到该选取操作所选取像素的所述深度前后的第一预设范围；查询该深度图，以在该待处理图像中查找其深度在该选取操作所选取像素的所述深度前后的第二预设范围内的多个目标像素，据此决定至少一选取区块；以及执行一图像处理在所述选取区块。2.根据权利要求1所述的根据深度信息处理图像的方法，其特征在于，在决定所述选取区块的步骤之后，还包括：接收对于该深度的一容许度的一调整操作；以及根据该调整操作所调整的该容许度，调整各所述选取区块的一涵盖范围。3.根据权利要求2所述的根据深度信息处理图像的方法，其特征在于，所述第一预设范围用以限制该调整操作可调整的该涵盖范围。4.根据权利要求1所述的根据深度信息处理图像的方法，其特征在于，执行该图像处理在所述选取区块的步骤还包括：根据该待处理图像中各所述像素的该深度，执行该图像处理在所述选取区块以及该待处理图像中的其他区块。5.根据权利要求4所述的根据深度信息处理图像的方法，其特征在于，根据该待处理图像中各所述像素的该深度，执行该图像处理在该选取操作所选取的所述区块以及该待处理图像中的其他区块的步骤包括：根据该待处理图像中各所述像素的该深度，增加对于所述选取区块执行该...

【专利技术属性】
技术研发人员：彭诗渊，庄哲纶，戴呈轩，
申请(专利权)人：聚晶半导体股份有限公司，
类型：发明
国别省市：中国台湾;71