图像处理的装置及方法、电子设备制造方法及图纸

技术编号:37504646 阅读:13 留言:0更新日期:2023-05-07 09:40
提供了一种图像处理的装置及方法、电子设备。该图像处理的装置包括:多个第一类传感器,用于获取拍摄对象的多个第一类像素的模拟信号;多个第二类传感器,用于获取拍摄对象的多个第二类像素的模拟信号;转换模块,用于将第一类像素的模拟信号转换为数字信号,将第二类像素的模拟信号转换为数字信号;处理模块,和转换模块相连,用于根据预设像素融合算法,对多个第一类像素的数字信号和多个第二类像素的数字信号进行融合处理,以得到目标图像。本申请实施例将像素信号数字化,有助于在接收到图像帧的部分像素数据后在像素级进行图像融合,实时性好,融合精确。融合精确。融合精确。

【技术实现步骤摘要】
图像处理的装置及方法、电子设备


[0001]本申请实施例涉及图像处理
,并且更为具体地,涉及一种图像处理的装置及方法、电子设备。

技术介绍

[0002]图像融合技术已广泛应用于目标检测、监控、军事、遥感、医学等领域。图像融合旨在结合不同传感器的优点,针对相同目标,融合不同传感器获取的多幅图像,输出效果更好的图像。目前可见光与长波红外的图像融合方案,分别使用可见光传感器与长波红外传感器单独成像,后续通过图形处理单元运算进行图像融合。这种图像融合方式计算大,往往带来延迟大的问题。

技术实现思路

[0003]本申请实施例提供一种图像处理的装置及方法、电子设备。下面对本申请实施例涉及的各个方面进行介绍。
[0004]第一方面,提供一种图像处理的装置,包括:多个第一类传感器,用于获取拍摄对象的多个第一类像素的模拟信号;多个第二类传感器,用于获取所述拍摄对象的多个第二类像素的模拟信号;转换模块,用于将所述第一类像素的模拟信号转换为数字信号,将所述第二类像素的模拟信号转换为数字信号;处理模块,和所述转换模块相连,用于根据预设像素融合算法,对多个所述第一类像素的数字信号和多个所述第二类像素的数字信号进行融合处理,以得到目标图像。
[0005]第二方面,提供一种图像处理的方法,应用于图像处理的装置,所述图像处理的装置包括:多个第一类传感器,多个第二类传感器,转换模块和处理模块;所述方法包括:获取拍摄对象的多个第一类像素的模拟信号;获取所述拍摄对象的多个第二类像素的模拟信号;将所述第一类像素的模拟信号转换为数字信号,将所述第二类像素的模拟信号转换为数字信号;根据预设像素融合算法,对多个所述第一类像素的数字信号和多个所述第二类像素的数字信号进行融合处理,以得到目标图像。
[0006]第三方面,提供一种电子设备,包括存储器和如第一方面所述的图像处理的装置。
[0007]第四方面,提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序用于执行如第二方面所述的图像处理的方法。
[0008]本申请实施例将第一类像素的模拟信号转换为数字信号,将第二类像素的模拟信号转换为数字信号,根据预设像素融合算法,对多个第一类像素的数字信号和多个第二类像素的数字信号进行融合处理,以得到目标图像。本申请实施例将像素数字化,在像素级进行图像融合,不必等整个图像帧的数据传输完之后进行图像融合,有助于在接收到图像帧的部分像素数据后进行像素融合,实时性好,融合精确。
附图说明
[0009]图1是本申请实施例提供的图像处理的装置的结构示意图。
[0010]图2是图1装置的一种可能的实现方式的布置示意图。
[0011]图3是图1装置的另一种可能的实现方式的电路示意图。
[0012]图4是本申请实施例提供的图像处理的方法的流程示意图。
[0013]图5是本申请实施例提供的电子设备的结构示意图。
具体实施方式
[0014]下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。
[0015]目前,图像融合技术已广泛应用于目标检测、监控、军事、遥感、医学等领域。图像融合旨在结合不同传感器的优点,针对相同目标,融合不同传感器获取的多幅图像,输出可以更好地进行计算机分析处理的图像。红外与可见光图像融合是研究较多的方向。
[0016]可见光(visible light,VI)是电磁波谱中人眼可以看见(感受得到)的部分,这个范围中的电磁辐射被称为可见光。目前可见光成像技术飞速发展,例如手机中的图像采集器,其分辨率的像素总数甚至达到了一亿像素。可见光图像通常在白天或晚上光线良好的条件下使用,可以充分反应整个场景的细节信息,具有较细的纹理信息和较高的空间分辨率。但是,可见光传输易受环境影响,难以穿透雾、雨雪、尘埃、雾霾等,探测距离有限,当目标场景可视性低或存在遮挡时,无法获取有效信息。例如,普通可见光相机的工作波长在0.38~0.78微米,远远小于2.5微米,物体反射的可见光被PM2.5所阻挡,无法到达相机端,从而导致可见光相机在雾霾天气中拍摄效果不佳。
[0017]红外线(infrared ray,IR)为介于可见光和微波之间、波长范围为0.75~1000微米(μm)的红外波段的电磁波。与可见光成像的机理不同,红外成像的机理是依据物体的温度或辐射率不同进行成像。与可见光图像相比,红外成像的分辨率差、对比度低、信噪比低、视觉效果模糊。但是红外成像具有较强的穿透力,不受外界复杂光照条件的影响,可以很好的识别热目标,探测距离远。因而,可见光图像与红外图像的互补特性可以融合出高质量的图像。
[0018]可见光与红外图像融合是不同类型的传感器图像融合。目前可见光与长波红外图像融合方案,分别使用可见光传感器与长波红外传感器单独成像,在后级通过图形处理单元(graph processing unit,GPU)运算融合图像,属于应用层面融合。
[0019]这种图像融合方式是在取得红外图像帧和可见光图像帧之后,进行空间域和时间域的图像融合,计算量较大,往往带来延迟大的问题。此外,获取可见光图像和红外图像需要独立的两套成像系统,存在成本高、体积大、不适于小型化场景的问题。
[0020]因此,如何开发一种延迟小的图像融合方案是需要解决的问题。
[0021]基于此,本申请实施例提出一种图像处理的装置。图1是本申请实施例提供的图像处理的装置的结构示意图。下面结合图1对本申请实施例进行详细介绍。如图1所示,该图像处理的装置可以包括第一类传感器110、第二类传感器120、转换模块130和处理模块140。
[0022]第一类传感器110用于获取拍摄对象的第一类像素的模拟信号。拍摄对象包括但不限于产品、人物、场景等,拍摄对象可以为静态或动态的,本申请实施例对拍摄对象的种
类和状态不作限定。第一类传感器可以为可见光传感器。可见光传感器可以光敏二极管(或称为光电二极管)、光敏三极管等“点”光源的光敏元件,可见光传感器也可以为图像传感器。
[0023]其中,图像传感器利用光电器件的光电转换功能将感光面上的光像转换为与光像成相应比例关系的电信号。图像传感器将其受光面上的光像分成许多小单元,将其转换成可用的电信号。图像传感器主要有互补金属氧化物半导体(complementary metal oxide semiconductor,CMOS)和电荷耦合元件(charged coupled device,CCD)两种。
[0024]CMOS是一种主流的半导体工艺,具有功耗低、速度快的优点,被广泛地用于制造CPU、存储器和各种数字逻辑芯片。基于CMOS工艺设计的图像传感器称为CMOS图像传感器(CMOS image sensor,CIS)。CIS图像传感器通常由像素阵列、外围寻址电路与读出电路等构成,CIS像素阵列包括光电探测器(如光电二极管)以及相应的控制电路。如本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种图像处理的装置,其特征在于,包括:多个第一类传感器,用于获取拍摄对象的多个第一类像素的模拟信号;多个第二类传感器,用于获取所述拍摄对象的多个第二类像素的模拟信号;转换模块,用于将所述第一类像素的模拟信号转换为数字信号,将所述第二类像素的模拟信号转换为数字信号;处理模块,和所述转换模块相连,用于根据预设像素融合算法,对多个所述第一类像素的数字信号和多个所述第二类像素的数字信号进行融合处理,以得到目标图像。2.根据权利要求1所述的装置,其特征在于,所述多个第一类传感器和所述多个第二类传感器交错布置,以使所述多个第一类传感器的焦平面与所述多个第二类传感器的焦平面重合。3.根据权利要求2所述的装置,其特征在于,所述多个第一类传感器和所述多个第二类传感器中在横向上交错排列,和/或,所述多个第一类传感器和所述多个第二类传感器在纵向上交错排列。4.根据权利要求3所述的装置,其特征在于,所述多个第一类传感器中的一组传感器和所述多个第二类传感器中的一个传感器在横向上交错排列;和/或,所述多个第一类传感器中的一组传感器和所述多个第二类传感器中的一个传感器在纵向上交错排列;其中,所述多个第一类传感器中的一组传感器为所述多个第一类传感器中的部分传感器。5.根据权利要求1所述的装置,其特征在于,所述转换模块包括:第一读出电路,用于对所述多个第一类传感器的部分传感器获取的模拟信号进行传输,且所述第一读出电路对所述多个第二类传感器的部分传感器获取的模拟信号进行传输;模数转换电路,用于将所述第一读出电路传输的模拟信号转换为数字信号。6.根据权利要求1所述的装置,其特征在于,所述第一类传感器为可见光传感器,所述第一类像素为可见光像素,所述第二类传感器为红外传感器,所述第二类像素为红外像素。7.一种图像处理的方法,其特征在于,应用于图像处理的装置,所述图像处理的装置包括:多个第一类传感器,多个第二类传感器,转换模块和处理模块;所述方法包括:获取拍摄对象的多个第一类像素的模拟信号;获取所述拍摄对象的多个第二类像素的模拟信号;将所述第一类像素的...

【专利技术属性】
技术研发人员:杨建明张韵东周学武
申请(专利权)人:北京中星微电子有限公司中星电子股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1