使用双图像传感器进行图像处理的方法和设备技术

本公开涉及利用IoT来融合5G通信系统以支持超4G系统的更高数据速率的通信技术及其系统。本公开可以应用于基于5G通信技术和基于IoT相关技术的智能服务(例如，智能家居、智能建筑、智慧城市、智能汽车、联网汽车、医疗保健、数字教育、智能零售、安保和安全相关服务等)。此外，本发明专利技术提供了一种使用双图像传感器进行图像处理的方法和设备，更具体地，提供了一种使用具有不同光量的图像传感器进行图像处理的方法和设备。

Method and equipment of image processing with dual image sensor

【技术实现步骤摘要】
【国外来华专利技术】使用双图像传感器进行图像处理的方法和设备
本公开涉及使用双图像传感器的图像处理方法和装置，并且更具体地涉及使用能够检测不同光量的图像传感器的图像处理方法和装置。
技术介绍
为了满足对自4G通信系统的部署以来对无线数据业务的不断增长的需求，已经努力开发改进的5G或pre-5G通信系统。因此，5G或pre-5G通信系统也被称作“Beyond4G网络”或“PostLTE系统”。5G无线通信系统被认为实现于较高的频率(mmWave)频段(例如，60GHz频段)中，以便实现更高的数据速率。为了减轻减少无线电波的路径损失并增加传输距离，在5G无线通信系统中讨论了波束成形、大规模多输入多输出(MIMO)、全维MIMO(FD-MIMO)、阵列天线、模拟波束成形和大型天线技术。另外，在5G通信系统中，正在基于高级小型小区、云无线接入网络(RAN)、超密集网络、设备到设备(D2D)通信、无线回程、移动网络、协作通信、协同多点(CoMP)、接收端干扰消除等进行对系统网络改进的开发。在5G系统中，已经开发了作为高级编码调制(ACM)的混合FSK和QAM调制(FQAM)和滑动窗口叠加编码(SWSC)，以及作为高级接入技术的滤波器组多载波(FBMC)、非正交多址接入(NOMA)和稀疏码多址接入(SCMA)。互联网从人类生成和消费信息的以人为中心的连接网络演变成物联网(IoT)，在物联网中，诸如事物的分布式实体在不需要人为干预的情况下交换或处理信息。通过与云服务器的连接将大数据处理技术与IoT技术相结合的万物互联(IoE)已经出现。为了实现IOT，需要诸如“感测技术”、“有线/无线通信和网络基础设施”、“服务接口技术”和“安全技术”等技术元素，近来对传感器网络、机器到机器(M2M)通信、机器类型通信(MTC)等进行了研究。这种IoT环境可以提供智能互联网技术服务：通过收集和分析在所连接的事物之间生成的数据来为人类生活创造新的价值。通过现有信息技术(IT)与各种行业应用之间的融合和结合，IoT可以应用于包括智能家居、智能建筑、智慧城市、智能汽车或联网汽车、智能电网、医疗保健、智能家电和高级医疗服务的各个领域。与此一致，已经进行了各种尝试以将5G通信系统应用于IoT网络。例如，可以通过波束成形、MIMO和阵列天线来实现诸如传感器网络、机器类型通信(MTC)、机器到机器(M2M)通信的技术。作为上述的大数据处理技术的云RAN应用也可以被认为是5G技术与IoT技术之间融合的示例。通常，用于应用了5G技术或IoT技术的终端和相机设备的图像传感器可以使用应用了拜耳图案的RGB传感器来获得图像的方案。在这种情况下，RGB传感器仅使每个像素接收的红/绿/蓝光中的所需颜色区域通过，使用光电二极管将通过的颜色区域转换为电信号，并存储该电信号。
技术实现思路
技术问题通过RGB传感器的光可以通过为每个颜色区域应用的滤镜，因此RGB传感器可以获得接收到的光量的1/3。因此，为了在弱光环境下获得图像，RGB传感器的SN特征劣化。因此，难以获得高质量的图像。问题的解决方案根据本公开的一方面，提供了一种支持双图像传感器系统的电子设备的图像处理方法，包括：通过设置在所述电子设备中的第一传感器和第二传感器检测数据；以及基于所述第一传感器检测到的数据和所述第二传感器检测到的数据来合成图像，其中，所述第一传感器和所述第二传感器是颜色传感器，并且所述第二传感器检测到的光量大于所述第一传感器检测到的光量。所述第一传感器和所述第二传感器包括多个单位单元，并且所述第一传感器和所述第二传感器的相应单位单元检测到的波长区域彼此不重叠。所述第一传感器使用带通滤波器来检测数据，并且所述第二传感器使用带阻滤波器来检测数据。所述第一传感器检测与预定的第一波长区域、预定的第二波长区域或预定的第三波长区域相关联的数据，并且所述第二传感器检测与预定的第四波长区域、预定的第五波长区域或预定的第六波长区域相关联的数据，并且所述第二传感器检测到的光量是所述第一传感器检测到的光量的两倍。所述图像合成操作包括：将所述第二传感器检测到的数据的域转换为所述第一传感器检测到的数据的域；以及基于被转换了域的所述第二传感器数据和所述第一传感器检测到的数据来合成图像。所述图像合成操作包括：对被转换了域的所述第二传感器数据进行视差校正；以及基于视差校正后的第二传感器数据和所述第一传感器检测到的数据来合成所述图像。根据本公开的一个方面，一种支持双图像传感器系统的电子设备，包括：设置在所述电子设备中的第一传感器；设置在所述电子设备中的第二传感器；以及控制器，所述控制器被配置为基于所述第一传感器检测到的数据和所述第二传感器检测到的数据来合成图像，其中，所述第一传感器和所述第二传感器是颜色传感器，并且所述第二传感器检测到的光量大于所述第一传感器检测到的光量。所述第一传感器和所述第二传感器包括多个单位单元，并且所述第一传感器和所述第二传感器的相应单位单元检测到的波长区域彼此不重叠。所述第一传感器包括带通滤波器，所述第二传感器包括带阻滤波器。所述第一传感器检测与第一波长区域、第二波长区域或第三波长区域相关联的数据，并且所述第二传感器检测与第四波长区域、第五波长区域或第六波长区域相关联的数据，并且所述第二传感器检测到的光量是所述第一传感器检测到的光量的两倍。所述控制器被配置为将所述第二传感器检测到的数据的域转换为所述第一传感器检测到的数据的域，并基于所述第二传感器的被转换了域的数据和所述第一传感器检测到的数据来合成图像。所述控制器对被转换了域的所述第二传感器数据进行视差校正，并基于所述第二传感器的视差校正后的数据和所述第一传感器检测到的数据来合成所述图像。根据本公开的一个方面，一种支持双透镜系统的终端，包括：第一透镜，所述第一透镜包括第一传感器；第二透镜，所述第二透镜包括第二传感器；以及控制器，所述控制器被配置为基于所述第一透镜检测到的数据和所述第二透镜检测到的数据来合成图像，其中，所述第一传感器和所述第二传感器是颜色传感器，并且所述第二传感器检测到的光量大于所述第一传感器检测到的光量。所述第一传感器和所述第二传感器包括多个单位单元，并且所述第一传感器和所述第二传感器的相应单位单元检测到的波长区域彼此不重叠。所述第一传感器包括带通滤波器，所述第二传感器包括带阻滤波器。所述第一传感器检测与第一波长区域、第二波长区域或第三波长区域相关联的数据，并且所述第二传感器检测与第四波长区域、第五波长区域或第六波长区域相关联的数据，并且所述第二传感器检测到的光量是所述第一传感器检测到的光量的两倍。所述控制器被配置为将所述第二透镜检测到的数据的域转换为所述第一透镜检测到的数据的域，并基于所述第二透镜的被转换了域的数据和所述第一透镜检测到的数据来合成图像。所述控制器对被转换了域的所述第二透镜数据进行视差校正，并基于第二透镜的视差校正后的数据和所述第一透镜检测到的数据来合成所述图像。本专利技术的本文档来自技高网...

【技术保护点】
1.一种支持双图像传感器系统的电子设备的图像处理方法，所述方法包括：/n通过设置在所述电子设备中的第一传感器和第二传感器来检测数据；以及/n基于所述第一传感器检测到的数据和所述第二传感器检测到的数据来合成图像，/n其中，所述第一传感器和所述第二传感器是颜色传感器，并且所述第二传感器检测到的光量大于所述第一传感器检测到的光量。/n

【技术特征摘要】
【国外来华专利技术】20170523 KR 10-2017-00633301.一种支持双图像传感器系统的电子设备的图像处理方法，所述方法包括：
通过设置在所述电子设备中的第一传感器和第二传感器来检测数据；以及
基于所述第一传感器检测到的数据和所述第二传感器检测到的数据来合成图像，
其中，所述第一传感器和所述第二传感器是颜色传感器，并且所述第二传感器检测到的光量大于所述第一传感器检测到的光量。


2.根据权利要求1所述的方法，其中，所述第一传感器和所述第二传感器包括多个单位单元，并且所述第一传感器和所述第二传感器的相应单位单元检测到的波长区域彼此不重叠。


3.根据权利要求1所述的方法，其中，所述第一传感器使用带通滤波器来检测数据，所述第二传感器使用带阻滤波器来检测数据。


4.根据权利要求1所述的方法，其中，所述第一传感器检测与预定的第一波长区域、预定的第二波长区域或预定的第三波长区域相关联的数据，所述第二传感器检测与预定的第四波长区域、预定的第五波长区域或预定的第六波长区域相关联的数据，并且
所述第二传感器检测到的光量是所述第一传感器检测到的光量的两倍。


5.根据权利要求4所述的方法，图像合成操作包括：
将所述第二传感器检测到的数据的域转换为所述第一传感器检测到的数据的域；以及
基于被转换了域的所述第二传感器数据和所述第一传感器检测到的数据来合成所述图像。


6.根据权利要求5所述的方法，其中，域转换操作包括：
基于以下给出的等式4，将所述第二传感器检测到的数据的域转换为所述第一传感器检测到的数据的域：
[等式4]
R＝(Y+M-C)/2,G＝(Y-M+C)/2,B＝(-Y+M+C)/2，
其中，R为所述第一传感器检测到的所述第一波长区域的光量，G为所述第一传感器检测到的所述第二波长区域的光量，B为所述第一传感器检测到的所述第三波长区域的光量，Y为所述第二传感器检测到的所述第四波长区域的光量，M为所述第二传感器检测到的所述第五波长区域的光量，C为所述第二传感器检测到的所述第六波长区域的光量。


7.根据权利要求5所述的方法，其中，所述图像合成操作包括：
对被转换了域的所述第二传感器数据进行视差校正，并基于视差校正后的第二传感器数据和所述第一传感器检测到的数据来合成图像。


8.一种支持双图像传感器系统的电子设备，所述电子设备包括：
设置在所述电子设备中的第一传感器；
...

【专利技术属性】
技术研发人员：赵正桓，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国;KR