处理图像的方法和装置制造方法及图纸

一种计算三维(3D)图像的深度信息的方法，包括：基于二维(2D)图像中包括的至少一个元胞的值来生成图案；投射该图案；捕获该图案的反射图像；以及根据该图案的反射图像来计算深度信息。

Methods and devices for image processing

【技术实现步骤摘要】
【国外来华专利技术】处理图像的方法和装置
本公开涉及一种用于处理图像的方法和装置，并且更具体地，涉及一种用于处理二维(2D)和三维(3D)图像的方法和装置。
技术介绍
本公开涉及一种用于处理图像的方法和装置，并且更具体地，涉及一种用于处理二维(2D)和三维(3D)图像的方法和装置。随着增强现实(augmentedreality，AR)或虚拟现实(virtualreality，VR)吸引越来越多的关注，已经开发了各种电子设备来实施AR(或VR)。对于AR(或VR)实施方式，正在开发3D环境建模技术，包括例如被动立体镜和主动投射。以上信息仅作为背景信息呈现，以帮助理解本公开。关于以上内容中的任何内容是否可以用作关于本公开的现有技术，没有做出确定，也没有做出断言。
技术实现思路
技术问题为了对3D环境建模，需要关于图像的深度信息。已经开发了各种计算深度信息的方法，诸如投射预定编码并基于投射的编码计算深度信息的基于结构化光的解决方案。技术方案本公开的一方面在于至少解决上述问题和/或缺点，并至少提供下述优点。因此，本公开的一方面在于提供一种用于处理图像以进行三维(3D)环境建模的方法和装置。根据本公开的一方面，提供了一种计算深度信息的方法。该方法包括：基于在2D图像中包括的至少一个元胞(cell)的值来生成图案；投射该图案；捕获该图案的反射图像；以及基于该图案的反射图像来计算深度信息。根据本公开的另一方面，提供了一种终端。该终端包括投射器、捕获单元和处理器，该处理器被配置为：控制投射器基于2D图像中包括的至少一个元胞的值来生成图案并投射该图案；控制捕获单元捕获该图案的反射图像；并且基于该图案的反射图像来计算深度信息。根据结合附图公开了本公开的实施例的下面的详细描述，本公开的其他方面、优点和显着特征对于本领域技术人员将变得显而易见。在进行下面的详细描述之前，阐明贯穿本专利文件中使用的某些词语和短语的定义可能是有利的：术语“包括”和“包含”及其派生词意思是包括但不限于；术语“或”是包含性的，意思是和/或；短语“与……相关联”和“与之相关联”及其派生词可能意思是包括、包括在……内、与……互连、包含、包含在……内、连通(connect)到或与……连通、耦合到或与……耦合、可与……通信、与……协作、交织、并列、邻近、绑定到或与……绑定、具有、具有……的性质等；并且术语“控制器”意思是控制至少一个操作的任何设备、系统或其一部分，这样的设备可以用硬件、固件或软件或它们中至少两个的某种组合来实施。应当注意，与任何特定控制器相关联的功能可以是集中式或分布式的，不管在本地或在远程。此外，以下描述的各种功能可以由一个或多个计算机程序实施或支持，每个计算机程序由计算机可读程序代码形成并体现在计算机可读介质中。术语“应用”和“程序”是指适于以合适的计算机可读程序代码实施的一个或多个计算机程序、软件组件、指令集、过程、功能、对象、类、实例、相关数据或其一部分。短语“计算机可读程序代码”包括任何类型的计算机代码，包括源代码、目标代码和可执行代码。短语“计算机可读介质”包括能够由计算机访问的任何类型的介质，诸如只读存储器(readonlymemory，ROM)、随机存取存储器(randomaccessmemory，RAM)、硬盘驱动器、致密盘(compactdisc，CD)、数字视频光盘(digitalvideodisc，DVD)或任何其他类型的存储器。“非暂时性”计算机可读介质不包括传输暂时性电或其他信号的有线、无线、光学或其他通信链路。非暂时性计算机可读介质包括可以永久存储数据的介质和可以存储数据并随后覆写的介质，诸如可重写光盘或可擦除存储器设备。贯穿本专利文件中提供了某些词语和短语的定义。本领域普通技术人员应当理解，在很多情况下(即使不是大多数情况下)，这种定义适用于这种定义的词语和短语的先前以及将来的使用。附图说明从下面结合附图的描述中，本公开的某些实施例的上述和其他方面、特征和优点将变得更加显而易见，其中：图1示出了根据本公开实施例的三维(3D)环境图重构系统；图2示出了根据本公开实施例的终端；图3示出了根据本公开的另一个实施例的终端；图4示出了根据本公开实施例的终端的框图；图5A和图5B示出了根据本公开的各种实施例的考虑用于二维(2D)元胞自动机(automata)的邻居结构；图6是示出根据本公开的实施例的生成不同的元胞自动机图案的方法的流程图；图7示出了根据本公开实施例的2D图像；图8示出了根据本公开的实施例的用于生成不同的元胞自动机图案的规则；图9示出了根据本公开的实施例的连续元胞；图10示出了根据本公开的实施例的相邻元胞；图11是描绘根据本公开的实施例的设置初始值的方法的视图；图12示出了根据本公开的实施例的设置初始值的结果；图13至图17示出了根据本公开的实施例的详细的元胞自动化过程；图18是描绘根据本公开的实施例的确定电磁场滤波器的间距大小和用于生成元胞自动机的元胞大小的方法的视图；图19示出了根据本公开实施例的2D图像；图20示出了根据本公开的另一个实施例的2D图像；图21示出了根据本公开的实施例的投射和捕获元胞自动机图案的过程；图22示出了根据本公开的另一个实施例的投射和捕获元胞自动机图案的过程；图23是示出根据本公开实施例的解码元胞自动机图案的方法的流程图；图24A和图24B示出了根据本公开实施例的聚类方法；图25A-图25E示出了根据本公开的实施例的聚类结果；图26A-图26F示出了根据本公开的实施例的识别元胞自动机图案的方法；图27示出了根据本公开实施例的元胞自动机图案中的索引；图28示出了根据本公开的实施例的处理元胞自动机图案中的索引的方法；图29A-图29H示出了根据本公开实施例的检测水平和垂直连通分量的方法；图30A-图30H示出了根据本公开的实施例的估计垂直聚类的差异的方法；图31A-图31D示出了根据本公开的实施例的估计水平聚类的差异的方法；图32A和图32B示出了根据本公开的实施例的确定垂直聚类差和水平聚类差之和的方法；图33A和图33B示出了根据本公开的实施例的确定移位表的方法；图34A-图34G示出了根据本公开的另一个实施例的估计垂直聚类的差异的方法；图35A和图35B示出了根据本公开的另一个实施例的确定移位表的方法；图36A-图36C示出了根据本公开的另一个实施例的确定移位表的方法；图37A-图37C示出了根据本公开的另一个实施例的确定移位表的方法；图38A-图38E示出了根据本公开的实施例的处理边界元胞的方法；图39A-图39E示出了根据本公开的另一个实施例的处理边界元胞的方法；图40A-图40E示出了根据本公开的另一个实施例的处理边界元本文档来自技高网...

【技术保护点】
1.一种获得深度信息的方法，所述方法包括：/n基于二维(2D)图像中包括的至少一个元胞的值来获得图案；/n投射所述图案；/n捕获所述图案的反射图像；以及/n基于所述图案的反射图像来获得深度信息。/n

【技术特征摘要】
【国外来华专利技术】20171030 KR 10-2017-01428431.一种获得深度信息的方法，所述方法包括：
基于二维(2D)图像中包括的至少一个元胞的值来获得图案；
投射所述图案；
捕获所述图案的反射图像；以及
基于所述图案的反射图像来获得深度信息。


2.根据权利要求1所述的方法，其中，获得所述图案包括为所述2D图像中包括的多个元胞中的每个元胞设置值。


3.根据权利要求2所述的方法，其中，所述多个元胞中的每个元胞的值从等于或大于零的整数中选择。


4.根据权利要求1所述的方法，其中，在所述2D图像中包括的至少一个元胞的值是为在所述2D图像中包括的多个元胞的行或列设置的初始值。


5.根据权利要求1所述的方法，其中，获得所述图案包括基于在所述2D图像中包括的至少一个元胞的值和与所述一个元胞相邻的两个元胞的值，确定与所述一个元胞相邻的另一个元胞的值。


6.根据权利要求5所述的方法，其中，获得所述图案包括基于在所述2D图像中包括的至少一个元胞的值和与所述一个元胞相邻的两个元胞的值之和，确定与所述一个元胞相邻的另一个元胞的值。


7.根据权利要求1所述的方法，其中，获得深度信息包括基于在所述图案的反射图像中包括的多个元胞的行或列...

【专利技术属性】
技术研发人员：A沃洛赫纽克，桂溶灿，李重基，金圣淳，金善京，A布特，A萨克哈列夫，D瓦夫迪尤克，K莫罗佐夫，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国;KR