一种完全基于视觉的单目全景泊车影像系统及其泊车方法技术方案

本发明专利技术公开了一种完全基于视觉的单目全景泊车影像系统，包括后视摄像头、图像处理模块、显示屏和校准布，所述后视摄像头的输出端与图像处理模块的输入端连接，所述图像处理模块的输出端与显示屏的输入端连接；一种完全基于视觉的单目全景泊车影像系统的操作方法，包括以下步骤：(1)、安装；(2)、校准；(3)、拼接全景图：根据汽车后视图像精确计算出摄像头的位姿变化，进而得出图像间的[R|T]变换矩阵，进而拼接出全景图，本发明专利技术涉及嵌入式机器视觉技术领域。该种完全基于视觉的单目全景泊车影像系统及其泊车方法，解决了需要四摄像头实现全景泊车影像的问题，安装方便、省时省力、费用低廉。

【技术实现步骤摘要】
一种完全基于视觉的单目全景泊车影像系统及其泊车方法
本专利技术涉及嵌入式机器视觉
，具体为一种完全基于视觉的单目全景泊车影像系统及其泊车方法。
技术介绍
随着图像和计算机视觉技术的快速发展，越来越多的技术被应用到汽车电子领域，传统的基于图像的倒车影像系统只在车尾安装摄像头，只能覆盖车尾周围有限的区域，因此出现了四摄像头全景影像装置，四个摄像头分别安装与汽车头部、尾部和左右两侧，直观地呈现出车辆所处的位置和周边情况，但安装工序复杂，设备价格较贵，同时影响汽车外观。
技术实现思路
(一)解决的技术问题针对现有技术的不足，本专利技术提供了一种完全基于视觉的单目全景泊车影像系统及其泊车方法，解决了需要四摄像头实现全景泊车影像的问题，安装方便、省时省力、费用低廉。(二)技术方案为实现以上目的，本专利技术通过以下技术方案予以实现：一种完全基于视觉的单目全景泊车影像系统，包括后视摄像头、图像处理模块、显示屏和校准布，所述后视摄像头的输出端与图像处理模块的输入端连接，所述图像处理模块的输出端与显示屏的输入端连接。一种完全基于视觉的单目全景泊车影像系统的操作方法，包括以下步骤：(1)、安装：将后视摄像头安装在汽车车尾中部位置，随后将后视摄像头的输出端与图像处理模块的输入端连接，图像处理模块的输出端与显示屏的输入端连接；(2)、校准：在汽车正后方的地面放置校准布，并将校准布中间位置对齐汽车中心位置，当屏幕上左侧视频内容与右侧视频内容效果一致时，点击显示屏上“开始校准”按钮，校准算法提取图像角点，并根据校准布特点精确筛选出格子与格子之间的交叉点，并对应俯视图的坐标，根据通用畸变模型，使用最小二乘法迭代计算出模型中的畸变系数和摄像头相对于地面的位姿，完成矫正；(3)、拼接全景图：根据汽车后视图像精确计算出摄像头的位姿变化，进而得出图像间的[R|T]变换矩阵，进而拼接出全景图。优选的，所述步骤(2)校准布放置在汽车尾部正后方15cm位置。优选的，所述步骤(3)运动中的算法工作过程如下：获取后视摄像头相邻两帧图像n和(n+1)并通过校准过程中得出的消畸变系数进行消畸变，并提取出两帧图像有用点，并运用嵌入式硬件深度加速技术，根据提取出的点的特征匹配，得出镜头位姿高精准的变换关系，并在俯视图中拼接融合形成完整的图像。优选的，所述校准布采用21×5黑白相间的方格布。优选的，所述后视摄像头为鱼眼镜头或通用镜头中的任一种。(三)有益效果本专利技术提供了一种完全基于视觉的单目全景泊车影像系统及其泊车方法。具备以下有益效果：(1)、该种完全基于视觉的单目全景泊车影像系统，包括后视摄像头、图像处理模块、显示屏和校准布，所述后视摄像头的输出端与图像处理模块的输入端连接，所述图像处理模块的输出端与显示屏的输入端连接，只需要后视摄像头，无需借助其他任何传感器，相比目前四摄像头全景，安装方便、省时省力、费用低廉。(2)、该一种完全基于视觉的单目全景泊车影像系统的操作方法，通过根据汽车后视图像精确计算出摄像头的位姿变化，进而得出图像间的[R|T]变换矩阵，进而拼接出全景图，运动中的算法工作过程如下：获取后视摄像头相邻两帧图像n和(n+1)并通过校准过程中得出的消畸变系数进行消畸变，并提取出两帧图像有用点，并运用嵌入式硬件深度加速技术，根据提取出的点的特征匹配，得出镜头位姿高精准的变换关系，并在俯视图中拼接融合形成完整的图像，镜头畸变消除、位姿精确计算，保证了准确实现倒车，方便驾驶员操作车辆。附图说明图1为本专利技术校准布结构示意图；图2为本专利技术校准效果示意图；图3为本专利技术图像融合原理框图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。请参阅图1-3，本专利技术提供一种技术方案：一种完全基于视觉的单目全景泊车影像系统，包括后视摄像头、图像处理模块、显示屏和校准布，后视摄像头的输出端与图像处理模块的输入端连接，图像处理模块的输出端与显示屏的输入端连接，单摄像头安装方便，减小安装成本，保证车辆整体的美观。一种完全基于视觉的单目全景泊车影像系统的操作方法，包括以下步骤：(1)、安装：将后视摄像头安装在汽车车尾中部位置，随后将后视摄像头的输出端与图像处理模块的输入端连接，图像处理模块的输出端与显示屏的输入端连接；(2)、校准：在汽车正后方的地面放置校准布，并将校准布中间位置对齐汽车中心位置，当屏幕上左侧视频内容与右侧视频内容效果一致时，点击显示屏上“开始校准”按钮，校准算法提取图像角点，并根据校准布特点精确筛选出格子与格子之间的交叉点，并对应俯视图的坐标，根据通用畸变模型，使用最小二乘法迭代计算出模型中的畸变系数和摄像头相对于地面的位姿，完成矫正；(3)、拼接全景图：根据汽车后视图像精确计算出摄像头的位姿变化，进而得出图像间的[R|T]变换矩阵，进而拼接出全景图。步骤(2)校准布放置在汽车尾部正后方15cm位置。步骤(3)运动中的算法工作过程如下：获取后视摄像头相邻两帧图像n和(n+1)并通过校准过程中得出的消畸变系数进行消畸变，并提取出两帧图像有用点，并运用嵌入式硬件深度加速技术，根据提取出的点的特征匹配，得出镜头位姿高精准的变换关系，并在俯视图中拼接融合形成完整的图像，能通过单个摄像头实现车辆周边环境的显示，避免了安装四摄像头全景泊车系统带来的安装繁琐问题和价格昂贵问题。校准布采用21×5黑白相间的方格布，采用黑白相间，分界线明显，能准确提取到校准布的每个交点，极大的提高了校准成功率和精度。后视摄像头为鱼眼镜头或通用镜头中的任一种，兼容性较高，任何车型均可适配。需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下。由语句“包括一个......限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素”。尽管已经示出和描述了本专利技术的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本专利技术的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本专利技术的范围由所附权利要求及其等同物限定。本文档来自技高网...

【技术保护点】
1.一种完全基于视觉的单目全景泊车影像系统，包括后视摄像头、图像处理模块、显示屏和校准布，其特征在于：所述后视摄像头的输出端与图像处理模块的输入端连接，所述图像处理模块的输出端与显示屏的输入端连接。

【技术特征摘要】
1.一种完全基于视觉的单目全景泊车影像系统，包括后视摄像头、图像处理模块、显示屏和校准布，其特征在于：所述后视摄像头的输出端与图像处理模块的输入端连接，所述图像处理模块的输出端与显示屏的输入端连接。2.根据权利要求1所述的一种完全基于视觉的单目全景泊车影像系统的操作方法，其特征在于：包括以下步骤：(1)、安装：将后视摄像头安装在汽车车尾中部位置，随后将后视摄像头的输出端与图像处理模块的输入端连接，图像处理模块的输出端与显示屏的输入端连接；(2)、校准：在汽车正后方的地面放置校准布，并将校准布中间位置对齐汽车中心位置，当屏幕上左侧视频内容与右侧视频内容效果一致时，点击显示屏上“开始校准”按钮，校准算法提取图像角点，并根据校准布特点精确筛选出格子与格子之间的交叉点，并对应俯视图的坐标，根据通用畸变模型，使用最小二乘法迭代计算出模型中的畸变系数和摄像头相对于地面的位姿，完成矫正；(3)、拼接全景图：根据汽车后视图...

【专利技术属性】
技术研发人员：李文，
申请(专利权)人：深圳以恒科技有限公司，
类型：发明
国别省市：广东,44