基于圆锥曲线的图像畸变矫正方法及实时矫正装置制造方法及图纸

基于圆锥曲线的图像畸变矫正方法及实时矫正装置，属于图像处理技术领域，具体涉及一种基于圆锥曲线的图像畸变矫正方法以及使用该方法对图像进行实时矫正的装置，使用椭圆或双曲线方程式模拟图像畸变，在嵌入式系统中实现。首先进行镜头的标定，再根据标定结果，对畸变图像进行实时矫正。包括以下步骤：步骤1：获得有网格图案图片的照片；步骤2：建立平面直角坐标系；步骤3：根据照片，判断图像畸变类型；步骤4：得到变形线的近似圆锥曲线的方程式；步骤5：得出畸变图像和矫正图像像素点的对应关系。将对应关系写入嵌入式系统的CPU；工作时，CPU读取畸变图像的像素信息，根据对应关系，转换位置后写入矫正图像文件。采用本发明专利技术，可以降低CPU的配置要求，同时最大限度地对图像进行矫正，获得可以接受的矫正图像。

【技术实现步骤摘要】

本专利技术属于图像处理
，具体涉及一种基于圆锥曲线的图像畸变矫正方法以及使用该方法对图像进行实时矫正的装置。
技术介绍
目前在监控领域，为了适合不同情境的需求，需采用不同种类的镜头。一般的镜头在成像过程中都存在一定程度的光学畸变，使成像图像的大小和形状发生了某些变化，图像的质量下降，给后面的图像分析和图像测量带来误差，甚至造成误判，因此必须对由摄像机镜头所造成的图像几何畸变进行校正。由于镜头的不同，可能产生的畸变分为两类：桶形畸变和枕形畸变。对于摄像机镜头非线性畸变的校正算法可分为两类：第一类是基于标定模板方法，如采用点阵图、平面网格、同心圆环、西洋棋盘等，根据模板上特征点的位置和其理想点的位置偏差来求取畸变系数；第二类是不使用标定模板，如基于畸变率、基于畸变等效曲面、基于测量设备等校正算法迭代或直接求出畸变系数。中国专利申请《一种鱼眼镜头径向畸变的标定方法及标定装置》（申请号：201410244246.3）公开了一种使用圆心共线圆弧组对畸变进行拟合处理的方法，该方法算法复杂，对CPU性能要求高；中国专利申请《一种校正图像桶形失真的方法及装置》（申请号：201510019338.6）公开了一种方法，根据镜头参数和像素坐标，确定该坐标处的曲率和压缩率，进而得出该像素坐标校正后的坐标点。该方法依赖镜头参数，并且只能校正图像的桶形畸变。
技术实现思路
随着监控设备的大量投入，应用在嵌入式系统的镜头数量、种类越来越多，如何找到一种可以方便地应用在监控系统，满足监控图像要求的图像矫正方法，是本专利技术所要解决的问题。为解决上述技术问题，本专利技术采用的技术方案是：一种基于圆锥曲线的图像畸变矫正方法，使用椭圆或双曲线方程式模拟图像畸变，畸变镜头的像素数量为H*W，包括以下步骤：步骤1：将一张有矩形或正方形网格图案的图片，放置在畸变镜头前，图片与镜头保持平行，拍摄一张该图片的照片，照片中央为网格的一个交叉点，穿过交叉点的水平方向的网格线处于照片中央的水平位置；步骤2：在照片上，以上述网格交叉点为原点，穿过交叉点的两条网格线为X轴和Y轴，X轴上相邻两个像素点间的距离为长度单位，建立平面直角坐标系；步骤3：根据照片，判断图像畸变类型；步骤4：根据照片得到网格线在水平和竖直方向发生畸变的变形线的近似圆锥曲线的方程式；步骤5：根据方程式，得出畸变图像和矫正图像像素点的对应关系。一种图像畸变的实时矫正装置，包括嵌入式系统和安装有畸变镜头的摄像机，关键在于：嵌入式系统的CPU中存储畸变图像和矫正图像像素点的对应关系；矫正装置工作时，CPU读取每一帧畸变图像的像素信息，根据对应关系，转换位置后写入矫正图像文件。监控设备使用的镜头一般为定焦镜头，随着制作工艺的完善，每一批次镜头的技术指标基本相同，因此，选定一个镜头进行标定，所得到的参数可以用于整批的监控设备。另外，监控图像要求不是特别严格，只要能满足后续处理的要求，如车牌的识别，畸变图像矫正的效果就可以接受。镜头的分辨率是H*W，例如1280*960，则照片可以看做水平方向1280行、竖直方向960列组成，行、列的交点就是像素点。图像的畸变，根据镜头的不同，可分为桶形畸变和枕形畸变，如图1和图2所示，图1是桶形畸变的示意图，图2是枕形畸变的示意图。图中，实线是实际图片中的线，虚线是根据图片获得的照片中，实线产生畸变后的变形线。也就是说，单独的实线是原始的图片，单独的虚线是根据图片获得的照片，图1和图2是将原始图片和照片叠加而成的图像。图中，P2、P4是原始图片中两线条的交点，P1、P3是照片中，对应原始图片中两线条的变形线条的交点。畸变矫正，就是在获得的发生畸变的照片基础上，还原原始图片。以图示为例，就是取得照片中P1或P3像素点上的数值，写入矫正图像中，P2或P4像素点上。本专利技术所要解决的问题，是获得畸变图像和矫正图像之间，各像素点的对应关系，并在后续处理过程中，按照对应关系，处理每个像素点。本专利技术包括两个过程：1、镜头的标定，2、图像的实时矫正。镜头的标定：图像的畸变，可以用圆锥曲线来近似拟合：桶形畸变，可以用椭圆来近似拟合变形线，枕形畸变，可以用双曲线来近似拟合变形线。为描述方便，我们将通过镜头得到的照片，中心位置设为坐标原点，穿过原点的水平线和垂直线为X轴和Y轴组成坐标系。在X轴和Y轴上，我们认为是没有图像畸变的，其他部位，根据镜头的不同，会产生桶形畸变和枕形畸变，越远离坐标原点，畸变越严重。如图3所示，是对桶形畸变进行椭圆拟合后的示意图，中间交叉部分是得到的照片。图3只是一个示意图，实际的拟合图中，椭圆的长轴很长。可以看到，一系列的椭圆拟合了整副图像中变形线的畸变，通过密集选择椭圆，如从原点向上和向右，每隔一个像素做一个椭圆，计算椭圆上各点的坐标值，可以得到整副畸变图像各点的坐标值。畸变图像上每一个点，都可以看做是两个椭圆的交点，在畸变图像和矫正图像之间，这个点的对应关系，如图1所示，P1点对应到P2。P2的坐标，就是经过P1的两个椭圆，与X轴和Y轴的交点距原点的值。图像的实时矫正：将上述对应关系写入CPU，工作时，CPU取得畸变图像上的一个像素点，找到过这点的两个椭圆，根据椭圆得出该点在校正图像上的像素点，将对应畸变图像像素点的数据写在矫正图像上新像素点位置，形成媒体文件，完成畸变图像的实时矫正。上面是针对桶形畸变图像的处理，针对枕形畸变，原理相同，只是将椭圆换成双曲线，这里不再冗述。另外，由于图像变形造成像素的重叠、缺失，可以采用双线性插值等现有技术手段进行处理。本专利技术的有益技术效果是：本专利技术披露的基于圆锥线的图像畸变矫正算法，是一种全新的图像畸变矫正算法。它从形态学分析镜头畸变的形状，选择双曲线或者椭圆方程对畸变进行模拟，根据畸变程度自动计算相关参数，并将畸变前后的对应关系，按照像素点逐一计算，生成对应关系。与传统的矫正算法相比，无论是原理还是运算都极为简单，可自动适配不同畸变形状和畸变率的镜头。针对一批镜头，选取一个进行标定计算，计算结果可嵌入到各种硬件设备当中，在实际运行中，嵌入设备的CPU读取获得的图像，根据写入的对应关系，经查表获得矫正像素地址并完成替换，实现图像的矫正。采用本专利技术，可以降低CPU的配置要求，同时最大限度地对图像进行矫正，获得可以接受的矫正图像。下面结合附图对本专利技术进行详细说明。附图说明图1是桶形畸变和原始图片的叠加示意图，图2是枕形畸变和原始图片的叠加示意图，图3是桶形畸变的线条拟合图，图4是桶形畸变照片形成的坐标图，图5是枕形畸变照片形成的坐标图，图6是桶形畸变的图片，图7是图6矫正后的图片，图8是枕形畸变的图片，图9是图8矫正后的图片，图10是镜头标定过程，图11是实时矫正过程，图12是近似计算坐标点的示意图。具体实施方式本专利技术包括两部分：1、镜头的标定过程和2、实时矫正过程。如图10所示，镜头的标定过程是首先获得带网格图片的照片，根据照片上畸变的变形线，判断畸变类型，进而得到圆锥曲线方程，再根据曲线方程计算变形线上各点的坐标值，最后计算得到畸变图像和矫正图像像素点之间的对应关系。将得到的对应关系写入嵌入系统的CPU，嵌入式系统工作时，进行实时矫正过程，如图11所示，首先获取畸变图像，然后读取对应关系，根据对应关系，将畸变图像中本文档来自技高网...

【技术保护点】
一种基于圆锥曲线的图像畸变矫正方法，使用椭圆或双曲线方程式模拟图像畸变，畸变镜头的像素数量为H*W，其特征在于包括以下步骤：步骤1：将一张有矩形或正方形网格图案的图片，放置在畸变镜头前，图片与镜头保持平行，拍摄一张该图片的照片，照片中央为网格的一个交叉点，穿过交叉点的水平方向的网格线处于照片中央的水平位置；步骤2：在照片上，以上述网格交叉点为原点，穿过交叉点的两条网格线为X轴和Y轴，X轴上相邻两个像素点间的距离为长度单位，建立平面直角坐标系；步骤3：根据照片，判断图像畸变类型；步骤4：根据照片得到网格线在水平和竖直方向发生畸变的变形线的近似圆锥曲线的方程式；步骤5：根据方程式，得出畸变图像和矫正图像像素点的对应关系。

【技术特征摘要】
1.一种基于圆锥曲线的图像畸变矫正方法，使用椭圆或双曲线方程式模拟图像畸变，畸变镜头的像素数量为H*W，其特征在于包括以下步骤：步骤1：将一张有矩形或正方形网格图案的图片，放置在畸变镜头前，图片与镜头保持平行，拍摄一张该图片的照片，照片中央为网格的一个交叉点，穿过交叉点的水平方向的网格线处于照片中央的水平位置；步骤2：在照片上，以上述网格交叉点为原点，穿过交叉点的两条网格线为X轴和Y轴，X轴上相邻两个像素点间的距离为长度单位，建立平面直角坐标系；步骤3：根据照片，判断图像畸变类型；步骤4：根据照片得到网格线在水平和竖直方向发生畸变的变形线的近似圆锥曲线的方程式；步骤5：根据方程式，得出畸变图像和矫正图像像素点的对应关系。2.根据权利要求1所述的基于圆锥曲线的图像畸变矫正方法，其特征在于：步骤3中，肉眼观察图像畸变类型；步骤4中，将照片显示在显示屏上，根据畸变类型，手工选择圆锥曲线，修改曲线参数，拟合照片中一条水平方向的变形线，记录拟合后的圆锥曲线的参数，得到该水平方向变形线的近似圆锥曲线的方程式：桶形畸变时，圆锥曲线为椭圆，椭圆方程式为：X2/a12+Y2/b12=1，a1>b1>0，枕形畸变时，圆锥曲线为双曲线，双曲线方程式为：Y2/a22-X2/b22=1，a2>0，b2>0；进而得到图像畸变竖直方向对应位置变形线的近似圆锥曲线的方程式：桶形畸变时，圆锥曲线为椭圆，椭圆方程式为：Y2/a12+X2/b12=1，a1>b1>0，枕形畸变时，圆锥曲线为双曲线，双曲线方程式为：X2/a22-Y2/b22=1，a2>0，b2>0；所述对应位置为：竖直方向变形线与X轴交点距原点的距离等于拟合的水平方向变形线与Y轴交点距原点的距离。3.根据权利要求2所述的基于圆锥曲线的图像畸变矫正方法，其特征在于：步骤4中，将照片显示在显示屏上，根据畸变类型，手工选择圆锥曲线，修改曲线参数，拟合照片中一条竖直方向的变形线，记录拟合后的圆锥曲线的参数，得到该竖直方向变形线的近似圆锥曲线的方程式：桶形畸变时，圆锥曲线为椭圆，椭圆方程式为：Y2/a32+X2/b32=1，a3>b3>0，枕形畸变时，圆锥曲线为双曲线，双曲线方程式为：X2/a42-Y2/b42=1，a4>0，b4>0。4.根据权利要求1所述的基于圆锥曲线的图像畸变矫正方法，其特征在于：步骤3中，在水平方向一条变形线上，选取两个与竖向方向变形线的交点D1和D2，两个点的坐标为D1(x1,y1)，D2(x2,y2)，选择的条件是abs(x1)≠abs(x2)或 abs(y1)≠abs(y2)，如果其中一个点的x坐标的绝对值和y坐标的绝对值都大于另一个点，则图像畸变类型为枕形畸变，否则，图像畸变类型为桶形畸变；或者，在竖直方向一条变形线上，选取两个与水平方向变形线的交点D3和D4，两个点的坐标为D3(x3,y3)，D4(x4,y4)，选择的条件是abs(x3)≠abs(x4)或abs(y3)≠abs(y4)，如果其中一个点的x坐标的绝对值和y坐标的绝对值都大于另一个点，则图像畸变类型为枕形畸变，否则，图像畸变类型为桶形畸变。5.根据权利要求4所述的基于圆锥曲线的图像畸变矫正方法，其特征在于：步骤4中，如果是桶形畸变，圆锥曲线为椭圆，将D1、D2的坐标值代入公式X2/a2+Y2/b2=1，解方程得到D1、D2所在的水平方向变形线的椭圆方程式：X2/a12+Y2/b12=1，a1>b1>0；如果是枕形畸变，圆锥曲线为双曲线，将D1、D2的坐标值代入公式Y2/a2-X2/b2=1，解方程得到D1、D2所在的水平方向变形线的双曲线方程式：Y2/a22-X2\...

【专利技术属性】
技术研发人员：罗启宏，戴明礼，周洁，曹晶，赵清波，熊伟，胡春梅，罗展宏，罗旭，范璀琳，聂红全，霍晶晶，谷麟，李辉，李炳政，高海军，赵彩平，高丁文，赵志辉，张鹏，陈春芳，孟军波，严金耀，桂士金，郭焕军，刘婷婷，霍永乐，牛月彬，
申请(专利权)人：石家庄域联视控控制技术有限公司，
类型：发明
国别省市：河北;13