本发明专利技术涉及一种基于两孔径旋转双棱镜的视场扩大方法，包括以下步骤：步骤S1:搭建基于两孔径旋转双棱镜的视场扩大系统；步骤S2:对单个旋转双棱镜成像系统进行多次相机预标定，并建立标定数据库；步骤S3:通过两孔径旋转双棱镜成像系统实时采集两路视频流；步骤S4:将采集的视频图像进行畸变校正；步骤S5:将畸变矫正后的视频图像拼接成一段视频图像流。本发明专利技术保证了对旋转双棱镜系统成像高质量畸变校正和拼接的同时，提升了校正和拼接的速度，达到了实时性，实现了大视场实时成像的目的。实现了大视场实时成像的目的。实现了大视场实时成像的目的。
【技术实现步骤摘要】
基于两孔径旋转双棱镜的视场扩大系统及方法
[0001]本专利技术涉及成像与图像处理
，具体涉及一种基于两孔径旋转双棱镜的视场扩大系统及方法。
技术介绍
[0002]大视场图像/视频能给人带来视觉享受，也能够提供更好的空间信息，以便后续进行目标识别、目标追踪等。随着科学技术的不断进步，扩大视场技术正逐渐走向成熟，且越来越多地应用于安防监控、遥感测绘、无人驾驶等领域。
[0003]传统的获取大视场方法有使用普通广角镜头或鱼眼镜头，这种方法通常镜头的视角越大，视场扩大效果越明显，但镜头带来的畸变也越严重，成像质量得不到保证。还有一种是固定多个摄像头，采集多路视频，并利用视频拼接技术得到一路大视场的视频。这种方法稳定性较好、应用较广泛，但固定的成像传感器限制了装置的灵活性。典型的旋转双棱镜设备由一对共轴可独立旋转的楔形棱镜组成，其可以在一定角度内连续任意改变光束或视轴的指向，同时改变成像视场，且可以扩大单个摄像头的最大成像视场，基于这些特点，基于旋转双棱镜系统的扩大视场方法相比于传统的扩大视场方法有应用更灵活的优点。此外，增大棱镜顶角可以提升视场扩大效果，但也会使成像畸变更加显著。
[0004]目前一些研究人员对旋转双棱镜带来的畸变尝试了矫正。Lavigne等人于2007年根据空间折射模型分析得出了旋转双棱镜导致的成像畸变特性，并利用单映性变换的校正方法。该方法属于线性校正方法，计算量较少，校正速度快，但校正效果不够理想。周远等人于2015年通过建立双棱镜空间折射模型，利用逆光线追迹方法实现畸变校正，校正效果较好，但由于该校正方法是非线性的，因此在实际畸变校正过程中，运行速度较慢。
技术实现思路
[0005]有鉴于此，本专利技术的目的在于提供一种基于两孔径旋转双棱镜的视场扩大系统及方法，解决了对大顶角旋转双棱镜系统成像畸变校正还没有同时满足实时、高质量，以及拼接重影和实时性的问题。
[0006]为实现上述目的，本专利技术采用如下技术方案：
[0007]一种基于两孔径旋转双棱镜的视场扩大系统，包括两个完全相同的旋转双棱镜成像系统；所述第一旋转双棱镜成像系统和第二旋转双棱镜成像系统在一条水平线上且相距一定的距离；所述旋转双棱镜成像系统包括成像传感器和旋转双棱镜。
[0008]进一步的，所述旋转双棱镜是由两个型号相同且可共轴独立旋转的楔形棱镜构成，每个棱镜的顶角为14.85
°
，成像传感器的分辨率为640
×
480pixel，旋转双棱镜安装在成像传感器前面。
[0009]一种基于两孔径旋转双棱镜的视场扩大方法，包括以下步骤：
[0010]步骤S1:搭建基于两孔径旋转双棱镜的视场扩大系统；
[0011]步骤S2:单个旋转双棱镜成像系统进行多次相机预标定，并建立标定数据库；
[0012]步骤S3:通过两孔径旋转双棱镜成像系统实时采集两路视频流；
[0013]步骤S4:将采集两路视频图像进行畸变校正；
[0014]步骤S5:将畸变矫正后的视频图像拼接成一段视频图像流。
[0015]进一步的，所述步骤S2具体为：
[0016]步骤S21:采用相机标定的方法来对这两种畸变进行校正,非线性模型描述下：
[0017][0018]式中：为无畸变理想图像平面坐标，(x,y)是实际图像平面坐标，D
x
(x,y)为x方向非线性总畸变，D
y
(x,y)为y方向非线性总畸变值。
[0019][0020]式中：等号右边k1、k2为径向畸变参数，p1、p2为切向畸变参数，s1、s2为薄棱镜畸变参数。
[0021]步骤S22:将步骤S21中每次的标定结果数据导入到新建的数据库中，并以双棱镜的转动位置为索引头。
[0022]进一步的，所述步骤S4具体为：
[0023]步骤S41:在标定数据库中自主搜索到双棱镜相应转动位置的标定参数；
[0024]步骤S42:根据搜索到的标定数据建立查找表；
[0025]步骤S43:利用带有双线性插值的重投影算法将畸变像素点逐一映射到理想位置，以实现视频图像的畸变校正。
[0026]进一步的，所述步骤S5具体为:
[0027]步骤S51:对畸变矫正后的视频图像进行下采样；
[0028]步骤S52:利用SURF算法进行图像配准；
[0029]步骤S53:计算最佳缝合线并生成拼接掩膜；
[0030]步骤S54:对拼接掩膜进行上采样恢复到原尺度空间；
[0031]步骤S55:利用多分辨率融合算法对重叠区域重影问题进行融合。
[0032]进一步的，所述步骤S53具体为：采用的是最大流图割算法，它是以求得两棵不相交的搜索树S和T为目标，经过不断迭代求得最佳缝合线。
[0033]进一步的，所述最大流图割算法包括以下三个部分：
[0034]搜寻子结点：在搜索树边缘的激活结点搜寻到邻近的子结点，新的子结点成为激活结点，当激活结点未搜寻到子结点时，这个激活结点成为一个过去结点，当两颗搜索树的结点首次成为相邻结点时，则生成一条路径，进入下一步；
[0035]路径增广：利用Fulkerson和Ford的路径增广方法，将上一歩生成的路径变成饱和路径并得到孤儿结点；
[0036]路径采用：为孤儿结点分配一个父结点，如果这个父结点是搜索树的结点则孤儿结点称为搜索树的激活结点，如果父结点是自由结点则孤儿结点称为自由结点。
[0037]进一步的，所述步骤S55具体:先对待融合的两幅图像进行高斯卷积，并进行降采
样以得到高斯金字塔，表示为：
[0038][0039]式中：G
n
为高斯金字塔，下标n是指金字塔层数，最底层图像G0为原图，G(x,y,σ)为高斯卷积函数，σ为尺度算子；
[0040]然后对高斯金字塔的相同层减去它的上一层的扩展得到拉普拉斯金字塔，将拉普拉斯金字塔的相同层进行加权平均合并，再对合并后的金字塔进行逆拉普拉斯变换得到最终的融合图像；其中金字塔变换表述为：
[0041]L
n
＝G
n
‑
expand(G
n+1
)，
ꢀꢀ
(4)
[0042]式中：L
n
表示的是拉普拉斯金字塔，expand是指扩展运算，拉普拉斯金字塔的顶层图像为高斯金字塔的顶层图像。
[0043]逆拉普拉斯变换表述为：
[0044]S
n
＝R
n
+expand(S
n+1
)，
ꢀꢀ
(5)
[0045]式中：R
n
为拉普拉斯金字塔的相同层加权平均合并后的金字塔，S
n
为融合金字塔，S
n
的顶层为R
n
的顶层，S
n
是从顶层向底层计算得到的，最后得到的本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种基于两孔径旋转双棱镜的视场扩大系统，其特征在于，包括两个完全相同的旋转双棱镜成像系统；所述第一旋转双棱镜成像系统和第二旋转双棱镜成像系统在一条水平线上且相距一定的距离；所述旋转双棱镜成像系统包括成像传感器和旋转双棱镜。2.根据权利要求1所述的一种基于两孔径旋转双棱镜的视场扩大系统，其特征在于，所述旋转双棱镜是由两个型号相同且可共轴独立旋转的楔形棱镜构成，每个棱镜的顶角为14.85
°
，成像传感器的分辨率为640
×
480pixel，旋转双棱镜安装在成像传感器前面。3.一种基于两孔径旋转双棱镜的视场扩大方法，其特征在于，包括以下步骤：步骤S1:搭建基于两孔径旋转双棱镜的视场扩大系统；步骤S2:分别对单个旋转双棱镜成像系统进行多次相机预标定，并建立标定数据库；步骤S3:通过两孔径旋转双棱镜成像系统实时采集两路视频流；步骤S4:将采集的两路视频图像进行畸变校正；步骤S5:将畸变矫正后的视频图像拼接成一段视频图像流。4.根据权利要求3所述的基于两孔径旋转双棱镜的视场扩大方法，其特征在于，所述步骤S2具体为：步骤S21:采用相机标定的方法来对这两种畸变进行校正,非线性模型描述下：式中：为无畸变理想图像平面坐标，(x,y)是实际图像平面坐标，D
x
(x,y)为x方向非线性总畸变，D
y
(x,y)为y方向非线性总畸变值。式中：等号右边k1、k2为径向畸变参数，p1、p2为切向畸变参数，s1、s2为薄棱镜畸变参数；步骤S22:将步骤S21中每次的标定结果数据导入到新建的数据库中，并以双棱镜的转动位置为索引头。5.根据权利要求3所述的基于两孔径旋转双棱镜的视场扩大方法，其特征在于，所述步骤S4具体为：步骤S41:在标定数据库中自主搜索到双棱镜相应转动位置的标定参数；步骤S42:根据搜索到的标定数据建立查找表；步骤S43:利用带有双线性插值的重投影算法将畸变像素点逐一映射到理想位置，以实现视频图像的畸变校正。6.根据权利要求3所述的基于两孔径旋转双棱镜的视场扩大方法，其特征在于，所述步骤S5具体为:步骤S51:对畸变矫正后的视频图像进行下采样；步骤S52:利用SURF算法进行图像配准；步骤S53:计算最佳缝合线并生成拼接掩膜；步骤S54:对拼接掩膜进行上采样恢复到原尺度空间；
步骤S55:利用多分辨率融合算法对重叠区域重影问题进行融合。7.根据权利要求6所述的基于两孔径旋转双棱镜的视场扩大方法，其特征在于，所...
【专利技术属性】
技术研发人员：吴衔誉，漆勇，黄峰，吴靖，沈英，
申请(专利权)人：福州大学，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。