一种三维视频融合拼接方法技术

本发明专利技术公开了一种三维视频融合拼接方法，包括如下步骤：S1:获取三维视频图像，其中，所述三维视频图像根据至少两个正五面体三维图像拼接形成，各所述正五面体三维图分别对应预设场景的每个局部空间，各所述局部空间内分别安装全景摄像头；S2:当检测到所述三维视频图像中有运动目标在拼接区域显示异常时，从所述至少两个正五面体三维图像中提取运动目标；S3:将所述运动目标插入所述三维视频图像的待融合区域，所述待融合区域是指所述拼接区域或者所述拼接区域附近区域，通过该技术方案，能够确保运动目标融合到全景视频图像之后，融合区域与其他区域能够实现自然无缝的融合效果。区域与其他区域能够实现自然无缝的融合效果。区域与其他区域能够实现自然无缝的融合效果。

【技术实现步骤摘要】
一种三维视频融合拼接方法


[0001]本专利技术涉及视频融合
，尤其涉及一种三维视频融合拼接方法。

技术介绍

[0002]布设在城市地面交通、重点区域、敏感地带等地区高度共享的视频防控信息系统，在进行日常管理、应急处突、巡控守护、侦查破案、大型安保等方面发挥了不可替代的重要作用。随着图像处理技术的快速发展，全景视频越来越多的应用在各个领域。三维视频图像是利用摄像头从不同角度对预设场景进行拍摄，之后将拍摄得到的视频图像进行拼接，形成该预设场景的三维视频图像。
[0003]由于将多个三维模型视频图像拼接生成三维视频图像，需要利用长方体三维模型先将多个视频图像转化为多个正五面体三维图像，在拼接这些正五面体三维图像时，相邻正五面体三维图像的拼接贴合面会被裁减掉，因此，拼接贴合面上的图像也会被裁减掉，这样，融合后的三维视频图像中，运动目标移动到拼接贴合面时的图像被裁减掉了，进而导致运动目标在经过拼接处时或者到达拼接处附近时消失。
[0004]为了解决上述问题，本专利技术提出一种三维视频融合拼接方法。

技术实现思路

[0005]针对现有技术的不足，本专利技术提供了一种三维视频融合拼接方法，以解决现有技术中的技术问题。
[0006]为实现以上目的，本专利技术通过以下技术方案予以实现：一种三维视频融合拼接方法，包括如下步骤：
[0007]S1:获取三维视频图像，其中，所述三维视频图像根据至少两个正五面体三维图像拼接形成，各所述正五面体三维图分别对应预设场景的每个局部空间，各所述局部空间内分别安装全景摄像头；
[0008]S2:当检测到所述三维视频图像中有运动目标在拼接区域显示异常时，从所述至少两个正五面体三维图像中提取运动目标；
[0009]S3:将所述运动目标插入所述三维视频图像的待融合区域，所述待融合区域是指所述拼接区域或者所述拼接区域附近区域；
[0010]S4采用图像融合算法确定插入有运动目标的三维视频图像的融合区域中以实现SAR图和MS图像素点的融合；
[0011]S5:根据所述确定的像素点的颜色值对所述待融合区域进行图像重构，形成融合有运动目标的三维视频图像。
[0012]作为本专利技术的优选技术方案，从所述至少两个正五面体三维图像中提取运动目标，具体包括：从拼接区域对应的正五面体三维图像中确定对象图像；确定所述对象图像中运动前景图像对应的像素点；根据确定的所述像素点识别运动目标的轮廓；获取所述运动目标的轮廓所对应图像区域的掩码信息；根据所述掩码信息提取所述运动目标。
[0013]作为本专利技术的优选技术方案，从拼接区域对应的正五面体三维图像中确定对象图像，具体包括：确定运动目标所在的拼接区域所属的正五面体三维图像；将确定出的所述正五面体三维图像的地面图像作为对象图像。
[0014]作为本专利技术的优选技术方案，确定所述对象图像中运动前景图像对应的像素点，具体包括：采用高斯背景建模算法对选取的对象图像中的每一像素点进行高斯背景模型检测，确定运动前景图像对应的像素点。
[0015]作为本专利技术的优选技术方案，图像融合算法具体是：通过双分支的多尺度残差融合嵌套连接网络架构来实现SAR图像和MS图像的融合；所述的双分支的多尺度残差融合嵌套连接网络架构包括有细节提升分路网络架构和光谱保持分路网络架构并获取SAR图像和MS图像中的高频信息。
[0016]作为本专利技术的优选技术方案，所述细节提升分路网络架构中，将获取的高频信息分别依次经过多深度特征提取层、多尺度残差融合网络层及嵌套连接解码器进行图像重建，得到重建图像。
[0017]作为本专利技术的优选技术方案，所述在光谱保持分路网络架构中，把MS图像进行三倍上采样；把上采样后的MS图像与获取的重建图像进行融合，使MS光谱信息和重建图像的细节信息都注入到融合图像中，得到最终的图像融合结果。
[0018]本专利技术提供了一种三维视频融合拼接方法，具备以下有益效果：
[0019]通过该技术方案，能够确保运动目标融合到全景视频图像之后，融合区域与其他区域能够实现自然无缝的融合效果。
附图说明
[0020]图1为本专利技术提出的一种三维视频融合拼接方法实施例一的流程图；
[0021]图2为本专利技术提出的一种三维视频融合拼接方法实施例二的流程图。
具体实施方式
[0022]下面结合附图和实施例对本专利技术的实施方式作进一步详细描述。以下实施例用于说明本专利技术，但不能用来限制本专利技术的范围。在本专利技术的描述中，除非另有说明，“多个”的含义是两个或两个以上；术语“上”、“下”、“左”、“右”、“内”、“外”、“前端”、“后端”、“头部”、“尾部”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本专利技术和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本专利技术的限制。此外，术语“第一”、“第二”、“第三”等仅用于描述目的，而不能理解为指示或暗示相对重要性。
[0023]在本专利技术的描述中，需要说明的是，除非另有明确的规定和限定，术语“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本专利技术中的具体含义。
[0024]实施例一
[0025]参考图1，一种三维视频融合拼接方法，包括如下步骤：
[0026]S1:获取三维视频图像，其中，所述三维视频图像根据至少两个正五面体三维图像
拼接形成，各所述正五面体三维图分别对应预设场景的每个局部空间，各所述局部空间内分别安装全景摄像头；
[0027]S2:当检测到所述三维视频图像中有运动目标在拼接区域显示异常时，从所述至少两个正五面体三维图像中提取运动目标；
[0028]S3:将所述运动目标插入所述三维视频图像的待融合区域，所述待融合区域是指所述拼接区域或者所述拼接区域附近区域；
[0029]S4采用图像融合算法确定插入有运动目标的三维视频图像的融合区域中以实现SAR图和MS图像素点的融合；
[0030]S5:根据所述确定的像素点的颜色值对所述待融合区域进行图像重构，形成融合有运动目标的三维视频图像。
[0031]其中，从所述至少两个正五面体三维图像中提取运动目标，具体包括：从拼接区域对应的正五面体三维图像中确定对象图像；确定所述对象图像中运动前景图像对应的像素点；根据确定的所述像素点识别运动目标的轮廓；获取所述运动目标的轮廓所对应图像区域的掩码信息；根据所述掩码信息提取所述运动目标。
[0032]其中，从拼接区域对应的正五面体三维图像中确定对象图像，具体包括：确定运动目标所在的拼接区域所属的正五面体三维图像；将确定出的所述正五面体三维图像的地面图像作为对象图像。
[0033]其中，确定所述对象图像中运动前景图像对应的像素点，具体包括：本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种三维视频融合拼接方法，其特征在于，包括如下步骤：S1:获取三维视频图像，其中，所述三维视频图像根据至少两个正五面体三维图像拼接形成，各所述正五面体三维图分别对应预设场景的每个局部空间，各所述局部空间内分别安装全景摄像头；S2:当检测到所述三维视频图像中有运动目标在拼接区域显示异常时，从所述至少两个正五面体三维图像中提取运动目标；S3:将所述运动目标插入所述三维视频图像的待融合区域，所述待融合区域是指所述拼接区域或者所述拼接区域附近区域；S4采用图像融合算法确定插入有运动目标的三维视频图像的融合区域中以实现SAR图和MS图像素点的融合；S5:根据所述确定的像素点的颜色值对所述待融合区域进行图像重构，形成融合有运动目标的三维视频图像。2.根据权利要求1所述的一种三维视频融合拼接方法，其特征在于，从所述至少两个正五面体三维图像中提取运动目标，具体包括：从拼接区域对应的正五面体三维图像中确定对象图像；确定所述对象图像中运动前景图像对应的像素点；根据确定的所述像素点识别运动目标的轮廓；获取所述运动目标的轮廓所对应图像区域的掩码信息；根据所述掩码信息提取所述运动目标。3.根据权利要求1所述的一种三维视频融合拼接方法，其特征在于，从拼接区域对应的正五面体三维图像中确定对象图像，具体包括：确定运动目标所在的拼接区域所属的正五面体三维图像；将确定出的所述正五面体三维图像的地面图像作为对象图像。4.根据权利要求2所述的一种三维视频融合拼接方法，其特征在于，确定所述对象图像中运动前景图像对应的像素点，具体包括：采用高斯背景建模算法对选取的对象图像中的每一像素点进行高斯背景模型检测，确定运动前景图像对应的像素点。5.根据权利要求1所述的一种...

【专利技术属性】
技术研发人员：周博将，邓双全，喻珊，汪思源，
申请(专利权)人：湖南凝服信息科技有限公司，
类型：发明
国别省市：