【技术实现步骤摘要】
本专利技术涉及光学成像，具体涉及一种双摄超光谱图像成像方法、系统及双摄超光谱内窥镜。
技术介绍
1、在传统的白光内窥镜使用中，只能发现形态或颜色发生比较明显改变的病灶，但对于微小的、扁平的早期癌变及异型增生则不易诊断，甚至常常导致漏诊。对此，持续进行无染料染色技术的研究，对于早期的肿瘤及癌变的病灶筛查有着极为重要的帮助。
2、在现有的光学染色中，只能通过有限组数的滤光器提取有限波段的窄带光谱进行分析；而在目前的电子染色技术中，虽然能通过算法分析普通白光内窥镜图像，并对给定波长的窄带光谱进行估算处理，但缺点在于容易受限于算法精度的准确性，对计算结果可能会有误差，其次由于只能通过普通白光内窥镜图像进行分析，其估算处理后的图像亮度相对会比较暗淡。并且，受限于内窥镜头端空间的小型化设计，只能放置较小的图像传感器，导致其图像显示效果是固定的，也无法提升图像的显示效果。因此，有必要设计一种不受算法精度影响且能提高图像显示效果的方法及设备。
技术实现思路
1、本专利技术提供的一种双摄超光谱图像成像方法、系统及双摄超光谱内窥镜，有效解决了现有的内窥镜检测的图像显示效果差的问题。
2、根据第一方面，一种实施例中提供一种双摄超光谱图像成像方法,包括：
3、获取待观测部位的两个视角的图像信息；
4、对所述图像信息进行特征提取，分别得到每张图像的特征信息；
5、根据所述特征信息对所述图像信息进行帧对齐；
6、对帧对齐后的图像信息进行信
7、在一种能够实现的实施方式中，所述对所述图像信息进行特征提取，分别得到每张图像的特征信息，包括：
8、分别提取所述两个视角的图像信息中的像素点，对所述像素点进行逐像素对齐，构建对应图；
9、从每张所述对应图中提取每张图像的特征信息。
10、在一种能够实现的实施方式中，所述根据所述特征信息对所述图像信息进帧对齐，包括：
11、根据所述特征信息对所述对应图中像素偏移量进行估计；
12、根据偏移量对所述图像信息进行逐像素对齐，通过逐像素对齐实现帧对齐。
13、在一种能够实现的实施方式中，所述对帧对齐后的图像信息进行信息融合，以得到超分辨率图像，包括：
14、对所述帧对齐后的图像信息进行demosaic处理，得到通道补全信息图；
15、采用非均匀内插法对所述通道补全信息图进行信息融合，得到超分辨率图像。
16、在一种能够实现的实施方式中，所述对所述图像信息进行特征提取，分别得到每张图像的特征信息，包括：
17、分别提取所述两个视角的图像信息中的图像块；
18、对提取的多个图像块进行匹配；
19、对匹配后的图像块进行卷积操作，得到两个视角对应的图像块的多维向量。
20、在一种能够实现的实施方式中，所述得到两个视角对应的图像块的多维向量之后，还包括：
21、将两个视角的所述多维向量进行n1维度特征矩阵的卷积操作，分别得到两个视角的n2维度特征矩阵。
22、在一种能够实现的实施方式中，所述对帧对齐后的图像信息进行信息融合，包括：
23、将不同视角的所述n2维度特征矩阵进行融合计算，得到n3维度特征矩阵；
24、对所述n3维度特征矩阵进行反卷积运算，得到超分辨率图像。
25、根据第二方面，一种实施例中提供一种双摄超光谱图像成像方法,包括：
26、获取两个不同视场角的图像信息；
27、提取每个所述图像信息的特征点；
28、通过变换矩阵对所述特征点进行图像尺寸变换，以对所述图像信息进行图像对齐；
29、构建拉普拉斯金字塔模型，通过所述拉普拉斯金字塔模型对对齐后的图像进行融合，得到融合图像并输出。
30、根据第三方面，一种实施例中提供一种双摄超光谱图像成像系统，包括：
31、获取模块，用于获取待观测部位的两个视角的图像信息；
32、特征提取模块，用于对所述图像信息进行特征提取，分别得到每张图像的特征信息；
33、配准模块，用于根据所述特征信息对所述图像信息进行帧对齐；
34、融合模块，用于对帧对齐后的图像信息进行信息融合，以得到超分辨率图像。
35、根据第四方面，一种实施例中提供一种双摄超光谱内窥镜，包括：光源、至少两个超光谱图像传感器、光学镜头以及处理器；所述至少两个超光谱图像传感器的视角不同；
36、所述光源用于照射待观测部位；
37、所述光学镜头与所述超光谱图像传感器的视场角相同，所述光学镜头用于将来自所述待观测部位的光线传递给所述超光谱图像传感器；
38、所述超光谱图像传感器用于获取待观测部位的图像信息，并将所述图像信息传递给所述处理器；
39、所述处理器用于：
40、分别对各个超光谱图像传感器传递的所述图像信息进行特征提取，得到每张图像的特征信息；
41、根据所述特征信息对所述图像信息进行帧对齐；
42、对帧对齐后的图像信息进行信息融合，以得到超分辨率图像。
43、根据第五方面，一种实施例中提供一种计算机可读存储介质，所述介质上存储有程序，所述程序能够被处理器执行以实现上述的方法。
44、据上述实施例的一种双摄超光谱图像成像方法/系统/双摄超光谱内窥镜，首先，通过获取待观测部位的两个视角的图像信息，然后对图像信息进行特征提取，以得到每张图像的特征信息，再然后根据特征信息对图像信息进行帧对齐，最后对对帧对齐后的图像信息进行信息融合，得到超分辨率图像。采用本申请的方案，能够根据待分析组织处存在的问题，通过双摄超光谱内窥镜对该处不同视角的图像进行采集，并对该处同一场景不同视角的光谱图像进行分析调制，对该同一场景不同视角的图像信息进行融合，有效提高了输出的超光谱图像的分辨率，进而有效提升了双摄融合超光谱图像显示效果。
本文档来自技高网...【技术保护点】
1.一种双摄超光谱图像成像方法,其特征在于，包括：
2.如权利要求1所述的双摄超光谱图像成像方法，其特征在于，所述对所述图像信息进行特征提取，分别得到每张图像的特征信息，包括：
3.如权利要求2所述的双摄超光谱图像成像方法，其特征在于，所述根据所述特征信息对所述图像信息进行帧对齐，包括：
4.如权利要求3所述的双摄超光谱图像成像方法，其特征在于，所述对帧对齐后的图像信息进行信息融合，以得到超分辨率图像，包括：
5.如权利要求1所述的双摄超光谱图像成像方法，其特征在于，所述对所述图像信息进行特征提取，分别得到每张图像的特征信息，包括：
6.如权利要求5所述的双摄超光谱图像成像方法，其特征在于，所述得到两个视角对应的图像块的多维向量之后，还包括：
7.如权利要求6所述的双摄超光谱图像成像方法，其特征在于，所述对帧对齐后的图像信息进行信息融合，包括：
8.一种双摄超光谱图像成像方法,其特征在于，包括：
9.一种双摄超光谱图像成像系统，其特征在于，包括：
10.一种双摄超光谱内窥镜
...【技术特征摘要】
1.一种双摄超光谱图像成像方法,其特征在于，包括：
2.如权利要求1所述的双摄超光谱图像成像方法，其特征在于，所述对所述图像信息进行特征提取，分别得到每张图像的特征信息，包括：
3.如权利要求2所述的双摄超光谱图像成像方法，其特征在于，所述根据所述特征信息对所述图像信息进行帧对齐，包括：
4.如权利要求3所述的双摄超光谱图像成像方法，其特征在于，所述对帧对齐后的图像信息进行信息融合，以得到超分辨率图像，包括：
5.如权利要求1所述的双摄超光谱图像成像方法，其特征在于，所述对所述图像信息进行特征提取，分...
【专利技术属性】
技术研发人员：黎俊均，朱能杰，许讯，
申请(专利权)人：深圳因赛德思医疗科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。