新型的OCT空间重建方法技术

本发明专利技术公开了一种新型的OCT空间重建方法。包括，获取多张不同角度的冠脉造影影像数据；在每个角度获取的冠脉造影影像数据中，提取不同心动周期中同一时刻的冠脉造影图像；并根据冠脉造影图像，提取血管骨架；在提取血管骨架时，包括对不同角度的冠脉造影图像；采用深度学习进行多视角立体匹配，并采用对极几何算法，进行匹配校正，根据匹配校正后的冠脉造影图像获取三维血管骨架；获取冠脉OCT序列图像，并结合三维血管骨架的走向进行重排；对重排后的图像进行体渲染，渲染出真实姿态的三维空间模型。既实现了对于不可视部分的预测，也保证了对于可视部分三维重建的正确性，为后期对血管畸形病变等情况的筛查，提供了数据基础。础。础。

【技术实现步骤摘要】
新型的OCT空间重建方法


[0001]本专利技术涉及医疗影像处理
，尤其涉及基于XRAY和OCT图像进行的新型的OCT空间重建方法。

技术介绍

[0002]心脑血管疾病被称为威胁人类生命健康的第一杀手。随着人们生活水平的日益提高，生活物质资料也越来越充足。因此肥胖人群的比例呈上升的趋势，这些人群恰恰是心脑血管疾病发作的高危群体。科技发展带动医疗诊断技术的不断革新，医学影像技术的蓬勃发展给诊断各种疾病带来便利的措施和有效的手段。诸如冠脉造影成像(XRAY)、计算机X射线断层扫描(CT)、核磁共振成像(MRI)图像、血管内超声成像(IVUS)、光学相干断层成像(OCT)等都已经广泛的应用到医学诊断当中。
[0003]利用两幅或者多幅XRAY冠脉图像可以进行空间三维信息重建，从而恢复冠脉的真实血管三维结构。这种重建方法称为多视几何重建，以此方法建立的空间三维血管模型，可以从外部空间视角观察冠脉空间结构信息，血管走向，血管直径，血管狭窄病变等。但该方法只能看到外部信息，但对血管腔内信息却无能为力。
[0004]基于OCT序列图像的三维重建。该方法是利用多张序列图像进行三维重建，获取的图像数据为光学旋转断层扫描数据，所以每张图像的信息是包含从血管内壁到管腔的内部结构信息。以此序列图像重建的空间模型可以观察血管内空间信息，包括血管内钙化情况，血管阻塞情况等。但是该方法不能重建血管的空间走向信息，所以空间模型不是真实形态信息。
[0005]结合XRAY造影图像和OCT序列图像进行OCT空间重建方法是结合两者分别对外部血管信息结构探测和内部血管信息结构探测的方法，构建出具有空间真实走向的血管三维模型结构信息。但是，在实际场景中，利用多视几何重建方法构建的三维血管模型智能在有限角度下了解血管的空间结构和走向，由于血管的特殊走向，我们无法对进行全角度的拍摄，因此，单独采用多视几何重建方法，无法了解，不可视部分的血管是否发生畸变。因此需要对利用XRAY造影图像和OCT序列图像进行三维血管重建的方法进行改进。

技术实现思路

[0006]因此，本专利技术的目的在于提供一种新型的OCT空间重建方法，在利用XRAY造影图像和OCT序列图像的基础上采用深度学习进行多视角立体匹配，并采用对极几何算法，进行匹配校正，根据匹配校正后的冠脉造影图像获取三维血管骨架，并对冠脉OCT序列图像进行重排，由此实现了真实姿态的三维空间模型。
[0007]为了实现上述目的，本专利技术的一种新型的OCT空间重建方法，包括:
[0008]获取多张不同角度的冠脉造影影像数据；
[0009]在每个角度获取的冠脉造影影像数据中，提取不同心动周期中同一时刻的冠脉造影图像；并根据冠脉造影图像，提取血管骨架；
[0010]在提取血管骨架时，包括对不同角度的；采用深度学习进行多视角立体匹配，并采用对极几何算法，进行匹配校正，根据匹配校正后的冠脉造影图像获取三维血管骨架；
[0011]获取冠脉OCT序列图像，并结合三维血管骨架的走向进行重排；
[0012]对重排后的图像进行体渲染，渲染出真实姿态的三维空间模型。
[0013]优选的，在获取多张不同角度的冠脉造影影像数据时，包括在胸口位置设置定位标记，所述定位标记用于对获取的冠脉造影影像数据进行追踪校准。
[0014]在上述任意一项实施例中优选的，对不同角度的冠脉造影图像；采用深度学习进行包括如下方法：
[0015]将任意一个角度下获取的冠脉造影图像输入深度神经网络，生成多个重建结果点云集；
[0016]根据每个角度下获取的冠脉造影图像生成的重建结果点云集；
[0017]根据预设的一致性损失函数和任意两个点云集之间的距离，得出一致性优化后的多角度重建结果点云。
[0018]在上述任意一项实施例中优选的，所述深度神经网络中预设条件生成模型，根据加入的多个噪声生成多个重建结果；所述条件生成模型包括如下公式所示的多样性约束：
[0019]loss
div
＝max(0,||r1‑
r2||2‑
αEMD(S1,S2))
[0020]其中：r1和r2分别表示同一角度的冠脉造影图像中加入的任意两个噪声；EMD(S1,S2)表示生成的两个重建结果点云集S1和S2的推土距离；α为权重。
[0021]在上述任意一项实施例中优选的，所述一致性损失函数采用如下公式进行计算：
[0022][0023]其中：n表示，输入的多角度图像数，i和j表示任意两角度图像，CD(S
i
,S
j
)表示任意两角度图像对应生成的多个重建结果点云集S
i
和S
j
之间的倒角距离。
[0024]在上述任意一项实施例中优选的，在采用对极几何算法，进行匹配校正时，包括如下方法：
[0025]在任意两角度的重建结果点云中，提取关键点的三维坐标；根据多视几何原理及物理坐标与像素坐标之间的转换关系，采用如下公式计算相比较的任意两角度冠脉造影图像是否匹配：
[0026][0027]其中P
ijT
为投影矩阵P
i
的第j行，(x1,y1)、(x2,y2)分别为同一个物像投影点在两个角度图像中的坐标。
[0028]在上述任意一项实施例中优选的，对获取的冠脉OCT序列图像，并结合三维血管骨架的走向进行重排时，采用如下方法：
[0029]对三维血管骨架走向提取包络线；根据获取的冠脉OCT序列图像的图像帧数，在包络线上进行等间距插值；将冠脉OCT序列图像的序列，与每个插值，在包络线上进行位置对
应；按照对应的位置对冠脉OCT序列图像进行排序。
[0030]在上述任意一项实施例中优选的，利用相机的内外参数矩阵对获得的重建结果点云进行坐标标注。
[0031]本申请公开的一种新型的OCT空间重建方法，相比于现有技术至少具有以下优点：
[0032]1、本申请提供的新型OCT空间重建方法，采用深度学习与对极几何算法相结合，利用，利用深度学习算法对输入的多角度冠脉造影图像，进行立体匹配，利用对极几何算法进行校正后，既实现了对于不可视部分的预测，也保证了对于可视部分三维重建的正确性，为后期对血管畸形病变等情况的筛查，提供了数据基础。
[0033]2、本申请提供的新型OCT空间重建方法，通过深度学习的条件生成模型，对任意角度的冠脉造影图像，构造出来多个重建结果点云，在通过一致性优化后得到唯一确定的多角度重建结果点云，通过对任意两个角度的冠脉造影图像最终得到的多角度重建结果点云，利用条件生成模型加入多个噪声生成多个重建结果；对不可视部分提供了多种预测的可能性，对于局部血管的畸形病变筛查，提供了数据基础。
[0034]3、本申请提供的新型OCT空间重建方法，通过对病人身体胸口位置，贴mark标记，来对获取的图像进行追踪校准，以便精确获取匹配参数从而得到精确的空间几何结构。
...

【技术保护点】

【技术特征摘要】
1.一种新型的OCT空间重建方法，其特征在于，包括:获取多张不同角度的冠脉造影影像数据；在每个角度获取的冠脉造影影像数据中，提取不同心动周期中同一时刻的冠脉造影图像；并根据冠脉造影图像，提取血管骨架；在提取血管骨架时，包括对不同角度的冠脉造影图像；采用深度学习进行多视角立体匹配，并采用对极几何算法，进行匹配校正，根据匹配校正后的冠脉造影图像获取三维血管骨架；获取冠脉OCT序列图像，并结合三维血管骨架的走向进行重排；对重排后的图像进行体渲染，渲染出真实姿态的三维空间模型。2.根据权利要求1所述的一种新型的OCT空间重建方法，其特征在于，在获取多张不同角度的冠脉造影影像数据时，包括在胸口位置设置定位标记，所述定位标记用于对获取的冠脉造影影像数据进行追踪校准。3.根据权利要求1所述的一种新型的OCT空间重建方法，其特征在于，对不同角度的冠脉造影图像；采用深度学习进行包括如下方法：将任意一个角度下获取的冠脉造影图像输入深度神经网络，生成多个重建结果点云集；根据每个角度下获取的冠脉造影图像生成的多个重建结果点云集；根据预设的一致性损失函数和任意两个点云集之间的距离，得出一致性优化后的多角度重建结果点云。4.根据权利要求2所述的一种新型的OCT空间重建方法，其特征在于，所述深度神经网络中预设条件生成模型，根据加入的多个噪声生成多个重建结果；所述条件生成模型包括如下公式所示的多样性约束：loss
div
＝max(0,||r1‑
r2||2‑
αEMD(S1,S2))其中：r1和r2分别表示同一角度的冠脉造影图像中加入的任意两个噪声；...

【专利技术属性】
技术研发人员：武西宁，赵士勇，
申请(专利权)人：天津恒宇医疗科技有限公司，
类型：发明
国别省市：