图像对齐方法、装置、计算机设备和存储介质制造方法及图纸

本申请涉及一种图像对齐方法、装置、计算机设备和存储介质，方法包括：获取第一RGB图像和第二RGB图像；第一RGB图像和第二RGB图像通过采用不同染色方法对同一病理组织的相邻切片进行染色得到；分别对第一RGB图像和第二RGB图像进行颜色反卷积处理，得到第一RGB图像对应的第一HED图像和第二RGB图像对应的第二HED图像；从第一HED图像中识别出病理组织的第一外轮廓，从第二HED图像识别出病理组织的第二外轮廓；从第一外轮廓中确定出病理组织的第一关键点，从第二外轮廓中确定出病理组织的第二关键点；基于第一关键点和第二关键点，对第一RGB图像和第二RGB图像进行图像对齐。采用本方法能够提高图像对齐的速率和精度。法能够提高图像对齐的速率和精度。法能够提高图像对齐的速率和精度。

【技术实现步骤摘要】
图像对齐方法、装置、计算机设备和存储介质


[0001]本申请涉及图像处理
，特别是涉及一种图像对齐方法、装置、计算机设备、存储介质和计算机程序产品。

技术介绍

[0002]经统计，在常规的肿瘤病理诊断里面，有大概5％
‑
10％的病例单靠传统的HE染色技术，很难做出明确的形态学诊断，因此，对于这些难做明确形态学诊断的肿瘤组织，病理医生会另外对做其连续切片的免疫组化。免疫组化会与肿瘤性细胞和费肿瘤性细胞的某些蛋白或者产物进行反应并造成一定的颜色差异，医生根据这些差异对肿瘤进行细分类，提高诊断的准确率并为临床医生提供治疗方案的选择。
[0003]在病理医生阅片的过程中，经常需要同时观看同一组织区域在不同单标记染色的情况，但同一块组织往往经过连续切片的制片和扫描后在图像上都有一定的偏移，所以医生需要自己手动定位到两个图像的同一个区域进行配准对齐，这种方法工作量较大且效率较低。

技术实现思路

[0004]基于此，有必要针对上述人工进行图像配准对齐的工作量较大且效率较低的技术问题，提供一种图像对齐方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。
[0005]第一方面，本申请提供了一种图像对齐方法。所述方法包括：
[0006]获取第一RGB图像和第二RGB图像；所述第一RGB图像和所述第二RGB图像通过采用不同染色方法对同一病理组织的相邻切片进行染色得到；
[0007]分别对所述第一RGB图像和所述第二RGB图像进行颜色反卷积处理，得到所述第一RGB图像对应的第一HED图像和所述第二RGB图像对应的第二HED图像；
[0008]从所述第一HED图像中识别出所述病理组织的第一外轮廓，从所述第二HED图像识别出所述病理组织的第二外轮廓；
[0009]从所述第一外轮廓中确定出所述病理组织的第一关键点，从所述第二外轮廓中确定出所述病理组织的第二关键点；
[0010]基于所述第一关键点和所述第二关键点，对所述第一RGB图像和所述第二RGB图像进行图像对齐。
[0011]在其中一个实施例中，所述从所述第一HED图像中识别出所述病理组织的第一外轮廓，从所述第二HED图像识别出所述病理组织的第二外轮廓，包括：
[0012]分别对所述第一HED图像和所述第二HED图像进行干扰区域消除处理，得到第一HED处理图像和第二HED处理图像；
[0013]从所述第一HED处理图像中，提取得到所述病理组织的第一外轮廓，以及从所述第二HED处理图像中，提取得到所述病理组织的第二外轮廓。
[0014]在其中一个实施例中，所述从所述第一外轮廓中确定出所述病理组织的第一关键
点，从所述第二外轮廓中确定出所述病理组织的第二关键点，包括：
[0015]对所述第一外轮廓和所述第二外轮廓分别进行多边形拟合处理，得到所述第一外轮廓对应的第一多边形和所述第二外轮廓对应的第二多边形；
[0016]提取所述第一多边形的拐点，作为所述病理组织的第一关键点；
[0017]提取所述第二多边形的拐点，作为所述病理组织的第二关键点。
[0018]在其中一个实施例中，所述第一关键点和所述第二关键点均包括有多个关键点；
[0019]所述基于所述第一关键点和所述第二关键点，对所述第一RGB图像和所述第二RGB图像进行图像对齐，包括：
[0020]基于所述第一关键点和所述第二关键点，得到多个关键点对；每个关键点对中包括一个第一关键点和一个第二关键点；
[0021]在每个关键点对中的两个点重合且关联的边重合的情况下，以每个关键点对的重合点为变换中心，获取各个关键点对对应的变换矩阵；所述变换矩阵用于将所述第二RGB图像中的第二关键点映射至所述第一RGB图像中；
[0022]获取每个变换矩阵对应的关键点距离和，基于所述关键点距离和，从各个变换矩阵中确定出目标变换矩阵；所述关键点距离和基于映射后的第二映射关键点与第一关键点之间的距离得到；
[0023]基于所述目标变换矩阵，将所述第二RGB图像与所述第一RGB图像对齐。
[0024]在其中一个实施例中，所述获取每个变换矩阵对应的关键点距离和，包括：
[0025]针对每个变换矩阵，确定通过该变换矩阵对所述第二RGB图像中的第二关键点进行映射处理后的第二映射关键点；
[0026]基于所述第一关键点和所述第二映射关键点，得到多个相关关键点对；每个相关关键点对中包括一个第二映射关键点和与所述一个第二映射关键点距离最近的第一关键点；
[0027]获取各个相关关键点对中两个关键点之间的距离，并计算各个距离的累加和，得到各个变换矩阵对应的关键点距离和。
[0028]在其中一个实施例中，所述基于所述关键点距离和从各个变换矩阵中确定出目标变换矩阵，包括：
[0029]从所述各个变换矩阵中确定出关键点距离和满足预设条件的变换矩阵，作为目标变换矩阵。
[0030]在其中一个实施例中，在基于所述第一关键点和所述第二关键点，对所述第一RGB图像和所述第二RGB图像进行图像对齐之前，还包括：
[0031]获取所述第一RGB图像和所述第二RGB图像各自的尺寸比；所述尺寸比表示RGB图像中病理组织的尺寸与病理组织的实际物理尺寸之间的比值；
[0032]根据所述尺寸比，对所述第一RGB图像和所述第二RGB图像进行尺寸调整处理，使所述第一RGB图像和所述第二RGB图像的尺寸相同。
[0033]第二方面，本申请还提供了一种图像对齐装置。所述装置包括：
[0034]获取模块，用于获取第一RGB图像和第二RGB图像；所述第一RGB图像和所述第二RGB图像通过采用不同染色方法对同一病理组织的相邻切片进行染色得到；
[0035]转换模块，用于分别对所述第一RGB图像和所述第二RGB图像进行颜色反卷积处
理，得到所述第一RGB图像对应的第一HED图像和所述第二RGB图像对应的第二HED图像；
[0036]识别模块，用于从所述第一HED图像中识别出所述病理组织的第一外轮廓，从所述第二HED图像识别出所述病理组织的第二外轮廓；
[0037]关键点模块，用于从所述第一外轮廓中确定出所述病理组织的第一关键点，从所述第二外轮廓中确定出所述病理组织的第二关键点；
[0038]对齐模块，用于基于所述第一关键点和所述第二关键点，对所述第一RGB图像和所述第二RGB图像进行图像对齐。
[0039]第三方面，本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：
[0040]获取第一RGB图像和第二RGB图像；所述第一RGB图像和所述第二RGB图像通过采用不同染色方法对同一病理组织的相邻切片进行染色得到；
[0041]分别对所述第一RGB图像和所述第二RGB图像进行颜色反卷积处理，得到所述第一RGB图像对应的第一本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像对齐方法，其特征在于，所述方法包括：获取第一RGB图像和第二RGB图像；所述第一RGB图像和所述第二RGB图像通过采用不同染色方法对同一病理组织的相邻切片进行染色得到；分别对所述第一RGB图像和所述第二RGB图像进行颜色反卷积处理，得到所述第一RGB图像对应的第一HED图像和所述第二RGB图像对应的第二HED图像；从所述第一HED图像中识别出所述病理组织的第一外轮廓，从所述第二HED图像识别出所述病理组织的第二外轮廓；从所述第一外轮廓中确定出所述病理组织的第一关键点，从所述第二外轮廓中确定出所述病理组织的第二关键点；基于所述第一关键点和所述第二关键点，对所述第一RGB图像和所述第二RGB图像进行图像对齐。2.根据权利要求1所述的方法，其特征在于，所述从所述第一HED图像中识别出所述病理组织的第一外轮廓，从所述第二HED图像识别出所述病理组织的第二外轮廓，包括：分别对所述第一HED图像和所述第二HED图像进行干扰区域消除处理，得到第一HED处理图像和第二HED处理图像；从所述第一HED处理图像中，提取得到所述病理组织的第一外轮廓，以及从所述第二HED处理图像中，提取得到所述病理组织的第二外轮廓。3.根据权利要求1所述的方法，其特征在于，所述从所述第一外轮廓中确定出所述病理组织的第一关键点，从所述第二外轮廓中确定出所述病理组织的第二关键点，包括：对所述第一外轮廓和所述第二外轮廓分别进行多边形拟合处理，得到所述第一外轮廓对应的第一多边形和所述第二外轮廓对应的第二多边形；提取所述第一多边形的拐点，作为所述病理组织的第一关键点；提取所述第二多边形的拐点，作为所述病理组织的第二关键点。4.根据权利要求1所述的方法，其特征在于，所述第一关键点和所述第二关键点均包括有多个关键点；所述基于所述第一关键点和所述第二关键点，对所述第一RGB图像和所述第二RGB图像进行图像对齐，包括：基于所述第一关键点和所述第二关键点，得到多个关键点对；每个关键点对中包括一个第一关键点和一个第二关键点；在每个关键点对中的两个点重合且关联的边重合的情况下，以每个关键点对的重合点为变换中心，获取各个关键点对对应的变换矩阵；所述变换矩阵用于将所述第二RGB图像中的第二关键点映射至所述第一RGB图像中；获取每个变换矩阵对应的关键点距离和，基于所述关键点距离和，从各...

【专利技术属性】
技术研发人员：冯嘉豪，刘凯，汪进，陈睿，
申请(专利权)人：赛维森广州医疗科技服务有限公司，
类型：发明
国别省市：