鼻咽喉镜图像异常的识别方法及装置制造方法及图纸

本申请提供一种鼻咽喉镜图像异常的识别方法及装置，该鼻咽喉镜图像异常的识别方法包括：获取在鼻咽喉镜退镜时的第一鼻咽喉镜图像；得到第一鼻咽喉镜图像的第一部位类别；基于第一部位类别确定对应的第二部位分类模型；将第一鼻咽喉镜图像输入至第二部位分类模型，得到第一鼻咽喉镜图像的第二部位类别；获取第二部位类别的多张鼻咽喉镜留图图像；获取每张鼻咽喉镜留图图像的至少一个特征量化值；得到各个鼻咽喉镜留图图像的目标特征量化值；将目标特征量化值最大的鼻咽喉镜留图图像确定为第二部位类别的目标留图图像；基于第二部位类别的目标留图图像确定异常识别结果。本申请能够提高鼻咽喉镜图像异常的识别准确率。够提高鼻咽喉镜图像异常的识别准确率。够提高鼻咽喉镜图像异常的识别准确率。

【技术实现步骤摘要】
鼻咽喉镜图像异常的识别方法及装置


[0001]本申请主要涉及图像处理
，具体涉及一种鼻咽喉镜图像异常的识别方法及装置。

技术介绍

[0002]耳鼻咽喉
‑
头颈外科学是一门专科性质较强的学科，诸器官部位深在、隐蔽，多为细小的腔洞，解剖结构精细、复杂、功能多样，欲认知其正常形态和病变现象，须利用特殊的检查设备。电子喉镜检查技术相对容易掌握，病人的舒适度较高、耐受性较好，可直接观察到空腔脏器黏膜。但现有技术中受医生留图水平影响，可能会出现视觉盲区，并且部位结构复杂，无法准确识别出图像异常。
[0003]也即，现有技术中鼻咽喉镜图像异常的识别准确率不高。

技术实现思路

[0004]本申请提供一种鼻咽喉镜图像异常的识别方法及装置，旨在解决现有技术中鼻咽喉镜图像异常的识别准确率不高的问题。
[0005]第一方面，本申请提供一种鼻咽喉镜图像异常的识别方法，所述鼻咽喉镜图像异常的识别方法包括：
[0006]获取在鼻咽喉镜退镜时的第一鼻咽喉镜图像；
[0007]将所述第一鼻咽喉镜图像输入第一部位分类模型，得到第一鼻咽喉镜图像的第一部位类别；
[0008]基于所述第一部位类别确定对应的第二部位分类模型，其中，不同的第一部位类别对应不同的第二部位分类模型，第二部位分类模型输出的各个类别的部位均位于第一部位类别的部位中；
[0009]将所述第一鼻咽喉镜图像输入至所述第二部位分类模型，得到所述第一鼻咽喉镜图像的第二部位类别；
[0010]获取第二部位类别的多张鼻咽喉镜留图图像，其中，多张鼻咽喉镜留图图像为鼻咽喉镜对第二部位类别的部位进行不同角度拍照并留图得到的；
[0011]获取每张鼻咽喉镜留图图像的至少一个特征量化值；
[0012]针对任意一个所述鼻咽喉镜留图图像，根据所述鼻咽喉镜留图图像的至少一个特征量化值确定所述鼻咽喉镜留图图像的目标特征量化值，得到各个所述鼻咽喉镜留图图像的目标特征量化值；
[0013]将目标特征量化值最大的所述鼻咽喉镜留图图像确定为第二部位类别的目标留图图像；
[0014]基于所述第二部位类别的目标留图图像确定异常识别结果。
[0015]可选地，所述特征量化值包括颜色特征量化值，纹理特征量化值、图像熵量化值以及图像质量量化值中的至少一种，所述获取每张鼻咽喉镜留图图像的至少一个特征量化
值，包括：
[0016]将鼻咽喉镜留图图像中的黑色像素点剔除，得到多个剔除后像素点；获取多个剔除后像素点在RGB三通道上的三个通道像素平均值；将三个通道像素平均值的中位数确定为颜色特征量化值；
[0017]和/或，获取鼻咽喉镜留图图像中各个像素点的LBP值；将各个像素点的LBP值的求和确定为所述纹理特征量化值；
[0018]和/或，获取鼻咽喉镜留图图像中各个像素点的灰度值和邻域灰度均值，将灰度值和邻域灰度均值均相同的像素点作为同一类别，得到多个类别的像素点；根据各个类别的像素点频数和鼻咽喉镜留图图像的像素点总数确定图像熵量化值；
[0019]和/或，将所述鼻咽喉镜留图图像输入预训练的图像质量评分模型，得到图像质量量化值。
[0020]可选地，所述获取每张鼻咽喉镜留图图像的至少一个特征量化值，之前，包括：
[0021]获取在鼻咽喉镜退镜时按预设频率拍摄的多个第二鼻咽喉镜图像；
[0022]获取第二部位类别的多张鼻咽喉镜留图图像的拍摄时间区间；
[0023]从所述多个第二鼻咽喉镜图像中获取拍摄时间位于所述拍摄时间区间的多张第三鼻咽喉镜图像；
[0024]将所述多张第三鼻咽喉镜图像的每一张图像依次不拿回放入第二部位类别的多张鼻咽喉镜留图图像并进行三维重建，得到重建的多个三维模型；
[0025]若多个三维模型相同，则确定所述多张鼻咽喉镜留图图像留图完整，则获取每张鼻咽喉镜留图图像的至少一个特征量化值。
[0026]可选地，所述基于所述第二部位类别的目标留图图像确定异常识别结果，包括：
[0027]判断所述第二部位类别是否属于预设部位类别，其中，所述预设部位类别的部位具有对称的部位；
[0028]若所述第二部位类别属于预设部位类别，则获取所述第二部位类别对应的对称部位类别，其中，所述第二部位类别的部位和对应的对称部位类别的部位左右对称；
[0029]获取所述对称部位类别的目标留图图像；
[0030]将所述对称部位类别的目标留图图像左右翻转，得到翻转图像；
[0031]将所述翻转图像和所述第二部位类别的目标留图图像输入部位分割模型，得到所述翻转图像的第一部位分割区域和所述对称部位类别的第二部位分割区域；
[0032]将所述翻转图像与所述第二部位类别的目标留图图像对齐，计算所述第一部位分割区域和第二部位分割区域的交并比；
[0033]基于所述第一部位分割区域和第二部位分割区域的交并比确定所述翻转图像和所述第二部位类别的目标留图图像之间的第一对称系数；
[0034]根据所述第一对称系数确定异常识别结果。
[0035]可选地，所述根据所述第一对称系数确定异常识别结果，包括：
[0036]将所述翻转图像中的各个像素点二值化为0或者1；
[0037]获取所述翻转图像在各行中像素点的像素值为0和1交替出现的第一行交替出现次数和所述翻转图像在各列中像素点的像素值为0和1交替出现的第一列交替出现次数；
[0038]根据所述第一行交替出现次数和所述第一列交替出现次数确定第一图像特征参
数；
[0039]将所述第二部位类别的目标留图图像中的各个像素点二值化为0或者1；
[0040]获取所述第二部位类别的目标留图图像在各行中像素点的像素值为0和1交替出现的第二行交替出现次数和所述第二部位类别的目标留图图像在各列中像素点的像素值为0和1交替出现的第二列交替出现次数；
[0041]根据所述第二行交替出现次数和所述第二交替出现次数确定确定第二图像特征参数；
[0042]根据第一图像特征参数和所述第二图像特征参数确定第二对称系数；
[0043]根据所述第一对称系数和所述第二对称系数确定目标对称系数；
[0044]根据所述目标对称系数确定异常识别结果。
[0045]可选地，所述根据所述目标对称系数确定异常识别结果，包括：
[0046]若目标对称系数小于预设值，确定第一鼻咽喉镜图像异常。
[0047]可选地，所述鼻咽喉镜图像异常的识别方法，包括：
[0048]基于所述多个第二鼻咽喉镜图像进行三维重建，得到鼻咽喉三维模型；
[0049]将所述鼻咽喉三维模型展开为二维展开图；
[0050]将所述二维展开图分别输入病灶分割模型和部位分割模型，得到二维展开图中的病灶分割区域和各个部位分割区域；
[0051]计算病灶分割区域和各个部位分割区域之间的形心距离；
[0052]将形心距离最本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种鼻咽喉镜图像异常的识别方法，其特征在于，所述鼻咽喉镜图像异常的识别方法包括：获取在鼻咽喉镜退镜时的第一鼻咽喉镜图像；将所述第一鼻咽喉镜图像输入第一部位分类模型，得到第一鼻咽喉镜图像的第一部位类别；基于所述第一部位类别确定对应的第二部位分类模型，其中，不同的第一部位类别对应不同的第二部位分类模型，第二部位分类模型输出的各个类别的部位均位于第一部位类别的部位中；将所述第一鼻咽喉镜图像输入至所述第二部位分类模型，得到所述第一鼻咽喉镜图像的第二部位类别；获取第二部位类别的多张鼻咽喉镜留图图像，其中，多张鼻咽喉镜留图图像为鼻咽喉镜对第二部位类别的部位进行不同角度拍照并留图得到的；获取每张鼻咽喉镜留图图像的至少一个特征量化值；针对任意一个所述鼻咽喉镜留图图像，根据所述鼻咽喉镜留图图像的至少一个特征量化值确定所述鼻咽喉镜留图图像的目标特征量化值，得到各个所述鼻咽喉镜留图图像的目标特征量化值；将目标特征量化值最大的所述鼻咽喉镜留图图像确定为第二部位类别的目标留图图像；基于所述第二部位类别的目标留图图像确定异常识别结果。2.根据权利要求1所述的鼻咽喉镜图像异常的识别方法，其特征在于，所述特征量化值包括颜色特征量化值，纹理特征量化值、图像熵量化值以及图像质量量化值中的至少一种，所述获取每张鼻咽喉镜留图图像的至少一个特征量化值，包括：将鼻咽喉镜留图图像中的黑色像素点剔除，得到多个剔除后像素点；获取多个剔除后像素点在RGB三通道上的三个通道像素平均值；将三个通道像素平均值的中位数确定为颜色特征量化值；和/或，获取鼻咽喉镜留图图像中各个像素点的LBP值；将各个像素点的LBP值的求和确定为所述纹理特征量化值；和/或，获取鼻咽喉镜留图图像中各个像素点的灰度值和邻域灰度均值，将灰度值和邻域灰度均值均相同的像素点作为同一类别，得到多个类别的像素点；根据各个类别的像素点频数和鼻咽喉镜留图图像的像素点总数确定图像熵量化值；和/或，将所述鼻咽喉镜留图图像输入预训练的图像质量评分模型，得到图像质量量化值。3.根据权利要求1所述的鼻咽喉镜图像异常的识别方法，其特征在于，所述获取每张鼻咽喉镜留图图像的至少一个特征量化值，之前，包括：获取在鼻咽喉镜退镜时按预设频率拍摄的多个第二鼻咽喉镜图像；获取第二部位类别的多张鼻咽喉镜留图图像的拍摄时间区间；从所述多个第二鼻咽喉镜图像中获取拍摄时间位于所述拍摄时间区间的多张第三鼻咽喉镜图像；将所述多张第三鼻咽喉镜图像的每一张图像依次不拿回放入第二部位类别的多张鼻
咽喉镜留图图像并进行三维重建，得到重建的多个三维模型；若多个三维模型相同，则确定所述多张鼻咽喉镜留图图像留图完整，则获取每张鼻咽喉镜留图图像的至少一个特征量化值。4.根据权利要求1所述的鼻咽喉镜图像异常的识别方法，其特征在于，所述基于所述第二部位类别的目标留图图像确定异常识别结果，包括：判断所述第二部位类别是否属于预设部位类别，其中，所述预设部位类别的部位具有对称的部位；若所述第二部位类别属于预设部位类别，则获取所述第二部位类别对应的对称部位类别，其中，所述第二部位类别的部位和对应的对称部位类别的部位左右对称；获取所述对称部位类别的目标留图图像；将所述对称部位类别的目标留图图像左右翻转，得到翻转图像；将所述翻转图像和所述第二部位类别的目标留图图像输入部位分割模型，得到所述翻转图像的第一部位分割区域和所述对称部位类别的第二部位分割区域；将所述翻转图像与所述第二部位类别的目标留图图像对齐，计算所述第一部位分割区域和第二部位分割区域的交并比；基于所述第一部位分割区域和第二部位分割区域的交并比确定所述翻转图像和所述...

【专利技术属性】
技术研发人员：李昊，胡珊，
申请(专利权)人：武汉楚精灵医疗科技有限公司，
类型：发明
国别省市：