图像检测方法、装置、计算机设备和存储介质制造方法及图纸

本申请涉及一种图像检测方法、装置、计算机设备和存储介质。所述方法包括：获取待检测图像；对所述待检测图像中的皮损部位进行定位，利用定位后的皮损部位生成与检测维度对应的掩膜图；将所述待检测图像输入检测模型，通过所述检测模型中的多个卷积组层进行运算，得到与所述检测维度对应的皮损特征信息图；利用所述检测模型中的检测子网络对所述皮损特征信息图与所述掩膜图进行融合，计算得到各个检测维度对应的检测分数；通过所述检测模型的全连接层对所述各个检测维度的检测分数进行叠加操作，输出与所述待预测图像对应的检测结果。采用本方法能够有效提高皮肤病图像检测结果准确性。

Image detection method, device, computer equipment and storage medium

【技术实现步骤摘要】
图像检测方法、装置、计算机设备和存储介质
本申请涉及计算机
，特别是涉及一种图像检测方法、装置、计算机设备和存储介质。
技术介绍
随着计算机技术的发展，可以通过计算机程序对疾病图像进行检测。例如，可以通过神经网络模型对皮肤病图像进行检测。但是传统的神经网络模型通常只是得到一个总体检测分数，而皮肤病图像需要从多个不同的维度进检测，由此导致检测结果不能准确反映皮肤受损的真实状态。而且传统的神经网络模型容易引入大量噪声，使得检测结果准确性较低。
技术实现思路
基于此，有必要针对上述技术问题，提供一种能够有效提高皮肤病图像检测结果准确性的图像检测方法、装置、计算机设备和存储介质。一种图像检测评估图像检测方法，所述方法包括：获取待检测图像；对所述待检测图像中的皮损部位进行定位，利用定位后的皮损部位生成与检测维度对应的掩膜图；将所述待检测图像输入检测模型，通过所述检测模型中的多个卷积组层进行运算，得到与所述检测维度对应的皮损特征信息图；利用所述检测模型中的检测子网络对所述皮损特征信息图与所述掩膜图进行融合，计算得到各个检测维度对应的检测分数；通过所述检测模型的全连接层对所述各个检测维度的检测分数进行叠加操作，输出与所述待预测图像对应的检测结果。一种图像检测装置，所述装置包括：获取模块，用于获取待检测图像；定位模块，用于对所述待检测图像中的皮损部位进行定位，利用定位后的皮损部位生成与检测维度对应的掩膜图；检测模块，用于将所述待检测图像输入检测模型，通过所述检测模型中的多个卷积组层进行运算，得到与所述检测维度对应的皮损特征信息图；利用所述检测模型中的检测子网络对所述皮损特征信息图与所述掩膜图进行融合，计算得到各个检测维度对应的检测分数；通过所述检测模型的全连接层对所述各个检测维度的检测分数进行叠加操作，输出与所述待预测图像对应的检测结果。一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：获取待检测图像；对所述待检测图像中的皮损部位进行定位，利用定位后的皮损部位生成与检测维度对应的掩膜图；将所述待检测图像输入检测模型，通过所述检测模型中的多个卷积组层进行运算，得到与所述检测维度对应的皮损特征信息图；利用所述检测模型中的检测子网络对所述皮损特征信息图与所述掩膜图进行融合，计算得到各个检测维度对应的检测分数；通过所述检测模型的全连接层对所述各个检测维度的检测分数进行叠加操作，输出与所述待预测图像对应的检测结果。一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：获取待检测图像；对所述待检测图像中的皮损部位进行定位，利用定位后的皮损部位生成与检测维度对应的掩膜图；将所述待检测图像输入检测模型，通过所述检测模型中的多个卷积组层进行运算，得到与所述检测维度对应的皮损特征信息图；利用所述检测模型中的检测子网络对所述皮损特征信息图与所述掩膜图进行融合，计算得到各个检测维度对应的检测分数；通过所述检测模型的全连接层对所述各个检测维度的检测分数进行叠加操作，输出与所述待预测图像对应的检测结果。上述图像检测方法、装置、计算机设备和存储介质，通过对待检测图像中的皮损部位进行定位，可以准确得到检测目标。利用检测目标生成与检测维度对应的掩膜图，通过检测模型中的多个卷积组层对待检测图像进行运算，得到与检测维度对应的皮损特征信息图。通过检测模值中的检测子网络对掩膜图与皮损特征信息图进行融合，能够得到每个检测维度的检测分数，从而可以有效反映皮肤受损的真实状态。通过全连接层对各个检测维度的检测分数进行叠加，从而得到与待检测图像对应的完整的检测结果，有效提高了待检测图像的检测准确性。附图说明图1为一个实施例中图像检测方法的应用环境图；图2为一个实施例中终端上传待检测图像的示意图；图3为一个实施例中检测结果在终端展示的示意图；图4为一个实施例中图像检测方法的流程示意图；图5为一个实施例中待检测图像的评估过程和检测结果的示意图；图6为一个实施例中检测模型的训练过程的流程示意图；图7为一个实施例中孪生网络的训练示意图；图8为一个实施例中对皮损部位定位后生成的不同尺寸比例的掩膜图；图9为一个实施例中检测子网络示意图；图10为一个实施例中图像检测装置的结构框图；图11为另一个实施例中图像检测装置的结构框图；图12为一个实施例中计算机设备的内部结构图。具体实施方式为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。本申请提供的图像检测方法，可以应用于如图1所示的应用环境中。其中，终端102通过网络与服务器104通过网络进行通信。其中，终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备，服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。终端102向服务器104上传待检测图像，待检测图像可以是皮肤病图像。服务器104上运行了预先训练的神经网络，包括定位模型和检测模型。服务器104通过定位模型对待检测图像中的皮损部位进行定位，与检测维度对应的掩膜图。服务器104将待检测图像输入检测模型，得到与检测维度对应的皮损特征信息图。服务器104利用检测模型对皮损特征信息图与掩膜图进行融合，计算得到各个检测维度对应的检测分数，通过检测模型的全连接层对各个检测维度的检测分数进行叠加操作，输出与待预测图像对应的检测结果。服务器104将该检测结果返回至终端102。本申请还另外提供一种应用场景，该应用场景应用上述的图像检测方法。具体地，该图像检测方法在该应用场景的应用如下。用户可以利用终端的应用程序，或者母程序上运行的子程序拍摄身体部位的图像作为待检测图像。通过终端的图像上传页面，上传待检测图像，通过该图像上传页面，可以上传同一身体部位的一张或多张待检测图像，也可以上传不同身体部位的多张待检测图像。其中，多张是两张或两张以上。身体部位包括头部、上肢、躯干和下肢。上传待检测图像的示意图可以如图2所示。服务器采用采用上述实施例中提供的方式对待检测图像进行检测，输出与各个检测维度对应的检测结果，将检测结果返回至终端。检测结果在终端展示的示意图如图3所示。在图3中包括总的检测分数以及各个检测维度的检测分数。其中，每个身体部位的待检测图像都可以展示各个检测维度的检测分数。在一个实施例中，如图4所示，提供了一种图像检测方法，以该方法应用于图1中的服务器为例进行说明，包括以下步骤：步骤402，获取待检测图像。待检测图像可以是皮肤病图像。待检测图像可以是患者通过终端上传至服务器的，也可以是诊疗设备上传至服务器。待本文档来自技高网...

【技术保护点】
1.一种图像检测方法，所述方法包括：/n获取待检测图像；/n对所述待检测图像中的皮损部位进行定位，利用定位后的皮损部位生成与检测维度对应的掩膜图；/n将所述待检测图像输入检测模型，通过所述检测模型中的多个卷积组层进行运算，得到与所述检测维度对应的皮损特征信息图；/n利用所述检测模型中的检测子网络对所述皮损特征信息图与所述掩膜图进行融合，计算得到各个检测维度对应的检测分数；/n通过所述检测模型的全连接层对所述各个检测维度的检测分数进行叠加操作，输出与所述待预测图像对应的检测结果。/n

【技术特征摘要】
1.一种图像检测方法，所述方法包括：
获取待检测图像；
对所述待检测图像中的皮损部位进行定位，利用定位后的皮损部位生成与检测维度对应的掩膜图；
将所述待检测图像输入检测模型，通过所述检测模型中的多个卷积组层进行运算，得到与所述检测维度对应的皮损特征信息图；
利用所述检测模型中的检测子网络对所述皮损特征信息图与所述掩膜图进行融合，计算得到各个检测维度对应的检测分数；
通过所述检测模型的全连接层对所述各个检测维度的检测分数进行叠加操作，输出与所述待预测图像对应的检测结果。


2.根据权利要求1所述的方法，其特征在于，所述利用定位后的皮损部位生成与检测维度对应的掩膜图包括：
获取所述皮损部位对应的定位框；所述定位框中包括中心点和其他点；
获取所述中心点的像素值，根据所述中心点的像素值计算所述定位框中其他点的像素值；
利用每个定位框中所述中心点的像素值与所述其他点的像素值生成与所述待检测图像对应的掩膜图。


3.根据权利要求2所述的方法，其特征在于，所述据所述中心点的像素值计算所述定位框中其他点的像素值包括：
获取所述中心点的坐标以及所述其他点的坐标；
根据所述中心的坐标、像素值与所述其他点的坐标进行高斯核递减，得到所述定位框中其他点的像素值。


4.根据权利要求1所述的方法，其特征在于，所述将所述待检测图像输入检测模型，通过所述检测模型中的多个卷积组层进行运算，得到与所述检测维度对应的皮损特征信息图包括：
通过所述检测模型中的卷积层、池化层、多个卷积组层对所述待检测图像进行深度卷积运算，提取与所述卷积组层对应的皮损特征信息；
获取与所述卷积组层对应的检测维度；
利用下一个卷积组层对应的皮损特征信息对上一个卷积组层对应的皮损特征信息进行反馈，生成与各个检测维度对应的皮损特征信息图。


5.根据权利要求4所述的方法，其特征在于，所述利用下一个卷积组层对应的皮损特征信息对上一个卷积组层对应的皮损特征信息进行反馈包括：
对所述下一个卷积组层对应的皮损特征信息进行上采样；
利用上采样后的皮损特征信息与所述上一个卷积组层对应的皮损特征信息进行叠加，生成与检测维度对应的皮损特征信息图。


6.根据权利要求1所述的方法，其特征在于，所述利用所述检测模型中的检测子网络对所述皮损特征信息图与所述掩膜图进行融合，计算得到各个检测维度对应的检测分数包括：
根据所述检测维度加载对应的掩膜图与皮损特征信息图，将所述掩膜图与所述皮损特征信息图相乘，得到所述检测子网络的输入向量；
通过所述检测子网络将所述输入向量经过多个卷积层以及叠加层，得到叠加后的皮损特征信息图；
通过所述检测子网络将所述输入向量经过SEBlock层，得到对应的特征系数；
通过对所述叠加后的皮损特征信息图与所述特征系数进行仿式变换，输出与所述检测维度对应的分数。


7.根据权利要求6所述的方法，其特征在于，所述通过对所述叠加后的皮损特征信息图与所述特征系数进行仿式变换，输出与所述检测维度对应的分数包括：
获取与所述待检测图像对应的多个预设策略及策略权值；
通过所述叠加后的皮损特征信息图与所述特征系数进行多次仿式变换，根据所述预设策略得到对应的策略分数；
利用所...

【专利技术属性】
技术研发人员：晏阳天，吴贤，葛屾，王锴，范伟，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：广东;44