一种图像处理的方法技术

本申请实施例公开了一种图像处理的方法

【技术实现步骤摘要】
一种图像处理的方法、装置、设备、存储介质及程序产品


[0001]本申请实施例涉及人工智能
，具体涉及一种图像处理的方法
、
装置
、
设备
、
存储介质及程序产品
。

技术介绍

[0002]在地图道路数据采集的过程中，为了实现对地图信息进行更新，需要将新采集的道路图像与已经采集的历史道路图像进行比对，从而找到发生变化的地标标识等，进而更新地图
。
[0003]判断新采集的道路图像与历史道路图像是否匹配，传统方式是利用
Resnet、InceptionV4
等卷积神经网络对大量的标注数据对进行训练，以训练得到深度学习分类网络
。
这样，在将新采集的道路图像与历史道路图像进行对齐处理后，再基于该深度学习分类网络对对齐后的图像对进行高级语义特征提取并分类，以得到最终的图像匹配结果，进而通过该图像匹配结果能够获知新采集的道路图像与历史道路图像是否匹配
。
[0004]然而，该传统匹配方式仅仅通过图像对齐处理，并依赖于深度学习分类网络对对齐后的图像对进行高级语义特征提取，并没有更细致地理解图像对中更精细化的图像信息，无法准确地确定图像匹配结果，匹配效果较差，导致出现新旧道路图像匹配错误带来的地图更新错误的问题
。

技术实现思路

[0005]本申请实施例提供了一种图像处理的方法
、
装置
、
设备
、
存储介质及程序产品，能够用于准确地确定图像对的图像匹配结果，提升匹配效果，从而避免发生因出现新旧道路图像匹配错误带来的地图更新错误的问题
。
[0006]第一方面，本申请实施例提供了一种图像处理的方法
。
该方法包括：获取至少一个图像对，每个所述图像对包括第一道路图像和第二道路图像，所述第二道路图像的采集时间早于所述第一道路图像的采集时间，所述第一道路图像包括至少一个第一标识部件，所述第二道路图像包括至少一个第二标识部件，每个所述第一标识部件用于指示所述第一道路图像中所显示的地标标识，每个所述第二标识部件用于指示所述第二道路图像中所显示的地标标识；针对每个所述图像对，提取每个所述第一标识部件的特征向量，以及每个所述第二标识部件的特征向量；将每个所述第一标识部件的特征向量分别与每个所述第二标识部件的特征向量进行两两之间的相似距离计算，得到对应所述第一标识部件与所述第二标识部件之间的部件相似度；基于每个所述部件相似度确定对应所述图像对的图像匹配结果
。
[0007]第二方面，本申请实施例提供一种图像处理装置
。
该图像处理装置包括但不限于终端设备
、
服务器等
。
该图像处理装置包括获取单元和处理单元
。
其中，获取单元，用于获取至少一个图像对，每个所述图像对包括第一道路图像和第二道路图像，所述第二道路图像的采集时间早于所述第一道路图像的采集时间，所述第一道路图像包括至少一个第一标识
部件，所述第二道路图像包括至少一个第二标识部件，每个所述第一标识部件用于指示所述第一道路图像中所显示的地标标识，每个所述第二标识部件用于指示所述第二道路图像中所显示的地标标识
。
处理单元，用于提取每个所述第一标识部件的特征向量，以及每个所述第二标识部件的特征向量
。
所述处理单元，用于将每个所述第一标识部件的特征向量分别与每个所述第二标识部件的特征向量进行两两之间的相似距离计算，得到对应所述第一标识部件与所述第二标识部件之间的部件相似度
。
所述处理单元，用于基于每个所述部件相似度确定对应所述图像对中的图像匹配结果
。
[0008]在一些可选的实施方式中，处理单元用于：基于预设特征提取模型提取所述第一道路图像的图像特征；基于至少一个预设候选检测框对所述第一道路图像的图像特征进行特征提取，得到每个所述第一标识部件的特征向量
。
[0009]在另一些可选的实施方式中，处理单元用于：基于预设特征提取模型提取所述第二道路图像的图像特征；基于至少一个预设候选检测框对所述第二道路图像的图像特征进行特征提取，得到每个所述第二标识部件的特征向量
。
[0010]在另一些可选的实施方式中，每个所述第一标识部件的特征向量包括对应所述第一标识部件的第一位置特征
、
第一旋转角度特征以及第一语义特征中的一个或多个，每个所述第二标识部件的特征向量包括对应所述第二标识部件的第二位置特征
、
第二旋转角度特征以及第二语义特征中的一个或多个；处理单元用于：计算第一子部件的所述第一位置特征与第二子部件的所述第二位置特征之间的第一相似距离，所述第一子部件为所述至少一个第一标识部件中的任意一个，所述第二子部件为所述至少一个第二标识部件中的任意一个；计算所述第一子部件的所述第一旋转角度特征与所述第二子部件的所述第二旋转角度特征之间的第二相似距离；计算所述第一子部件的所述第一语义特征与所述第二子部件的所述第二语义特征之间的第三相似距离；对所述第一相似距离
、
所述第二相似距离以及所述第三相似距离中的一个或多个进行加权求和处理，得到所述第一子部件与所述第二子部件之间的部件相似度
。
[0011]在另一些可选的实施方式中，处理单元用于：基于预设相似度算法对第一子部件的所述第一位置特征与第二子部件的所述第二位置特征进行计算，得到第一子部件的所述第一位置特征与第二子部件的所述第二位置特征之间的第一相似距离
。
[0012]在另一些可选的实施方式中，处理单元用于：计算所述第一子部件中的所述第一旋转角度特征中各个元素与所述第二子部件中的所述第二旋转角度特征中相同元素位置上的元素之间的差值；计算每个所述差值的绝对值之和，得到所述第一子部件的所述第一旋转角度特征与所述第二子部件的所述第二旋转角度特征之间的第二相似距离
。
[0013]在另一些可选的实施方式中，处理单元用于：对所述第一子部件的所述第一语义特征与所述第二子部件的所述第二语义特征进行向量內积计算，得到所述第一子部件的所述第一语义特征与所述第二子部件的所述第二语义特征之间的第三相似距离
。
[0014]在另一些可选的实施方式中，处理单元用于：将每个所述部件相似度分别与第一预设阈值进行比较，确定目标标识部件对，所述目标标识部件对所对应的部件相似度大于所述第一预设阈值；统计所述目标标识部件对的数目
、
所述第一标识部件的数目以及所述第二标识部件的数目；基于所述目标标识部件对的数目
、
所述第一标识部件的数目以及所述第二标识部件的数目确定对应所述图像对的图像匹配结果
。
[0015]在另一些可选的实施方式中，处理单元用于：基于所述目标标识部件对的数目
、
所述第一标识部件的数目以及所述第二标识部件的数目计算第本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种图像处理的方法，其特征在于，包括：获取至少一个图像对，每个所述图像对包括第一道路图像和第二道路图像，所述第二道路图像的采集时间早于所述第一道路图像的采集时间，所述第一道路图像包括至少一个第一标识部件，所述第二道路图像包括至少一个第二标识部件，每个所述第一标识部件用于指示所述第一道路图像中所显示的地标标识，每个所述第二标识部件用于指示所述第二道路图像中所显示的地标标识；针对每个所述图像对，提取每个所述第一标识部件的特征向量，以及每个所述第二标识部件的特征向量；将每个所述第一标识部件的特征向量分别与每个所述第二标识部件的特征向量进行两两之间的相似距离计算，得到对应所述第一标识部件与所述第二标识部件之间的部件相似度；基于每个所述部件相似度确定对应所述图像对的图像匹配结果
。2.
根据权利要求1所述的方法，其特征在于，所述提取每个所述第一标识部件的特征向量，包括：基于预设特征提取模型提取所述第一道路图像的图像特征；基于至少一个预设候选检测框对所述第一道路图像的图像特征进行特征提取，得到每个所述第一标识部件的特征向量
。3.
根据权利要求1所述的方法，其特征在于，提取每个所述第二标识部件的特征向量，包括：基于预设特征提取模型提取所述第二道路图像的图像特征；基于至少一个预设候选检测框对所述第二道路图像的图像特征进行特征提取，得到每个所述第二标识部件的特征向量
。4.
根据权利要求1至3中任一项所述的方法，其特征在于，每个所述第一标识部件的特征向量包括对应所述第一标识部件的第一位置特征
、
第一旋转角度特征以及第一语义特征中的一个或多个，每个所述第二标识部件的特征向量包括对应所述第二标识部件的第二位置特征
、
第二旋转角度特征以及第二语义特征中的一个或多个；所述将每个所述第一标识部件的特征向量分别与每个所述第二标识部件的特征向量进行两两之间的相似距离计算，得到对应所述第一标识部件与所述第二标识部件之间的部件相似度，包括：计算第一子部件的所述第一位置特征与第二子部件的所述第二位置特征之间的第一相似距离，所述第一子部件为所述至少一个第一标识部件中的任意一个，所述第二子部件为所述至少一个第二标识部件中的任意一个；计算所述第一子部件的所述第一旋转角度特征与所述第二子部件的所述第二旋转角度特征之间的第二相似距离；计算所述第一子部件的所述第一语义特征与所述第二子部件的所述第二语义特征之间的第三相似距离；对所述第一相似距离
、
所述第二相似距离以及所述第三相似距离中的一个或多个进行加权求和处理，得到所述第一子部件与所述第二子部件之间的部件相似度
。5.
根据权利要求4所述的方法，其特征在于，所述计算第一子部件的所述第一位置特征
与第二子部件的所述第二位置特征之间的第一相似距离，包括：基于预设相似度算法对第一子部件的所述第一位置特征与第二子部件的所述第二位置特征进行计算，得到第一子部件的所述第一位置特征与第二子部件的所述第二位置特征之间的第一相似距离
。6.
根据权利要求4所述的方法，其特征在于，所述计算所述第一子部件的所述第一旋转角度特征与所述第二子部件的所述第二旋转角度特征之间的第二相似距离，包括：计算所述第一子部件中的所述第一旋转角度特征中各个元素与所述第二子部件中的所述第二旋转角度特征中相同元素位置上的元素之间的差值；计算每个所述差值的绝对值之和，得到所述第一子部件的所述第一旋转角度特征与所述第二子部件的所述第二旋转角度特征之间的第二相似距离
。7.
根据权利要求4所述的方法，其特征在于，所述计算所述第一子部件的所述第一语义特征与所述第二子部件的所述第二语义特征之间的第三相似距离，包括：对所述第一子部件的所述第一语义特征与所述第二子部件的所述第二语义特征进行向量內积计算，得到所述第一子部件的所述第一语义特征与所述第二子部件的所述第二语义特征之间的第三相似距离
。8.
根据权利要求1至3中任一...

【专利技术属性】
技术研发人员：娄英欣，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：