一种视觉搜索方法、装置及设备制造方法及图纸

本发明专利技术实施例提供了一种视觉搜索方法、装置及设备，其中，该方法包括：获取多个待检索图像；针对各个待检索图像，提取待检索图像的全局特征信息；根据待检索图像的全局特征信息，计算待检索图像对应的复杂度指标；确定与复杂度指标匹配的码率；基于码率，提取待检索图像的图像特征，并保存图像特征，图像特征用于视觉搜索。通过本发明专利技术实施例提供的视觉搜索方法、装置及设备，能够降低对存储资源的浪费。

【技术实现步骤摘要】
一种视觉搜索方法、装置及设备
本专利技术涉及图像处理
，特别是涉及一种视觉搜索方法、装置及设备。
技术介绍
为了满足用户的需求，图像和视频的传输数量已经占据了网络带宽中的一大部分，根据统计，每年在网络上上传的图片高达数亿张，在这么庞大的数字下，隐藏了一个亟待解决的问题，如何在这么庞大的数据中找到用户最需要的视频或者图像。视觉搜索技术中通过提取多个待检索图像的特征，并保存待检索图像的特征，使得用户在需要检索时，通过查询图像的特征，与多个待检索图像特征进行匹配，进而从多个待检索图像中查找到与查询图像匹配的图像。可以看出，提取并保存多个待检索图像的特征是视搜索技术中的重要方面。目前的视觉搜索技术中，针对多个待检索图像提取相同码率的特征，进而保存各个待检索图像相同码率的特征。一种可能的情况下，如果待检索图像包含较少的信息，码率却比较大时，保存该待检索图像对应的码率比较大的特征，会占用过多的资源，造成存储资源的浪费。
技术实现思路
本专利技术实施例的目的在于提供一种视觉搜索方法、装置及设备，以降低对存储资源的浪费。具体技术方案如下：第一方面，本专利技术实施例提供了一种视觉搜索方法，包括：获取多个待检索图像；针对各个待检索图像，提取所述待检索图像的全局特征信息；根据所述待检索图像的全局特征信息，计算所述待检索图像对应的复杂度指标；确定与所述复杂度指标匹配的码率；基于所述码率，提取所述待检索图像的图像特征，并保存所述图像特征，所述图像特征用于视觉搜索。可选的，所述提取所述待检索图像的全局特征信息，包括：通过Fisher向量，提取所述待检索图像的全局特征向量。可选的，所述根据所述待检索图像的全局特征信息，计算所述待检索图像对应的复杂度指标，包括：根据所述待检索图像的全局特征信息，计算所述待检索图像的类内距离；根据所述待检索图像的全局特征信息，计算所述待检索图像的类间距离；将所述类内距离与所述类间距离的比值，作为所述待检索图像对应的复杂度指标。可选的，所述根据所述待检索图像的全局特征信息，计算所述待检索图像的类内距离，包括：确定类内其他待检索图像的全局特征信息，其中，所述类内其他待检索图像包括所述待检索图像位于的图像类别中的所有图像中、除所述待检索图像之外的图像；根据所述待检索图像的全局特征信息和所述类内其他待检索图像的全局特征信息，计算所述待检索图像位于的图像类别中所有图像的质心位置信息；计算所述待检索图像的全局特征信息与所述质心位置信息的第一距离，并将所述第一距离作为所述待检索图像的类内距离；或者，分别计算所述待检索图像的全局特征信息与所述类内其他待检索图像的全局特征信息之间的第二距离；并将各个所述第二距离之和作为所述待检索图像的类内距离。可选的，所述根据所述待检索图像的全局特征信息，计算所述待检索图像的类间距离，包括：确定类间其他待检索图像的全局特征信息，其中，所述类间其他待检索图像包括所述多个待检索图像中、不存在于所述待检索图像位于的图像类别中的图像；分别计算所述待检索图像的全局特征信息与所述类间其他待检索图像的全局特征信息之间的第三距离，并将各个第三距离之和作为所述待检索图像的类间距离。可选的，所述确定与所述复杂度指标匹配的码率，包括：确定所述复杂度指标对应的、所述待检索图像的图像排序位置信息；确定与所述图像排序位置信息对应的码率。可选的，所述确定所述复杂度指标对应的、所述待检索图像的图像排序位置信息，包括：根据所述多个待检索图像中各个待检索图像分别对应的复杂度指标，对所述多个待检索图像进行排序；根据排序的结果，确定所述待检索图像的图像排序位置信息。可选的，所述图像特征包括尺度不变性局部特征SIFT特征。第二方面，本专利技术实施例提供了一种视觉搜索装置，包括：获取模块，用于获取多个待检索图像；第一提取模块，用于针对各个待检索图像，提取所述待检索图像的全局特征信息；计算模块，用于根据所述待检索图像的全局特征信息，计算所述待检索图像对应的复杂度指标；确定模块，用于确定与所述复杂度指标匹配的码率；第二提取模块，用于基于所述码率，提取所述待检索图像的图像特征，所述图像特征用于视觉搜索；保存模块，用于保存所述图像特征。第三方面，本专利技术实施例提供了一种视觉搜索设备，包括处理器、通信接口、存储器和通信总线，其中，所述处理器，所述通信接口，所述存储器通过所述通信总线完成相互间的通信；所述存储器，用于存放计算机程序；所述处理器，用于执行所述存储器上所存放的程序时，实现第一方面的方法步骤。本专利技术实施例提供的视觉搜索方法、装置及设备，可以获取多个待检索图像；针对各个待检索图像，提取待检索图像的全局特征信息；根据待检索图像的全局特征信息，计算待检索图像对应的复杂度指标；确定与复杂度指标匹配的码率；基于码率，提取待检索图像的图像特征，并保存图像特征，图像特征用于视觉搜索。本专利技术实施例中，针对各个待检索图像，计算待检索图像对应的复杂度指标，并确定与复杂度指标匹配的码率，如此，实现自适应地确定与复杂度指标匹配的码率，能够降低保存待检索图像的图像特征过程中，对存储资源的浪费。且能够在该图像特征用于视觉搜索过程中时，保证检索的准确度。当然，实施本专利技术的任一产品或方法必不一定需要同时达到以上所述的所有优点。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术实施例提供的视觉搜索方法的流程图；图2(a)为本专利技术实施例中多个待检索图像关系的一种示意图；图2(b)为本专利技术实施例中多个待检索图像关系的另一种示意图；图3为本专利技术实施例中不同类别图像关系的示意图；图4(a)为本专利技术实施例中计算待检索图像类内距离的一种示意图；图4(b)为本专利技术实施例中计算待检索图像类内距离的另一种示意图；图5为本专利技术实施例提供的视觉搜索装置的结构示意图；图6为本专利技术实施例提供的视觉搜索设备的结构示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。移动互联网的这股热潮目前已持续了很久。智能手机的使用数量已经超过了桌面电脑的使用，智能手机的发展速度已经成为历史上从来没有出现过的增长现象，这一现象体现出随着时代的发展，科技的进步，越来越多的用户希望能够在移动的过程中也能高速的接入互联网，获取到自己想要的信息。而随着信息形式的丰富，图像和视频的传输数量已经占据了网络带宽中的一大部分，根据统计，每年在网络上上传的图片高达数亿张，在这么庞大的数字下，隐藏了一个亟待解决的问题，如何在这么庞大的数据中找到用户最需要的视频或者图像。在这一背景下，移动视觉搜索技术也将变为未来人类生活中必不可少的技术之一。为了在检索之前提取特征，传统的视觉搜索技术必须花费大量的计算。此外，频繁地发送整个图像在3G或4G网络上可能会导致严重的功耗。即使是在局部设备上的搜本文档来自技高网...

【技术保护点】
1.一种视觉搜索方法，其特征在于，包括：获取多个待检索图像；针对各个待检索图像，提取所述待检索图像的全局特征信息；根据所述待检索图像的全局特征信息，计算所述待检索图像对应的复杂度指标；确定与所述复杂度指标匹配的码率；基于所述码率，提取所述待检索图像的图像特征，并保存所述图像特征，所述图像特征用于视觉搜索。

【技术特征摘要】
1.一种视觉搜索方法，其特征在于，包括：获取多个待检索图像；针对各个待检索图像，提取所述待检索图像的全局特征信息；根据所述待检索图像的全局特征信息，计算所述待检索图像对应的复杂度指标；确定与所述复杂度指标匹配的码率；基于所述码率，提取所述待检索图像的图像特征，并保存所述图像特征，所述图像特征用于视觉搜索。2.根据权利要求1所述的方法，其特征在于，所述提取所述待检索图像的全局特征信息，包括：通过Fisher向量，提取所述待检索图像的全局特征向量。3.根据权利要求1所述的方法，其特征在于，所述根据所述待检索图像的全局特征信息，计算所述待检索图像对应的复杂度指标，包括：根据所述待检索图像的全局特征信息，计算所述待检索图像的类内距离；根据所述待检索图像的全局特征信息，计算所述待检索图像的类间距离；将所述类内距离与所述类间距离的比值，作为所述待检索图像对应的复杂度指标。4.根据权利要求3所述的方法，其特征在于，所述根据所述待检索图像的全局特征信息，计算所述待检索图像的类内距离，包括：确定类内其他待检索图像的全局特征信息，其中，所述类内其他待检索图像包括所述待检索图像位于的图像类别中的所有图像中、除所述待检索图像之外的图像；根据所述待检索图像的全局特征信息和所述类内其他待检索图像的全局特征信息，计算所述待检索图像位于的图像类别中所有图像的质心位置信息；计算所述待检索图像的全局特征信息与所述质心位置信息的第一距离，并将所述第一距离作为所述待检索图像的类内距离；或者，分别计算所述待检索图像的全局特征信息与所述类内其他待检索图像的全局特征信息之间的第二距离；并将各个所述第二距离之和作为所述待检索图像的类内距离。5.根据权利要求3所述的方法，其特征在于，所述根据所述待检索图像的全局特征信息，计算所述待...

【专利技术属性】
技术研发人员：祝闯，董慧慧，刘军，齐勇刚，刘芳，
申请(专利权)人：北京邮电大学，
类型：发明
国别省市：北京,11