一种货架商品陈列信息识别方法、装置、设备及存储介质制造方法及图纸

本发明专利技术公开了一种货架商品陈列信息识别方法、装置、设备及存储介质，其中，识别方法包括：从目标图像中提取货架商品的角度信息，基于所述货架商品的角度信息对所述目标图像进行校正，得到校正图像；根据所述校正图像进行货架商品信息识别，得到所述目标图像中的商品陈列信息。上述方法通过对目标图像进行校正得到了标准角度下的校正图像，可避免不同货架姿态对商品陈列识别准确率的影响；同时根据校正图像实现对图像商品陈列信息的精确识别，可为后续智能铺货陈列推荐提供准确的数据基础。后续智能铺货陈列推荐提供准确的数据基础。后续智能铺货陈列推荐提供准确的数据基础。

【技术实现步骤摘要】
一种货架商品陈列信息识别方法、装置、设备及存储介质


[0001]本专利技术涉及图像处理
，特别是涉及一种货架商品陈列信息识别方法、装置、设备及存储介质。

技术介绍

[0002]对于线下门店而言，货架商品陈列是线下门店的营销核心之一，商品的陈列情况对于销售情况的好坏有非常直接的影响。目前主要通过业务员或销售代表实地获取线下门店真实陈列场景数据，以帮助企业了解真实的商品陈列信息及渠道覆盖情况。
[0003]当前，业务员通常利用手机端App拍照采集货架商品陈列图片，并传输到系统后台，由系统后台完成商品陈列识别分析。然而，由于不同的业务员所采集的货架商品陈列图片姿态各异，使得系统在复杂场景下识别得到的商品陈列场景数据精度低，数据实用性也较差。因此，如何实现对任意姿态货架条件下的商品陈列精准识别，是当前急需解决的问题。

技术实现思路

[0004]为了解决上述技术问题，本专利技术提供一种货架商品陈列信息识别方法、装置、设备及存储介质，能够实现对任意姿态货架条件下的商品陈列精准识别，为智能铺货陈列推荐提供更准确的数据基础。
[0005]第一方面，本专利技术提供一种货架商品陈列信息识别方法，包括：从目标图像中提取货架商品的角度信息，基于所述货架商品的角度信息对所述目标图像进行校正，得到校正图像；根据所述校正图像中的货架商品布置数据对所述校正图像进行竖直方向遍历，划分商品层级；对各所述商品层级中的商品进行水平方向遍历，确定各商品之间的近邻关系；基于所述商品层级以及各所述商品之间的近邻关系，得到所述目标图像中的商品陈列信息。
[0006]在一种可能的实现方式中，所述从目标图像中提取货架商品的角度信息，具体为：通过预先构建的图像识别模型获取目标图像的标签，所述标签包括货架方向信息和货架倾斜信息；根据所述标签确定所述目标图像的角度信息。
[0007]在一种可能的实现方式中，所述图像识别模型具体为多任务深度学习分类网络模型。
[0008]在一种可能的实现方式中，所述根据所述校正图像中的货架商品布置数据对所述校正图像进行竖直方向遍历，划分商品层级，具体为：确定所述校正图像中各货架商品的坐标；基于各所述货架商品的坐标与主方向直线簇中最接近的主方向直线之间的位置
关系，划分商品层级；其中，所述主方向直线簇通过对所述校正图像进行直线检测得到。
[0009]在一种可能的实现方式中，所述主方向直线通过对所述校正图像进行直线检测得到，具体为：分别通过直线检测算法和消失点检测算法获取所述校正图像中的直线集和消失点集；根据所述校正图像中的货架商品的角度信息确定所述消失点集中的主方向消失点；获取所述直线集中各直线到所述主方向消失点的夹角，根据各所述夹角与阈值的关系筛选出所述直线集中的目标直线簇；对所述目标直线簇进行聚类，并根据聚类结果对所述目标直线簇进行融合处理，得到主方向直线簇。
[0010]第二方面，本专利技术提供一种货架商品陈列信息识别装置，包括：校正模块，用于从目标图像中提取货架商品的角度信息，基于所述货架商品的角度信息对所述目标图像进行校正，得到校正图像；识别模块，用于根据所述校正图像中的货架商品布置数据对所述校正图像进行竖直方向遍历，划分商品层级；对各所述商品层级中的商品进行水平方向遍历，确定各商品之间的近邻关系；基于所述商品层级以及各所述商品之间的近邻关系，得到所述目标图像中的商品陈列信息。
[0011]在一种可能的实现方式中，所述根据所述校正图像中的货架商品布置数据对所述校正图像进行竖直方向遍历，划分商品层级，具体为：对所述校正图像中的货架商品进行竖直方向遍历，划分商品层级；对各所述商品层级中的商品进行水平方向遍历，确定各商品之间的近邻关系；基于所述商品层级以及各所述商品之间的近邻关系，得到所述目标图像中的商品陈列信息。
[0012]第三方面，本专利技术提供一种数据处理设备，包括处理器，所述处理器和存储器耦合，所述存储器存储有程序，所述程序由所述处理器执行，使得所述数据处理设备执行第一方面所述的货架商品陈列信息识别方法。
[0013]第四方面，本专利技术还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，实现如上述第一方面所述的货架商品陈列信息识别方法。
[0014]相比现有技术，本专利技术的有益效果在于：本专利技术提供的货架商品陈列信息识别方法通过对目标图像进行校正得到了标准角度下的校正图像，从而避免了不同货架姿态对商品陈列识别准确率的影响；同时根据校正图像中实现对图像商品陈列信息的精确识别，能够为后续智能铺货陈列推荐提供准确的数据基础。
附图说明
[0015]为了更清楚地说明本专利技术的技术方案，下面将对实施方式中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0016]图1是本专利技术实施例提供的货架商品陈列信息识别方法的流程示意图；图2是本专利技术实施例提供的货架商品陈列信息识别装置的结构示意图。
具体实施方式
[0017]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0018]图1示出根据本专利技术一实施例的货架商品陈列信息识别方法的流程图。该货架商品陈列信息识别方法的执行主体可以是货架商品陈列信息识别装置。例如，该货架商品陈列信息识别方法可以由终端设备(例如门店的PC（Personal Computer，个人计算机）)或服务器（例如后台系统）或其它处理设备执行，其中，终端设备可以是用户设备（User Equipment，UE）、移动设备、用户终端、终端、蜂窝电话、无绳电话、个人数字助理（Personal Digital Assistant，PDA）、手持设备、计算设备、车载设备或者可穿戴设备等。
[0019]在一些可能的实现方式中，该货架商品陈列信息识别方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
[0020]如图1所示，第一方面，所述货架商品陈列信息识别方法包括下述步骤S1至S2。
[0021]S1：从目标图像中提取货架商品的角度信息，基于所述货架商品的角度信息对所述目标图像进行校正，得到校正图像。
[0022]可以理解的是，线下门店可以包括一个或多个货架，每个货架可以包括一个或多个层板，层板可以表示货架上用于承载商品的板，每个货架可以包括一个或多个商品陈列区域。
[0023]在本实施例中，目标图像具体为各线下门店货架上的商品陈列初始图像，由业务人员现场拍摄后通过业务侧进行提交，因此，不同商品陈列初始图像中的货架商品类型及陈列姿态不尽相同，通过对目标图像的角度进行校正，可得到标准、统一拍摄角度的校正图像，便于进行更准本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种货架商品陈列信息识别方法，其特征在于，包括：从目标图像中提取货架商品的角度信息，基于所述货架商品的角度信息对所述目标图像进行校正，得到校正图像；根据所述校正图像中的货架商品布置数据对所述校正图像进行竖直方向遍历，划分商品层级；对各所述商品层级中的商品进行水平方向遍历，确定各商品之间的近邻关系；基于所述商品层级以及各所述商品之间的近邻关系，得到所述目标图像中的商品陈列信息。2.根据权利要求1所述的货架商品陈列信息识别方法，其特征在于，所述从目标图像中提取货架商品的角度信息，具体为：通过预先构建的图像识别模型获取目标图像的标签，所述标签包括货架方向信息和货架倾斜信息；根据所述标签确定所述目标图像的角度信息。3.根据权利要求2所述的货架商品陈列信息识别方法，其特征在于，所述图像识别模型具体为多任务深度学习分类网络模型。4.根据权利要求1所述的货架商品陈列信息识别方法，其特征在于，所述根据所述校正图像中的货架商品布置数据对所述校正图像进行竖直方向遍历，划分商品层级，具体为：获取所述校正图像中各货架商品的坐标；基于各所述货架商品的坐标与主方向直线簇中最接近的主方向直线之间的位置关系，划分商品层级；其中，所述主方向直线簇通过对所述校正图像进行直线检测得到。5.根据权利要求4所述的货架商品陈列信息识别方法，其特征在于，所述主方向直线通过对所述校正图像进行直线检测得到，具体为：分别通过直线检测算法和消失点检测算法获取所述校正图像中的直线集和消失点集；根据所述校正图像中的货架商品的角度信息确定所述消失点集中的主方向消...

【专利技术属性】
技术研发人员：王杰，丁明，
申请(专利权)人：广州市玄武无线科技股份有限公司，
类型：发明
国别省市：