一种图像截取方法及食材存储设备技术

本发明专利技术公开了一种图像截取方法及食材存储设备，用以截取图像中包含目标物体的区域，以增加食材识别的速度和准确度。包括机壳，机壳包括储藏室和门体；图像采集器，被配置为采集拍摄的所述储藏室前方第一预设空间范围的参考图像；处理器，被配置为：若用户手部位置满足预设截取条件，则基于所述参考图像中用户手部位置进行区域截取，得到初始截取区域；识别所述初始截取区域中目标物体和用户手部的总轮廓，检测用户手部信息并根据检测的用户手部信息的结果剔除所述总轮廓中用户手部轮廓；根据得到的目标物体轮廓确定最终截取区域，并根据最终截取区域识别目标物体。据最终截取区域识别目标物体。据最终截取区域识别目标物体。

【技术实现步骤摘要】
一种图像截取方法及食材存储设备


[0001]本专利技术涉及图像识别
，具体涉及一种图像截取方法及食材存储设备。

技术介绍

[0002]现有的智能冰箱不仅能够提供食材的存储功能，还能够对用户存取的食材进行识别管理。视觉类识别方法由于无感交互的特点，成为最受欢迎的一种识别方式。
[0003]从现有视觉技术来看，图像分类、图像检测、图像检索、图像相似度计算等成为主流的几种具有图像识别能力的算法。图像检索、图像相似度检测等算法用于种类识别时，往往直接提取输入图像的特征。因此，该类算法的应用场景，要求目标在整幅图像中所占的比例尽可能大，这样便可以减少更多的背景干扰，表征更多的目标特征。
[0004]但是在智能冰箱场景下，使用图像检索、相似度检测等算法识别食材种类时，摄像头往往安装在冰箱顶部或门体上，实际的视野范围较大，充斥着大量的背景干扰区域，导致食材识别的速率慢、准确率低。

技术实现思路

[0005]本专利技术提供一种图像截取方法及食材存储设备，用以截取图像中包含目标物体的区域，以增加食材识别的速度和准确度。
[0006]根据示例性的实施方式中的第一方面，提供一种食材存储设备，包括：
[0007]机壳，所述机壳包括储藏室和门体；其中，所述储藏室具有开口，所述门体与所述机壳活动连接，且所述门体用于遮挡所述开口；
[0008]图像采集器，被配置为采集拍摄的所述储藏室前方第一预设空间范围的参考图像；
[0009]处理器，被配置为：
[0010]若用户手部位置满足预设截取条件，则基于所述参考图像中用户手部位置进行区域截取，得到初始截取区域；
[0011]识别所述初始截取区域中目标物体和用户手部的总轮廓，检测用户手部信息并根据检测的用户手部信息的结果剔除所述总轮廓中用户手部轮廓；
[0012]根据得到的目标物体轮廓确定最终截取区域，并根据最终截取区域识别目标物体。
[0013]上述实施例中，可以根据用户手部位置确定采集的图像中需要进行截取的图像，并基于用户手部位置进行初步截取得到初始截取区域，后根据目标图像和用户手部的轮廓，及检测到的用户手部信息剔除用户手部轮廓，得到包括目标物体的最终截取区域，在最终截取区域中，由于目标物体占用的面积较大，因此可以提取更多的目标物体的特征，在识别目标物体时准确率高，速度快。
[0014]在一些示例性的实施方式中，所述处理器，被配置为：
[0015]检测用户手部中心点位置；
[0016]若用户手部中心点位于第二预设空间范围内，则用户手部位置满足预设截取条件；
[0017]根据所述参考图像的大小以及预设比例确定初始截取区域的大小。
[0018]上述实施例中，限定了通过用户手部中心点位置是否处于第二预设空间范围内确定参考图像是否需要进行截取，并限定了如何确定初始截取区域的大小，以获得较小的初始截取区域。
[0019]在一些示例性的实施方式中，所述处理器，被配置为：
[0020]根据用户手部的像素点数量和所述参考图像的像素点数量确定所述预设比例；或者
[0021]根据用户手部的大小及所述参考图像的大小确定所述预设比例。
[0022]上述实施例中，限定了确定初始截取区域大小的预设比例的确定方式，其中，以确定如何截取初始区域。
[0023]在一些示例性的实施方式中，所述设备还包括：
[0024]深度摄像装置，被配置为采集拍摄的所述储藏室前方第三预设空间范围的深度图像；
[0025]所述处理器，被配置为基于深度图像检测算法，确定所述深度图像中用户手部位置，并根据预设的所述深度图像和参考图像的位置映射关系确定所述参考图像中用户手部位置。
[0026]上述实施例中，通过深度摄像装置采集深度图像，并根据深度图像确定用户手部位置，这样可以根据得到的用户手部位置确定是否进行截取及截取区域。
[0027]在一些示例性的实施方式中，所述处理器，被配置为：
[0028]根据所述初始截取区域的位置，截取预设背景参考图像中对应的背景区域；
[0029]将所述初始截取区域与所述背景区域进行差分处理，基于差分结果分割出初始截取区域中目标物体和用户手部的总轮廓。
[0030]上述实施例中，限定了确定目标物体和用户手部的总轮廓的方式，可以减少背景区域的影响，获得更小的包括目标物体的最终截取区域。
[0031]根据示例性的实施方式中的第二方面，提供一种图像截取方法，包括：
[0032]采集拍摄的所述储藏室前方第一预设空间范围的参考图像；
[0033]若用户手部位置满足预设截取条件，则基于所述参考图像中用户手部位置进行区域截取，得到初始截取区域；
[0034]识别所述初始截取区域中目标物体和用户手部的总轮廓，检测用户手部信息并根据检测的用户手部信息的结果剔除所述总轮廓中用户手部轮廓；
[0035]根据得到的目标物体轮廓确定最终截取区域，并根据最终截取区域识别目标物体。
[0036]在一些示例性的实施方式中，若用户手部位置满足预设截取条件，则基于所述参考图像中用户手部位置进行区域截取，得到初始截取区域，包括：
[0037]检测用户手部中心点位置；
[0038]若用户手部中心点位于第二预设空间范围内，则用户手部位置满足预设截取条件；
[0039]根据所述参考图像的大小以及预设比例确定初始截取区域的大小。
[0040]在一些示例性的实施方式中，根据以下方式确定所述预设比例，包括：
[0041]根据用户手部的像素点数量和所述参考图像的像素点数量确定所述预设比例；或者
[0042]根据用户手部的大小及所述参考图像的大小确定所述预设比例。
[0043]在一些示例性的实施方式中，包括：
[0044]采集拍摄的所述储藏室前方第三预设空间范围的深度图像；
[0045]基于深度图像检测算法，确定所述深度图像中用户手部位置，并根据预设的所述深度图像和参考图像的位置映射关系确定所述参考图像中用户手部位置。
[0046]在一些示例性的实施方式中，识别所述初始截取区域中目标物体和用户手部的总轮廓，包括：
[0047]根据所述初始截取区域的位置，截取预设背景参考图像中对应的背景区域；
[0048]将所述初始截取区域与所述背景区域进行差分处理，基于差分结果分割出初始截取区域中目标物体和用户手部的总轮廓。
[0049]根据示例性的实施方式中的第三方面，提供一种图像截取装置，所述图像截取装置被配置为执行如上述第二方面所述的图像截取的方法。
[0050]根据示例性的实施方式中的第四方面，提供一种计算机存储介质，所述计算机存储介质中存储有计算机程序指令，当所述指令在计算机上运行时，使得所述计算机执行如上述第二方面所述的图像截取的方法。
[0051]在符合本领域常识的基础上，上述各优选条件，可任意组合，即得本申请各较佳实施例。<本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种食材存储设备，其特征在于，包括：机壳，所述机壳包括储藏室和门体；其中，所述储藏室具有开口，所述门体与所述机壳活动连接，且所述门体用于遮挡所述开口；图像采集器，被配置为采集拍摄的所述储藏室前方第一预设空间范围的参考图像；处理器，被配置为：若用户手部位置满足预设截取条件，则基于所述参考图像中用户手部位置进行区域截取，得到初始截取区域；识别所述初始截取区域中目标物体和用户手部的总轮廓，检测用户手部信息并根据检测的用户手部信息的结果剔除所述总轮廓中用户手部轮廓；根据得到的目标物体轮廓确定最终截取区域，并根据最终截取区域识别目标物体。2.根据权利要求1所述的设备，其特征在于，所述处理器，被配置为：检测用户手部中心点位置；若用户手部中心点位于第二预设空间范围内，则用户手部位置满足预设截取条件；根据所述参考图像的大小以及预设比例确定初始截取区域的大小。3.根据权利要求2所述的设备，其特征在于，所述处理器，被配置为：根据用户手部的像素点数量和所述参考图像的像素点数量确定所述预设比例；或者根据用户手部的大小及所述参考图像的大小确定所述预设比例。4.根据权利要求1～3任一所述的设备，其特征在于，所述设备还包括：深度摄像装置，被配置为采集拍摄的所述储藏室前方第三预设空间范围的深度图像；所述处理器，被配置为基于深度图像检测算法，确定所述深度图像中用户手部位置，并根据预设的所述深度图像和参考图像的位置映射关系确定所述参考图像中用户手部位置。5.根据权利要求1～3任一所述的设备，其特征在于，所述处理器，被配置为：根据所述初始截取区域的位置，截取预设背景参考图像中对应的背景区域；将所述初始截取区域与所述背景区域进行差分处理，基于差分结果分割出初始截取区域中目标...

【专利技术属性】
技术研发人员：李正义，曲磊，赵启东，高雪松，陈维强，谢飞学，
申请(专利权)人：青岛海信电子产业控股股份有限公司，
类型：发明
国别省市：