System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 用于食堂智能结算的用户鉴别方法及装置制造方法及图纸_技高网

用于食堂智能结算的用户鉴别方法及装置制造方法及图纸

技术编号:44302260 阅读:4 留言:0更新日期:2025-02-18 20:19
本发明专利技术涉及用于食堂智能结算的用户鉴别方法及装置,涉及身份鉴别技术领域,包括:接收待汇算生物测定数据时,从摄像感知节点接收视频数据流,从后台配置节点接收菜品分布数据流;进行单元分割,获得整体单元视频流、局部单元视频流和餐盘单元视频流;进行衣着一致性匹配,获得第一补偿整体单元视频流和衣着盲区局部单元视频流;进行运动一致性匹配,获得第二补偿整体单元视频流,通过上述数据进行身份鉴别,获得身份鉴别餐盘单元视频流后,从接收所述菜品分布数据流,与身份鉴别餐盘单元视频流、待汇算生物测定数据关联存储,构建身份鉴别文档,发送至客户端。解决了现有技术中由于人群的遮挡问题,导致存在餐盘的用户身份难以识别的技术问题。

【技术实现步骤摘要】

本专利技术涉及身份鉴别,尤其涉及用于食堂智能结算的用户鉴别方法及装置


技术介绍

1、食堂无人化结算平台可以实现无人化选菜和结算,目前实现方式有两种,其一是通过部署于结算终端的图像分析装置,对餐盘的食品进行识别进而执行账单的结算,缺点在于用户进行选菜时,可能会产生菜品混合的情况,导致图像识别的准确率较差。

2、其二是为了解决第一种方式存在的缺点,提出将图像采集装置部署于选菜区域分析选菜过程图像,跟随餐盘识别菜品从而执行账单的结算,但是由于人群遮挡问题无法分清餐盘和用户的关联性,导致餐盘的用户身份难以识别,因此几乎没有应用。


技术实现思路

1、本专利技术针对现有技术中由于人群的遮挡问题,导致存在餐盘的用户身份难以识别的技术问题,提供用于食堂智能结算的用户鉴别方法及装置来解决。

2、本专利技术解决上述技术问题的技术方案如下:

3、第一方面,本专利技术提供了用于食堂智能结算的用户鉴别方法,应用于食堂智能结算的用户鉴别装置,所述装置包括感知层、主体层和客户端,所述感知层包括摄像感知节点、后台配置节点,包括:从客户端接收待汇算生物测定数据时,通过感知层从摄像感知节点接收视频数据流,从后台配置节点接收菜品分布数据流;通过主体层的语义分割主网络从所述感知层接收所述视频数据流进行单元分割,获得整体单元视频流、局部单元视频流和餐盘单元视频流,其中,所述局部单元视频流表征同时具有餐盘单元、手臂单元、衣着单元和头部单元的至多两个单元类型为一体的视频流,所述整体单元视频流表征同时具有餐盘单元,以及手臂单元、衣着单元和头部单元的至少两个单元类型为一体的视频流;通过所述主体层的一级语义分割次网络从所述语义分割主网络接收所述局部单元视频流进行衣着一致性匹配,获得第一补偿整体单元视频流和衣着盲区局部单元视频流;通过所述主体层的二级语义分割次网络从所述语义分割主网络接收所述衣着盲区局部单元视频流进行运动一致性匹配,获得第二补偿整体单元视频流;通过所述主体层的身份鉴别网络从所述语义分割主网络、所述一级语义分割次网络、所述二级语义分割次网络接收所述整体单元视频流、所述第一补偿整体单元视频流和所述第二补偿整体单元视频流,从所述感知层接收所述待汇算生物测定数据对所述餐盘单元视频流进行身份鉴别,获得身份鉴别餐盘单元视频流后,从所述感知层接收所述菜品分布数据流,与所述身份鉴别餐盘单元视频流、所述待汇算生物测定数据关联存储,构建身份鉴别文档,发送至客户端。

4、第二方面,本专利技术提供了用于食堂智能结算的用户鉴别装置,包括感知层、主体层和客户端,所述感知层包括摄像感知节点、后台配置节点,包括:数据采集模块,用于从客户端接收待汇算生物测定数据时,通过感知层从摄像感知节点接收视频数据流,从后台配置节点接收菜品分布数据流;单元分割模块,用于通过主体层的语义分割主网络从所述感知层接收所述视频数据流进行单元分割,获得整体单元视频流、局部单元视频流和餐盘单元视频流,其中,所述局部单元视频流表征同时具有餐盘单元、手臂单元、衣着单元和头部单元的至多两个单元类型为一体的视频流,所述整体单元视频流表征同时具有餐盘单元,以及手臂单元、衣着单元和头部单元的至少两个单元类型为一体的视频流;衣着分割模块,用于通过所述主体层的一级语义分割次网络从所述语义分割主网络接收所述局部单元视频流进行衣着一致性匹配,获得第一补偿整体单元视频流和衣着盲区局部单元视频流;运动分割模块,用于通过所述主体层的二级语义分割次网络从所述语义分割主网络接收所述衣着盲区局部单元视频流进行运动一致性匹配,获得第二补偿整体单元视频流;身份鉴别模块,用于通过所述主体层的身份鉴别网络从所述语义分割主网络、所述一级语义分割次网络、所述二级语义分割次网络接收所述整体单元视频流、所述第一补偿整体单元视频流和所述第二补偿整体单元视频流,从所述感知层接收所述待汇算生物测定数据对所述餐盘单元视频流进行身份鉴别,获得身份鉴别餐盘单元视频流后,从所述感知层接收所述菜品分布数据流,与所述身份鉴别餐盘单元视频流、所述待汇算生物测定数据关联存储,构建身份鉴别文档,发送至客户端。

5、本专利技术的有益效果是:通过采集选菜过程中的视频流,并利用先进的语义分割技术,分割出整体人物、局部单元以及餐盘单元视频流,通过衣着一致性和运动一致性匹配,为每个餐盘匹配关联的身份信息,从而解决了传统无人化结算方式中用户身份难以识别的问题,达到了提高餐盘用户身份鉴别准确率的技术效果。

本文档来自技高网...

【技术保护点】

1.用于食堂智能结算的用户鉴别方法,其特征在于,应用于食堂智能结算的用户鉴别装置,所述装置包括感知层、主体层和客户端,所述感知层包括摄像感知节点、后台配置节点,包括:

2.如权利要求1所述的方法,其特征在于,所述感知层还包括重量感知节点,所述重量感知节点与菜品陈列腔体一一对应,部署于菜品陈列腔体底部,还包括:

3.如权利要求1所述的方法,其特征在于,通过主体层的语义分割主网络从所述感知层接收所述视频数据流进行单元分割,获得整体单元视频流、局部单元视频流和餐盘单元视频流,包括:

4.如权利要求3所述的方法,其特征在于,所述语义分割主网络构建步骤包括:

5.如权利要求1所述的方法,其特征在于,通过所述主体层的一级语义分割次网络从所述语义分割主网络接收所述局部单元视频流进行衣着一致性匹配,获得第一补偿整体单元视频流和衣着盲区局部单元视频流,包括:

6.如权利要求1所述的方法,其特征在于,通过所述主体层的二级语义分割次网络从所述语义分割主网络接收所述衣着盲区局部单元视频流进行运动一致性匹配,获得第二补偿整体单元视频流,包括:p>

7.如权利要求6所述的方法,其特征在于,当任意两组局部单元视频流轨迹相似度小于所述轨迹相似度阈值时,将同时具有餐盘单元,以及手臂单元、衣着单元和头部单元的至少两个单元类型为一体的视频流,添加进所述第二补偿整体单元视频流,还包括:

8.如权利要求7所述的方法,其特征在于,对每一个所述局部餐盘单元视频流进行轨迹单元层次聚类,直到同时具有餐盘单元,以及手臂单元、衣着单元和头部单元的至少两个单元类型为一体的视频流时停止,包括:

9.用于食堂智能结算的用户鉴别装置,其特征在于,包括感知层、主体层和客户端,所述感知层包括摄像感知节点、后台配置节点,包括:

...

【技术特征摘要】

1.用于食堂智能结算的用户鉴别方法,其特征在于,应用于食堂智能结算的用户鉴别装置,所述装置包括感知层、主体层和客户端,所述感知层包括摄像感知节点、后台配置节点,包括:

2.如权利要求1所述的方法,其特征在于,所述感知层还包括重量感知节点,所述重量感知节点与菜品陈列腔体一一对应,部署于菜品陈列腔体底部,还包括:

3.如权利要求1所述的方法,其特征在于,通过主体层的语义分割主网络从所述感知层接收所述视频数据流进行单元分割,获得整体单元视频流、局部单元视频流和餐盘单元视频流,包括:

4.如权利要求3所述的方法,其特征在于,所述语义分割主网络构建步骤包括:

5.如权利要求1所述的方法,其特征在于,通过所述主体层的一级语义分割次网络从所述语义分割主网络接收所述局部单元视频流进行衣着一致性匹配,获得第一补偿整体单元视频流和衣着盲区局部单元视频...

【专利技术属性】
技术研发人员:郭昌娟郭佳佳杜棪明王胤添唐勇
申请(专利权)人:国网思极飞天兰州云数科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1