System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 婴幼儿就餐行为智能识别方法、装置、设备及存储介质制造方法及图纸_技高网

婴幼儿就餐行为智能识别方法、装置、设备及存储介质制造方法及图纸

技术编号:42589875 阅读:4 留言:0更新日期:2024-09-03 18:05
本发明专利技术涉及智能看护技术领域,解决了现有技术中无法智能化地准确识别婴幼儿就餐行为的问题,提供了一种婴幼儿就餐行为智能识别方法、装置、设备及存储介质。该方法包括:依据帧差法,对婴幼儿看护场景下的多帧第一图像进行处理,获取前景运动区域中的前景点坐标信息;将所述第一图像输入预训练的餐椅检测模型中,输出餐椅位置信息;计算所有前景点的均值坐标信息,依据所述餐椅位置信息和均值坐标信息,得出前景运动区域和餐椅之间的第一相对位置信息;当判断前景运动区域中心在餐椅中心正上方时,将所述第一图像输入所述婴幼儿检测模型中进行检测;当检测到婴幼儿坐在餐椅上时,识别为婴幼儿就餐行为。本发明专利技术提高了婴幼儿就餐行为的识别准确度。

【技术实现步骤摘要】

本专利技术涉及智能看护,尤其涉及一种婴幼儿就餐行为智能识别方法、装置、设备及存储介质


技术介绍

1、识别婴幼儿的就餐行为对于保证他们的营养健康、监测成长发展以及早期干预潜在问题至关重要。婴幼儿时期是生长发育的关键时期,合理的营养摄入直接影响他们的身体和认知发展。通过观察婴幼儿的就餐行为,如食物的接受度、咀嚼和吞咽能力、对新食物的反应等,家长和保健专业人员可以及时了解婴幼儿的营养状态和进食技能,及时调整食谱,确保营养均衡,并能早期发现可能的发育迟缓、食物过敏或其他健康问题。此外,良好的就餐行为习惯的培养也有助于预防儿童期的肥胖等健康问题,对儿童的长期健康和福祉具有深远的影响。因此,认真关注并科学分析婴幼儿的就餐行为,是每位家长和儿童保健工作者不可忽视的重要职责。

2、现有中国专利cn115812224a公开了一种用于在瓶子喂食期间提供帮助的系统和方法,所述方法包括:识别所述视频图像内的婴儿;确定所述婴儿的定向;识别所述视频图像内的瓶子;确定所述瓶子的定向;确定所述瓶子和/或婴儿为了达到期望的瓶子定向所需的重新定向;以及控制所述显示设备以输出叠加在所述视频图像之上的重新定向指令,以帮助所述受试者重新定向所述瓶子和/或所述婴儿,以实现期望的瓶子和/或婴儿定向。该图像处理器执行图像分析以在婴儿的瓶子喂食期间向受试者(例如婴儿的母亲或其他看护者)提供实时帮助。上述专利虽然利用视频图像技术来识别婴儿和瓶子的位置及其定向,并提供重新定向指令,但它主要集中于物体的空间位置和方向,而不是深入分析婴幼儿的具体就餐行为,因此,该技术在提供一般性帮助的同时,可能无法准确识别和解析婴幼儿更为复杂和微妙的就餐行为细节。

3、为此,如何智能化地准确识别婴幼儿就餐行为是亟待解决的问题。


技术实现思路

1、有鉴于此,本专利技术提供了一种婴幼儿就餐行为智能识别方法、装置、设备及存储介质,用以解决现有技术中无法智能化地准确识别婴幼儿就餐行为的问题。

2、本专利技术采用的技术方案是:

3、第一方面,本专利技术提供了一种婴幼儿就餐行为智能识别方法,所述方法包括:

4、获取婴幼儿看护场景下的多帧第一图像;

5、依据帧差法,对各所述第一图像进行处理,获取前景运动区域中的前景点坐标信息;

6、将所述第一图像输入预训练的餐椅检测模型中,输出餐椅位置信息;

7、计算所有前景点的均值坐标信息,依据所述餐椅位置信息和均值坐标信息,得出前景运动区域和餐椅之间的第一相对位置信息;

8、依据所述第一相对位置信息,当判断前景运动区域中心在餐椅中心正上方时,将所述第一图像输入所述婴幼儿检测模型中进行检测;

9、当通过所述婴幼儿检测模型检测到婴幼儿坐在餐椅上时,识别为婴幼儿就餐行为。

10、优选地,所述获取婴幼儿看护场景下的多帧第一图像包括:

11、获取婴幼儿看护场景下的实时视频流,将所述实时视频流压缩为第一分辨率的子码流视频和第二分辨率的主码流视频;

12、对所述子码流视频进行分解,得出多帧所述第一图像。

13、优选地,在所述当通过婴幼儿检测模型检测到婴幼儿坐在餐椅上时,识别为婴幼儿就餐行为之后还包括:

14、对所述婴幼儿就餐图像进行肤色纹理分析和目标检测,将分析后的图像输入预训练的手部分类模型,获取包含母亲手部和预设物品的目标图像,其中,所述预设物品包括:奶瓶和奶盒;

15、当目标图像中母亲手部向婴幼儿靠近且所述预设物品向婴幼儿靠近时,将所述目标图像作为存在母婴喂食行为的第二图像输出。

16、优选地,在所述当目标图像中母亲手部向婴幼儿靠近且所述预设物品向婴幼儿靠近时,将目标图像作为存在母婴喂食行为的第二图像输出之后还包括:

17、获取主码流视频中与第二图像位置对应的第三图像;

18、将所述第三图像与前后预设帧图像合成,剪辑出存在母婴喂食行为的目标视频集锦。

19、优选地,所述对婴幼儿就餐图像进行肤色纹理分析和目标检测,将分析后的图像输入预训练的手部分类模型,获取包含母亲手部和预设物品的目标图像包括:

20、将所述婴幼儿就餐图像输入预训练的手部检测模型中,输出手部图像;

21、将所述手部图像输入预训练的肤色纹理检测模型中,获取肤色纹理特征信息;

22、将提取出所述肤色纹理特征信息后的手部图像输入所述手部分类模型中,输出所述目标图像。

23、优选地,所述当目标图像中母亲手部向婴幼儿靠近且所述预设物品向婴幼儿靠近时,将所述目标图像作为所述第二图像输出包括:

24、将所述目标图像输入预训练的目标检测模型中,获得婴幼儿位置信息和母亲手部位置信息;

25、依据所述婴幼儿位置信息和母亲手部位置信息,得出母亲手部和婴幼儿之间的第二相对位置信息;

26、依据连续多帧所述目标图像对应的所述第二相对位置信息,当检测到目标图像中母亲手部向婴幼儿靠近时,输出所述第二图像。

27、优选地,所述获取主码流视频中与第二图像位置对应的第三图像包括:

28、获取所述第二图像上的帧号;

29、将主码流视频中的图像按照所述第二图像上的帧号进行顺序编码,输出所述第三图像。

30、第二方面,本专利技术提供了一种婴幼儿就餐行为智能识别装置,其特征在于,所述装置包括:

31、第一图像获取模块,用于获取婴幼儿看护场景下的多帧第一图像;

32、前景位置确定模块,用于依据帧差法,对各所述第一图像进行处理,获取前景运动区域中的前景点坐标信息;

33、餐椅位置确定模块,用于将所述第一图像输入预训练的餐椅检测模型中,输出餐椅位置信息;

34、相对位置信息确定模块,用于计算所有前景点的均值坐标信息,依据所述餐椅位置信息和均值坐标信息,得出前景运动区域和餐椅之间的第一相对位置信息;

35、区域判断模块,用于依据所述第一相对位置信息,当判断前景运动区域中心在餐椅中心正上方时,将所述第一图像输入所述婴幼儿检测模型中进行检测;

36、就餐行为识别模块,用于当通过所述婴幼儿检测模型检测到婴幼儿坐在餐椅上时,识别为婴幼儿就餐行为。

37、第三方面,本专利技术实施例还提供了一种电子设备,包括:至少一个处理器、至少一个存储器以及存储在存储器中的计算机程序指令,当计算机程序指令被处理器执行时实现如上述实施方式中第一方面的方法。

38、第四方面,本专利技术实施例还提供了一种存储介质,其上存储有计算机程序指令,当计算机程序指令被处理器执行时实现如上述实施方式中第一方面的方法。

39、综上所述,本专利技术的有益效果如下:

40、本专利技术提供的婴幼儿就餐行为智能识别方法、装置、设备及存储介质,所述方法包括:获取婴幼儿看护场景下的多帧第一图像;依据帧差法,对各所述第一图像进行处理,获取前景运动区域中的前景点坐本文档来自技高网...

【技术保护点】

1.一种婴幼儿就餐行为智能识别方法,其特征在于,所述方法包括:

2.根据权利要求1所述的婴幼儿就餐行为智能识别方法,其特征在于,所述获取婴幼儿看护场景下的多帧第一图像包括:

3.根据权利要求2所述的婴幼儿就餐行为智能识别方法,其特征在于,在所述当通过婴幼儿检测模型检测到婴幼儿坐在餐椅上时,识别为婴幼儿就餐行为之后还包括:

4.根据权利要求3所述的婴幼儿就餐行为智能识别方法,其特征在于,在所述当目标图像中母亲手部向婴幼儿靠近且所述预设物品向婴幼儿靠近时,将目标图像作为存在母婴喂食行为的第二图像输出之后还包括:

5.根据权利要求3所述的婴幼儿就餐行为智能识别方法,其特征在于,所述对婴幼儿就餐图像进行肤色纹理分析和目标检测,将分析后的图像输入预训练的手部分类模型,获取包含母亲手部和预设物品的目标图像包括:

6.根据权利要求3所述的婴幼儿就餐行为智能识别方法,其特征在于,所述当目标图像中母亲手部向婴幼儿靠近且所述预设物品向婴幼儿靠近时,将所述目标图像作为所述第二图像输出包括:

7.根据权利要求4所述的婴幼儿就餐行为智能识别方法,其特征在于,所述获取主码流视频中与第二图像位置对应的第三图像包括:

8.一种婴幼儿就餐行为智能识别装置,其特征在于,所述装置包括:

9.一种电子设备,其特征在于,包括:至少一个处理器、至少一个存储器以及存储在所述存储器中的计算机程序指令,当所述计算机程序指令被所述处理器执行时实现如权利要求1-7中任一项所述的方法。

10.一种存储介质,其上存储有计算机程序指令,其特征在于,当所述计算机程序指令被处理器执行时实现如权利要求1-7中任一项所述的方法。

...

【技术特征摘要】

1.一种婴幼儿就餐行为智能识别方法,其特征在于,所述方法包括:

2.根据权利要求1所述的婴幼儿就餐行为智能识别方法,其特征在于,所述获取婴幼儿看护场景下的多帧第一图像包括:

3.根据权利要求2所述的婴幼儿就餐行为智能识别方法,其特征在于,在所述当通过婴幼儿检测模型检测到婴幼儿坐在餐椅上时,识别为婴幼儿就餐行为之后还包括:

4.根据权利要求3所述的婴幼儿就餐行为智能识别方法,其特征在于,在所述当目标图像中母亲手部向婴幼儿靠近且所述预设物品向婴幼儿靠近时,将目标图像作为存在母婴喂食行为的第二图像输出之后还包括:

5.根据权利要求3所述的婴幼儿就餐行为智能识别方法,其特征在于,所述对婴幼儿就餐图像进行肤色纹理分析和目标检测,将分析后的图像输入预训练的手部分类模型,获取包含母亲手部和预设物品的目标...

【专利技术属性】
技术研发人员:熊章陈辉张智雷奇文艾伟
申请(专利权)人:武汉星巡智能科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1