本发明专利技术公开了一种基于智能机器人的儿童行为引导方法及系统,该引导方法包括获取家长与儿童的多模态输入信息,并对所述多模态输入信息进行解析;根据解析的结果判断是否需要对当前的儿童行为进行引导,并在判断为需要引导时生成行为引导的决策;基于决策结果输出多模态表达。该引导方法能够实现较好的沟通效果,解决了现阶段由于家长缺乏带孩子的经验而不能与孩子良好交互的问题。
【技术实现步骤摘要】
本专利技术属于智能机器人领域,尤其设计一种基于智能机器人的儿童行为引导方法及系统。
技术介绍
随着智能机器人技术的发展,智能机器人的应用已经逐渐深入到人们生活的各个方面。从辅助教学、医疗卫生到公共服务的各个方面,都能见到智能机器人忙碌的身影。同时,人们对智能机器人的需求也日益增多,不再仅仅停留于对指令的执行阶段,人们更希望利用智能机器人自身的功能来为他们提供更多的建议与帮助。因此,需要不断提高智能机器人的交互能力,来满足用户的交互需求。
技术实现思路
本专利技术所要解决的技术问题之一是需要提供一种满足用户交互需求的智能机器人。为了解决上述技术问题,本申请的实施例首先提供了一种基于智能机器人的儿童行为引导方法,包括:获取家长与儿童的多模态输入信息,并对所述多模态输入信息进行解析;根据解析的结果判断是否需要对当前的儿童行为进行引导,并在判断为需要引导时生成行为引导的决策;基于决策结果输出多模态表达。优选地,所述对所述多模态输入信息进行解析,包括结合所述多模态输入信息进行人群感知、意图感知与场景感知。优选地,所述根据解析的结果判断是否需要对当前的儿童行为进行引导,包括:根据意图感知与场景感知的结果对针对当前的儿童行为进行引导的需求程度进行评分,当所述评分高于设定的分数阈值时,判断为需要对当前的儿童行为进行引导;当所述评分低于或等于设定的分数阈值时,判断为不需要对当前的儿童行为进行引导。优选地,所述根据意图感知与场景感知的结果对针对当前的儿童行为进行引导的需求程度进行评分,包括:从所述意图感知与场景感知的结果中提取设定词汇和/或设定体态;将与提取得到的设定词汇和/或设定体态对应的分数加权求和以获取针对当前的儿童行为进行引导的需求程度的评分。优选地,所述基于决策结果输出多模态表达,包括语音输出、动作输出与表情输出。本申请的实施例还提供了一种基于智能机器人的儿童行为引导系统,包括:解析模块,其获取家长与儿童的多模态输入信息,并对所述多模态输入信息进行解析;决策模块,其根据解析的结果判断是否需要对当前的儿童行为进行引导,并在判断为需要引导时生成行为引导的决策;输出模块,其基于决策结果输出多模态表达。优选地,所述解析模块结合所述多模态输入信息进行人群感知、意图感知与场景感知。优选地,所述决策模块根据意图感知与场景感知的结果对针对当前的儿童行为进行引导的需求程度进行评分,当所述评分高于设定的分数阈值时,判断为需要对当前的儿童行为进行引导;当所述评分低于或等于设定的分数阈值时,判断为不需要对当前的儿童行为进行引导。优选地,所述决策模块在根据意图感知与场景感知的结果对针对当前的儿童行为进行引导的需求程度进行评分时,包括:从所述意图感知与场景感知的结果中提取设定词汇和/或设定体态;将与提取得到的设定词汇和/或设定体态对应的分数加权求和以获取针对当前的儿童行为进行引导的需求程度的评分。优选地,所述输出模块基于输出的多模态表达包括语音输出、动作输出与表情输出。与现有技术相比,上述方案中的一个或多个实施例可以具有如下优点或有益效果:通过基于智能机器人的多模态输入功能,获取家长与儿童交互场景中的人群、场景、体态等各方面的信息,并对各种感知信息进行综合判断和决策,再由智能机器人根据判断和决策的结果通过语言、动作、表情等多种方式来进行多模态的表达输出,通过智能机器人实现对儿童的行为引导,解决由于家长缺乏经验不能对儿童进行正确行为引导,影响儿童身心健康的问题。本专利技术的其他优点、目标,和特征在某种程度上将在随后的说明书中进行阐述,并且在某种程度上,基于对下文的考察研究对本领域技术人员而言将是显而易见的,或者可以从本专利技术的实践中得到教导。本专利技术的目标和其他优点可以通过下面的说明书,权利要求书,以及附图中所特别指出的结构来实现和获得。附图说明附图用来提供对本申请的技术方案或现有技术的进一步理解,并且构成说明书的一部分。其中,表达本申请实施例的附图与本申请的实施例一起用于解释本申请的技术方案,但并不构成对本申请技术方案的限制。图1为根据本专利技术第一实施例的基于智能机器人的儿童行为引导方法的流程示意图;图2为根据本专利技术第二实施例的基于智能机器人的儿童行为引导方法的流程示意图;图3为根据本专利技术第三实施例的基于智能机器人的儿童行为引导系统的结构示意图。具体实施方式以下将结合附图及实施例来详细说明本专利技术的实施方式,借此对本专利技术如何应用技术手段来解决技术问题,并达成相应技术效果的实现过程能充分理解并据以实施。本申请实施例以及实施例中的各个特征,在不相冲突前提下可以相互结合,所形成的技术方案均在本专利技术的保护范围之内。由于对生活场景、常识不熟悉,儿童经常会需要合适的行为引导,但由于绝大多数家长没受到过相对正确的沟通培训和情绪控制,有意无意的威胁、恐吓、利诱小孩,这些方式都是不正确的,影响儿童的身心健康。例如,家长送儿童上幼儿园时,特别是在家长和小孩的分离时刻,儿童容易舍不得而苦恼。本专利技术针对上述问题提出解决方案。第一实施例:图1为根据本专利技术第一实施例的基于智能机器人的儿童行为引导方法的流程示意图,如图所示,该方法包括以下步骤:步骤S110、获取家长与儿童的多模态输入信息,并对多模态输入信息进行解析。步骤S120、根据解析的结果判断是否需要对当前的儿童行为进行引导,并在判断为需要引导时生成行为引导的决策。步骤S130、基于决策结果输出多模态表达。具体的,在步骤S110中,智能机器人接收来自家长与儿童交互场景中交互双方的多模态输入信息。多模态输入信息可以为语言输入信息、图像输入信息以及通过传感器采集到的信息等。本实施例中对接收多模态信息的方式和信息的形式不做限定。智能机器人对接收到的多模态输入信息进行解析,包括结合各种多模态输入信息进行人群感知、意图感知和场景感知。智能机器人在得到解析结果后,在步骤S120中,根据解析结果判断是否需要对当前的儿童行为进行引导。本实施例中所说的人群感知是指判断当前场景的人物信息,以判断是否属于儿童行为引导的范围。人群感知的过程可以由智能机器人对图像信息等多模态输入进行解析来实现。举例而言,智能机器人首先利用摄像头对当前场景进行捕捉,可以拍摄静态的图像信息,也可以获取动态的视频信息。本实施例中对此不做限定,由智能机器人视觉模块的功能设定决定。通过对图像信息或视频信息的分析,智能机器人能够判断出当前场景中的人物信息,例如人物的性别信息与人物的年龄信息,进而确定家长的性别和年龄,儿童的性别与年龄,从而可以将当前家长与儿童的交互场景进行初步的定位。进一步地,通过对图像信息或视频信息的分析,智能机器人还能够判断出当前场景中各人物的情绪状态,例如判断家长是否处于急躁、生气等情绪状态中,或是儿童处于不理睬、哭泣等情绪状态中,或是家长和儿童同时各自处于上面的状态中。智能机器人根据当前场景中的各人物的情绪状态来判断是否需要对家长与儿童之间的交互行为进行干预。举例而言,如果当前场景中家长和儿童均处于平静的、缓和的交互中时,则不需要对当前的交互行为进行干预。如果当前场景中家长或儿童一方的情绪表现为较强烈、或是不友好,不配合,则需要对当前的交互行为进行干预。本实施例中所说的意图感知是指根据用户的语言来判断当前交互场景中各人物的意图,进而根据人物的本文档来自技高网...
【技术保护点】
一种基于智能机器人的儿童行为引导方法,包括:获取家长与儿童的多模态输入信息,并对所述多模态输入信息进行解析;根据解析的结果判断是否需要对当前的儿童行为进行引导,并在判断为需要引导时生成行为引导的决策;基于决策结果输出多模态表达。
【技术特征摘要】
1.一种基于智能机器人的儿童行为引导方法,包括:获取家长与儿童的多模态输入信息,并对所述多模态输入信息进行解析;根据解析的结果判断是否需要对当前的儿童行为进行引导,并在判断为需要引导时生成行为引导的决策;基于决策结果输出多模态表达。2.根据权利要求1所述的方法,其特征在于,所述对所述多模态输入信息进行解析,包括结合所述多模态输入信息进行人群感知、意图感知与场景感知。3.根据权利要求2所述的方法,其特征在于,所述根据解析的结果判断是否需要对当前的儿童行为进行引导,包括:根据意图感知与场景感知的结果对针对当前的儿童行为进行引导的需求程度进行评分,当所述评分高于设定的分数阈值时,判断为需要对当前的儿童行为进行引导;当所述评分低于或等于设定的分数阈值时,判断为不需要对当前的儿童行为进行引导。4.根据权利要求3所述的方法,其特征在于,所述根据意图感知与场景感知的结果对针对当前的儿童行为进行引导的需求程度进行评分,包括:从所述意图感知与场景感知的结果中提取设定词汇和/或设定体态;将与提取得到的设定词汇和/或设定体态对应的分数加权求和以获取针对当前的儿童行为进行引导的需求程度的评分。5.根据权利要求1至4中任一项所述的方法,其特征在于,所述基于决策结果输出多模态表达,包括语音输出、动作输...
【专利技术属性】
技术研发人员:黄钊,
申请(专利权)人:北京光年无限科技有限公司,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。