一种用于机器人的多模态输出方法技术

本发明专利技术公开了一种用于机器人的多模态输出方法以及一种机器人。本发明专利技术的方法包括：在根据当前运行的应用进行的人机交互过程中基于用户交互输入和/或用户状态数据生成针对当前交互内容的用户兴趣参量；当所述用户兴趣参量低于设定阈值时，输出预设的吸引用户注意力的多模态输出。根据本发明专利技术的方法及机器人，可以在不影响应用功能的实现的基础上维持用户的感兴趣程度，从而大大提高用户体验。

【技术实现步骤摘要】

本专利技术涉及计算机领域，具体说涉及一种用于机器人的多模态输出方法。
技术介绍
随着机器人技术的不断发展，机器人的应用范围被不断拓展，尤其的，越来越多的机器人被应用到日常的生产生活中。在日常的生产生活中，机器人的主要应用场景通常集中在与人的交互上。在当前技术环境中，人机交互具有很多不同的方式，其中较为常见的一种模式是用户依照固定的流程进行人机交互。例如，用户使用机器人进行游戏，而大部分的游戏流程都是预先设置好的。。在这种情况下，机器人持续通过固定的流程进行输出，容易使用户对交互产生厌倦情绪，降低了机器人的用户体验。
技术实现思路
本专利技术提出了一种用于机器人的多模态输出方法，所述方法包括：在根据当前运行的应用进行的人机交互过程中基于用户交互输入和/或用户状态数据生成针对当前交互内容的用户兴趣参量；当所述用户兴趣参量低于设定阈值时，输出预设的吸引用户注意力的多模态输出。在一实施例中，所述方法还包括：当所述用户兴趣参量高于所述设定阈值时，输出根据当前运行的应用的固定交互模式生成的多模态输出。在一实施例中，当所述用户兴趣参量低于设定阈值时，输出预设的吸引用户注意力的多模态输出，其中，在输出所述预设的吸引用户注意力的多模态输出之后，输出根据当前运行的应用的固定交互模式生成的多模态输出。在一实施例中，基于用户交互输入和/或用户状态数据生成针对当前交互内容的用户兴趣参量，其中，通过如下之一或组合来生成所述用户兴趣参量：采集用户语音，通过语音语义理解生成针对当前交互内容的用户兴趣参量；采集用户语音，通过语音情感识别生成针对当前交互内容的用户兴趣参量；采集用户图像，通过用户位置变化和/或视线变化生成针对当前交互内容的用户兴趣参量；采集用户图像，通过人脸情绪识别生成针对当前交互内容的用户兴趣参量；采集用户图像，通过手势识别生成针对当前交互内容的用户兴趣参量。在一实施例中，所述当前运行的应用包括：游戏类交互应用、学习类交互应用。本专利技术还提出了一种智能机器人，所述机器人包括：用户兴趣解析模块，其配置为在根据当前运行的应用进行的人机交互过程中基于用户交互输入和/或用户状态数据生成针对当前交互内容的用户兴趣参量；输出模块，其配置为当所述用户兴趣参量低于设定阈值时，输出预设的吸引用户注意力的多模态输出。在一实施例中，所述输出模块还配置为：当所述用户兴趣参量高于所述设定阈值时，输出根据当前运行的应用的固定交互模式生成的多模态输出。在一实施例中，所述输出模块还配置为：在输出所述预设的吸引用户注意力的多模态输出之后，输出根据当前运行的应用的固定交互模式生成的多模态输出。在一实施例中，所述用户兴趣解析模块配置为通过如下之一或组合来生成所述用户兴趣参量：采集用户语音，通过语音语义理解生成针对当前交互内容的用户兴趣参量；采集用户语音，通过语音情感识别生成针对当前交互内容的用户兴趣参量；采集用户图像，通过用户位置变化和/或视线变化生成针对当前交互内容的用户兴趣参量；采集用户图像，通过人脸情绪识别生成针对当前交互内容的用户兴趣参量；采集用户图像，通过手势识别生成针对当前交互内容的用户兴趣参量。在一实施例中，所述用户兴趣解析模块配置为在机器人根据游戏类交互应用和/或学习类交互应用进行的人机交互过程中生成针对当前交互内容的用户兴趣参量。根据本专利技术的方法及机器人，可以在不影响应用功能的实现的基础上维持用户的感兴趣程度，从而大大提高用户体验。本专利技术的其它特征或优点将在随后的说明书中阐述。并且，本专利技术的部分特征或优点将通过说明书而变得显而易见，或者通过实施本专利技术而被了解。本专利技术的目的和部分优点可通过在说明书、权利要求书以及附图中所特别指出的步骤来实现或获得。附图说明附图用来提供对本专利技术的进一步理解，并且构成说明书的一部分，与本专利技术的实施例共同用于解释本专利技术，并不构成对本专利技术的限制。在附图中：图1和图2是根据本专利技术实施例的方法流程图；图3是根据本专利技术一实施例的机器人系统结构简图。具体实施方式以下将结合附图及实施例来详细说明本专利技术的实施方式，借此本专利技术的实施人员可以充分理解本专利技术如何应用技术手段来解决技术问题，并达成技术效果的实现过程并依据上述实现过程具体实施本专利技术。需要说明的是，只要不构成冲突，本专利技术中的各个实施例以及各实施例中的各个特征可以相互结合，所形成的技术方案均在本专利技术的保护范围之内。随着机器人技术的不断发展，机器人的应用范围被不断拓展，尤其的，越来越多的机器人被应用到日常的生产生活中。在日常的生产生活中，机器人的主要应用场景通常集中在与人的交互上。在当前技术环境中，人机交互具有很多不同的方式，其中较为常见的一种模式是用户依照固定的流程进行人机交互。例如，用户使用机器人进行游戏，而大部分的游戏流程都是预先设置好的。在这种情况下，机器人只能通过用户的输入来判断下一步的流程，持续通过固定的流程进行输出，不容易发现用户对交互是否产生厌倦情绪，降低了机器人的用户体验。针对这一问题，本专利技术提出了一种在人机交互游戏中，通过判断用户当前的兴趣度，从而使机器人能更好控制游戏过程的方法。在用户依照固定的流程进行人机交互过程中，用户对交互产生厌倦情绪的主要原因之一是机器人的交互应对是完全依照当前运行的应用中预设的交互流程设置进行的，机器人的交互应对无法反应用户自身状态的变化，使得交互应对生硬、缺乏灵活性。解决这一问题的方法之一就是机器人根据用户自身的状态变化及时调整交互回应，使得交互回应灵活多变，从而不断激发用户的交互兴趣。但是，根据用户自身的状态变化及时调整交互回应势必占用大量的处理资源并且需要大量完整精确的数据支持，并且灵活多变的交互回应也会破坏应用中预设的交互流程，使得应用的功能无法得到有效实现，从而使得人机交互失去了原本的目的和意义。针对上述问题，在本专利技术一实施例中，机器人根据用户自身的状态变化调整交互回应以激发用户的交互兴趣。但是，交互回应的调整并不是随时进行的，而仅仅是在用户交互兴趣下降(产生厌倦感)的关键节点进行的。这样，就在最大限度维持应用的原有交互流程的基础上，以尽可能少的交互回应调节来避免用户厌倦感的产生，不仅提高了用户体验，而且保证了处理资源消耗的精简以及应用功能的正常实现。接下来基于附图详细描述根据本专利技术实施例的方法执行流程。附图的流程图中示出的步骤可以在包含诸如一组计算机可执行指令的计算机系统中执行。虽然在流程图中示出了各步骤的逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。在一实施例中，如图1所示，机器人根据当前运行的应用和用户进行人机交互(步骤S110)；在人际交互过程中基于用户交互输入和/或用户状态数据生成针对当前交互内容的用户兴趣参量(步骤S120)，该用户兴趣参量用于量化描述用户对于当前交互内容的感兴趣程度。接下来判断当前用户的用户兴趣参量是否低于设定阈值(步骤S130)。在本实施例中，用户兴趣参量的设定阈值是当用户对当前交互内容没有产生厌倦感时对于当前交互内容的感兴趣程度的量化描述。当用户的当前用户兴趣参量低于设定阈值时，则说明用户对当前交互内容的感兴趣程度开始降低，用户开始产生厌倦感。因此在步骤S130之后，如果用户兴趣参量大于等于设定阈值，则继续进行原有的人机交互进程(返回步骤S1本文档来自技高网...

【技术保护点】
一种用于机器人的多模态输出方法，其特征在于，所述方法包括：在根据当前运行的应用进行的人机交互过程中基于用户交互输入和/或用户状态数据生成针对当前交互内容的用户兴趣参量；当所述用户兴趣参量低于设定阈值时，输出预设的吸引用户注意力的多模态输出。

【技术特征摘要】
1.一种用于机器人的多模态输出方法，其特征在于，所述方法包括：在根据当前运行的应用进行的人机交互过程中基于用户交互输入和/或用户状态数据生成针对当前交互内容的用户兴趣参量；当所述用户兴趣参量低于设定阈值时，输出预设的吸引用户注意力的多模态输出。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：当所述用户兴趣参量高于所述设定阈值时，输出根据当前运行的应用的固定交互模式生成的多模态输出。3.根据权利要求1所述的方法，其特征在于，当所述用户兴趣参量低于设定阈值时，输出预设的吸引用户注意力的多模态输出，其中，在输出所述预设的吸引用户注意力的多模态输出之后，输出根据当前运行的应用的固定交互模式生成的多模态输出。4.根据权利要求1所述的方法，其特征在于，基于用户交互输入和/或用户状态数据生成针对当前交互内容的用户兴趣参量，其中，通过如下之一或组合来生成所述用户兴趣参量：采集用户语音，通过语音语义理解生成针对当前交互内容的用户兴趣参量；采集用户语音，通过语音情感识别生成针对当前交互内容的用户兴趣参量；采集用户图像，通过用户位置变化和/或视线变化生成针对当前交互内容的用户兴趣参量；采集用户图像，通过人脸情绪识别生成针对当前交互内容的用户兴趣参量；采集用户图像，通过手势识别生成针对当前交互内容的用户兴趣参量。5.根据权利要求1-4中任一项所述的方法，其特征在于，所述当前运行的应用包括：游戏类交互应用、学习类交互应用。6.一...

【专利技术属性】
技术研发人员：丁丽艳，
申请(专利权)人：北京光年无限科技有限公司，
类型：发明
国别省市：北京;11