一种基于家教机的交互方法及家教机技术

一种基于家教机的交互方法及家教机，包括：当家教机检测到用户输出第一语音信息(例如，小布小布，我觉得很烦)之后，家教机可以再通过前置摄像头采集人脸信息(例如，用户的面部信息)，在采集到人脸信息之后根据第一语音信息和人脸信息确定用户的当前情绪(例如，烦躁)，进而，家教机再根据第一语音信息和人脸信息输出相匹配的引导内容(例如，舒缓的音乐)；其中，引导内容用于引导用户调整当前情绪。实施本发明专利技术实施例，能够帮助学生调整情绪以提高学生对学习的兴趣，进而提高学生的学习效果以及用户使用粘稠度。

An Interactive Method Based on Home-teaching Machine and Home-teaching Machine

An interactive method based on tutor computer and tutor computer include: when the tutor detects the user's output of the first voice information (for example, cloth, I feel very annoyed), the tutor can collect face information (for example, user's face information) through the front-end camera, and then according to the first language after collecting face information. Audio information and face information determine the user's current mood (e.g., irritability), and then the tutor outputs matching guidance content (e.g. soothing music) based on the first voice information and face information, in which the guidance content is used to guide the user to adjust the current mood. The implementation of the embodiment of the present invention can help students adjust their emotions to improve their interest in learning, thereby improving the learning effect of students and the stickiness of users.

【技术实现步骤摘要】
一种基于家教机的交互方法及家教机
本专利技术涉及家教机
，具体涉及一种基于家教机的交互方法及家教机。
技术介绍
对很多学生来说，学习的过程是很枯燥的。通常，在持续学习一段时间后，学生常会产生不开心、失落或者烦躁之类的情绪，以至于对学习的兴趣下降，在这种情况下再继续学习则会降低学生的学习效果,进而会降低家教机的用户使用粘稠度。
技术实现思路
本专利技术实施例公开了一种基于家教机的交互方法及家教机，能够帮助学生调整情绪以提高学生对学习的兴趣，进而提高学生的学习效果以及用户使用粘稠度。本专利技术实施例第一方面公开了一种基于家教机的交互方法，所述方法包括：所述家教机判断是否检测到第一语音信息；如果检测到所述第一语音信息，所述家教机通过前置摄像头采集用户的人脸信息；所述家教机根据所述第一语音信息和所述人脸信息确定用户的当前情绪；所述家教机根据所述当前情绪和所述第一语音信息的内容输出相匹配的引导内容；其中，所述引导内容用于引导用户调整所述当前情绪。作为一种可选的实施方式，在本专利技术实施例第一方面中，在所述家教机判断出检测到所述第一语音信息之后，以及在所述家教机通过所述前置摄像头采集用户的人脸信息之前，所述方法还包括：所述家教机判断是否存在与所述第一语音信息对应的声纹特征匹配的预存声纹特征；如果存在，所述家教机执行所述的通过前置摄像头采集用户的人脸信息；所述家教机通过前置摄像头采集用户的人脸信息之后，以及在所述家教机根据所述第一语音信息和所述人脸信息确定用户的当前情绪之前，还包括：所述家教机判断所述预存声纹特征对应的预存人脸信息是否与采集到的所述人脸信息匹配；如果匹配，所述家教机执行所述的根据所述第一语音信息和所述人脸信息确定用户的当前情绪。作为一种可选的实施方式，在本专利技术实施例第一方面中，在所述家教机判断出不存在与所述第一语音信息对应的声纹特征匹配的预存声纹特征之后，所述方法还包括：所述家教机通过前置摄像头采集用户的人脸信息；所述家教机将所述第一语音信息对应的声纹特征和所述人脸信息作为相互匹配的一对合法用户信息进行存储，并输出用于询问用户是否跳过指导教程的询问信息，所述指导教程用于指示用户使用所述家教机时的操作步骤；如果检测到用户输入的用于表示跳过所述指导教程的跳过操作，所述家教机执行所述的根据所述第一语音信息和所述人脸信息确定用户的当前情绪。作为一种可选的实施方式，在本专利技术实施例第一方面中，所述家教机判断是否检测到第一语音信息之前，所述方法还包括：所述家教机判断所述家教机的当前状态是否为用户使用状态；如果所述当前状态为所述用户使用状态，所述家教机判断所述家教机显示的当前界面是否为学习界面，当所述当前界面为所述学习界面时，判断所述学习界面的显示时长是否达到预设时长阈值，当所述显示时长达到所述预设时长阈值时，所述家教机执行所述的判断是否检测到第一语音信息；所述方法还包括：所述家教机根据在显示所述学习界面的过程中采集到的用户图像信息，确定用户的有效学习时长；所述家教机根据在显示所述学习界面的过程中与用户的学习交互信息，确定用户的学习成果；所述家教机根据所述有效学习时长以及所述学习成果，输出与所述有效学习时长以及所述学习成果相匹配的鼓励信息。作为一种可选的实施方式，在本专利技术实施例第一方面中，所述方法还包括：所述家教机在输出所述引导内容之后，根据确定出的用户实时情绪判断是否需要继续引导用户，当判断出需要继续引导用户时，所述家教机向预先与所述家教机建立引导关系的所有终端设备中在当前时刻处于空闲状态的目标终端设备发送远程引导请求，所述远程引导请求用于请求对用户进行远程在线引导，所述远程引导请求包括所述第一语音信息、所述人脸信息、所述引导内容以及所述家教机在输出所述引导内容之后采集到的用户的状态信息；所述家教机检测是否接收到所述目标终端设备针对所述远程引导请求反馈的远程引导响应，当接收到所述远程引导响应时，建立与所述目标终端设备之间的在线语音连接或在线视频连接，以实现对用户的远程在线引导。本专利技术实施例第二方面公开了一种家教机，所述家教机包括：第一判断单元，用于判断是否检测到第一语音信息；第一采集单元，用于在所述第一判断单元判断出检测到所述第一语音信息之后，通过前置摄像头采集用户的人脸信息；第一确定单元，用于根据所述第一语音信息和所述人脸信息确定用户的当前情绪；输出单元，用于根据所述当前情绪和所述第一语音信息的内容输出相匹配的引导内容；其中，所述引导内容用于引导用户调整所述当前情绪。作为一种可选的实施方式，在本专利技术实施例第二方面中，所述第一判断单元，还用于在判断出检测到所述第一语音信息之后，以及在所述第一采集单元通过前置摄像头采集用户的人脸信息之前，判断是否存在与所述第一语音信息对应的声纹特征匹配的预存声纹特征；所述第一采集单元，具体用于在所述第一判断单元判断出存在与所述第一语音信息对应的声纹特征匹配的预存声纹特征之后，通过前置摄像头采集用户的人脸信息；所述第一判断单元，还用于在所述第一采集单元通过前置摄像头采集用户的人脸信息之后，以及在所述第一确定单元根据所述第一语音信息和所述人脸信息确定用户的当前情绪之前，判断所述预存声纹特征对应的预存人脸信息是否与采集到的所述人脸信息匹配；所述第一确定单元，具体用于在所述第一判断单元判断出所述预存声纹特征对应的预存人脸信息与采集到的所述人脸信息匹配之后，根据所述第一语音信息和所述人脸信息确定用户的当前情绪。作为一种可选的实施方式，在本专利技术实施例第二方面中，所述家教机还包括：第二采集单元，用于在所述第一判断单元判断出不存在与所述第一语音信息对应的声纹特征匹配的预存声纹特征之后，通过前置摄像头采集用户的人脸信息；存储输出单元，用于将所述第一语音信息对应的声纹特征和所述人脸信息作为相互匹配的一对合法用户信息进行存储，并输出用于询问用户是否跳过指导教程的询问信息，所述指导教程用于指示用户使用所述家教机时的操作步骤；第二判断单元，用于判断是否检测到用户输入的用于表示跳过所述指导教程的跳过操作；第二确定单元，用于在所述第二判断单元检测到用户输入的用于表示跳过所述指导教程的跳过操作之后，根据所述第一语音信息和所述人脸信息确定用户的当前情绪。作为一种可选的实施方式，在本专利技术实施例第二方面中，所述家教机还包括：第三判断单元，用于在所述第一判断单元判断出检测到所述第一语音信息之前，判断所述家教机的当前状态是否为用户使用状态；所述第三判断单元，还用于在判断出所述家教机的当前状态为所述用户使用状态之后，判断所述家教机显示的当前界面是否为学习界面；所述第三判断单元，还用于在判断出所述当前界面为所述学习界面之后，判断所述学习界面的显示时长是否达到预设时长阈值；所述第一判断单元判断是否检测到第一语音信息的方式具体为：在所述第三判断单元判断出所述家教机的当前状态为所述用户使用状态之后，以及判断出所述当前界面为所述学习界面之后，以及判断出所述学习界面的显示时长达到所述预设时长阈值之后，判断是否检测到第一语音信息；所述家教机还包括：第三确定单元，用于根据在显示所述学习界面的过程中采集到的用户图像信息，确定用户的有效学习时长；所述第三确定单元，还用于根据在显示所述学习界面的过程中与用户的学习交互信息，确定用户的学习成果；所述本文档来自技高网...

【技术保护点】
1.一种基于家教机的交互方法，其特征在于，所述方法包括：所述家教机判断是否检测到第一语音信息；如果检测到所述第一语音信息，所述家教机通过前置摄像头采集用户的人脸信息；所述家教机根据所述第一语音信息和所述人脸信息确定用户的当前情绪；所述家教机根据所述当前情绪和所述第一语音信息的内容输出相匹配的引导内容；其中，所述引导内容用于引导用户调整所述当前情绪。

【技术特征摘要】
1.一种基于家教机的交互方法，其特征在于，所述方法包括：所述家教机判断是否检测到第一语音信息；如果检测到所述第一语音信息，所述家教机通过前置摄像头采集用户的人脸信息；所述家教机根据所述第一语音信息和所述人脸信息确定用户的当前情绪；所述家教机根据所述当前情绪和所述第一语音信息的内容输出相匹配的引导内容；其中，所述引导内容用于引导用户调整所述当前情绪。2.根据权利要求1所述的方法，其特征在于，在所述家教机判断出检测到所述第一语音信息之后，以及在所述家教机通过所述前置摄像头采集用户的人脸信息之前，所述方法还包括：所述家教机判断是否存在与所述第一语音信息对应的声纹特征匹配的预存声纹特征；如果存在，所述家教机执行所述的通过前置摄像头采集用户的人脸信息；所述家教机通过前置摄像头采集用户的人脸信息之后，以及在所述家教机根据所述第一语音信息和所述人脸信息确定用户的当前情绪之前，还包括：所述家教机判断所述预存声纹特征对应的预存人脸信息是否与采集到的所述人脸信息匹配；如果匹配，所述家教机执行所述的根据所述第一语音信息和所述人脸信息确定用户的当前情绪。3.根据权利要求2所述的方法，其特征在于，在所述家教机判断出不存在与所述第一语音信息对应的声纹特征匹配的预存声纹特征之后，所述方法还包括：所述家教机通过前置摄像头采集用户的人脸信息；所述家教机将所述第一语音信息对应的声纹特征和所述人脸信息作为相互匹配的一对合法用户信息进行存储，并输出用于询问用户是否跳过指导教程的询问信息，所述指导教程用于指示用户使用所述家教机时的操作步骤；如果检测到用户输入的用于表示跳过所述指导教程的跳过操作，所述家教机执行所述的根据所述第一语音信息和所述人脸信息确定用户的当前情绪。4.根据权利要求1-3任一项所述的方法，其特征在于，所述家教机判断是否检测到第一语音信息之前，所述方法还包括：所述家教机判断所述家教机的当前状态是否为用户使用状态；如果所述当前状态为所述用户使用状态，所述家教机判断所述家教机显示的当前界面是否为学习界面，当所述当前界面为所述学习界面时，判断所述学习界面的显示时长是否达到预设时长阈值，当所述显示时长达到所述预设时长阈值时，所述家教机执行所述的判断是否检测到第一语音信息；所述方法还包括：所述家教机根据在显示所述学习界面的过程中采集到的用户图像信息，确定用户的有效学习时长；所述家教机根据在显示所述学习界面的过程中与用户的学习交互信息，确定用户的学习成果；所述家教机根据所述有效学习时长以及所述学习成果，输出与所述有效学习时长以及所述学习成果相匹配的鼓励信息。5.根据权利要求1-4任一项所述的方法，其特征在于，所述方法还包括：所述家教机在输出所述引导内容之后，根据确定出的用户实时情绪判断是否需要继续引导用户，当判断出需要继续引导用户时，所述家教机向预先与所述家教机建立引导关系的所有终端设备中在当前时刻处于空闲状态的目标终端设备发送远程引导请求，所述远程引导请求用于请求对用户进行远程在线引导，所述远程引导请求包括所述第一语音信息、所述人脸信息、所述引导内容以及所述家教机在输出所述引导内容之后采集到的用户的状态信息；所述家教机检测是否接收到所述目标终端设备针对所述远程引导请求反馈的远程引导响应，当接收到所述远程引导响应时，建立与所述目标终端设备之间的在线语音连接或在线视频连接，以实现对用户的远程在线引导。6.一种家教机，其特征在于，所述家教机包括：第一判断单元，用于判断是否检测到第一语音信息；第一采集单元，用于在所述第一判断单元判断出检测到所述第一语音信息之后，通过前置摄像头采集用户的人脸信息；第一确定单元，用于根据所述第一语音信息和所述人脸信息确定用户的当前情绪；输出单元，用于根据所述当前情绪和所述第一语音信息的内容输出相匹配的引导内容；其中，所述引导内容用于引导用户调整所述...

【专利技术属性】
技术研发人员：朱文辉，
申请(专利权)人：广东小天才科技有限公司，
类型：发明
国别省市：广东,44