信息交互方法、装置、电子设备及存储介质制造方法及图纸

本发明专利技术提供一种信息交互方法、装置、电子设备及存储介质，该方法在与智能发声设备进行信息交互时，可以根据不同的用户标识，进入相应的电子发声模式，不仅可以利用历史教学数据对第一电子发声书进行调整，还可以基于眼动数据播放第二电子发声书，由此，丰富了智能发声设备的信息交互形式。设备的信息交互形式。设备的信息交互形式。

【技术实现步骤摘要】
信息交互方法、装置、电子设备及存储介质


[0001]本专利技术涉及视频数据处理领域，特别是涉及一种信息交互方法、装置、电子设备及存储介质。

技术介绍

[0002]随着社会的进步和发展，市面上的多数智能发声设备（点读机或学习机）大都有点读功能，其能够帮助家长更好的辅导学生学习功课、纠正学生发声以及便于学生随时随地的自学。在实际的交互场景中，以点读场景为例，目前的智能发声设备是根据点读笔点击的位置或手指点击的位置，输出点读内容对应的发声或释义。
[0003]然而，在目前的智能发声设备中，点读内容的发声和释义通常是预先存储的元数据，并未针对用户进行区分，可见，目前智能发声设备的信息交互形式较为单一。
[0004]故需要提供一种信息交互方法及装置，以解决上述的技术问题。

技术实现思路

[0005]本专利技术实施例提供一种信息交互方法及装置，可以丰富智能发声设备的信息交互形式。
[0006]本专利技术实施例提供一种信息交互方法，其包括：响应于针对智能发声设备的交互操作，确定所述交互操作对应的用户标识；当所述用户标识为学生标识时，触发所述智能发声设备进入教学模式，并在所述教学模式下，获取所述学生标识对应的历史教学数据以及第一电子发声书；基于所述历史教学数据对所述第一电子发声书的发声参数进行调整；响应于针对所述第一电子发声书的播放操作，根据调整后发声参数播放所述第一电子发声书；当所述用户标识为孩童标识时，触发所述智能发声设备进入点读模式，并在所述点读模式下，获取所述孩童标识对应的第二电子发声书；响应于针对所述第二电子发声书的手势操作，基于所述孩童标识对应的眼动数据，播放所述第二电子发声书。
[0007]在本专利技术所述的信息交互方法中，所述基于所述历史教学数据对所述第一电子发声书的发声参数进行调整，包括：从所述历史教学数据提取在历史时段内所述第一电子发声书对应的第一教学信息，以及；从所述历史教学数据提取在历史时段内其他历史发声内容对应的第二教学信息；计算所述历史发声内容与所述第一电子发声书之间的匹配度；基于所述第一教学信息、第二教学信息以及匹配度，对所述第一电子发声书的发声参数进行调整。
[0008]在本专利技术所述的信息交互方法中，所述基于所述第一教学信息、第二教学信息以及匹配度，对所述第一电子发声书的发声参数进行调整，包括：将匹配度大于第一预设值的历史发声内容确定第一参考发声内容；
根据所述第一教学信息，确定所述第一电子发声书对应的历史发声速度、历史跟读速度以及历史跟读错误率；根据所述第二教学信息，确定所述第一参考发声内容的参考发声速度、参考跟读速度以及参考跟读错误率；将所述历史跟读错误率转换为第一调参权重，并将所述第一参考发声内容对应的匹配度转换为第二调参权重；基于所述历史发声速度与历史跟读速度之间的比值，输出第三调参权重，以及基于所述参考发声速度与参考跟读速度之间的比值，输出第四调参权重；计算所述历史发声速度、第一调参权重、第二调参权重、第三调参权重以及第四调参权重的乘积，得到播放所述第一电子发声书对应的目标发声速度；基于所述历史跟读错误率和参考跟读错误率，调整所述第一电子发声书中目标发声内容的播放次数。
[0009]在本专利技术所述的信息交互方法中，所述根据所述第一教学信息，确定所述第一电子发声书对应的历史跟读错误率，包括：从所述第一教学信息中提取所述第一电子发声书对应的跟读信息；获取所述第一电子发声书对应的音频文本；提取每个所述音频单字的音高值，得到多个音高值；根据所述音高值以及跟读信息，确定所述第一电子发声书对应的历史跟读错误率。
[0010]在本专利技术所述的信息交互方法中，所述基于所述第一教学信息、第二教学信息以及匹配度，对所述第一电子发声书的发声参数进行调整，包括：将匹配度大于第二预设值的历史发声内容确定第二参考发声内容；获取所述第一电子发声书对应的目标发声文本以及所述第二参考发声内容对应的参考发声文本；从所述第一教学信息中提取所述目标发声文本中各目标发声对象对应的展示分布，以及；从所述第二教学信息中提取所述参考发声文本中各参考发声对象对应的参考展示分布；基于所述第二参考发声内容的匹配度，确定所述参考展示分布对所述展示分布的影响程度；根据所述影响程度以及展示分布，调整所述第一电子发声书中各目标发声对象的展示时长和展示次数。
[0011]在本专利技术所述的信息交互方法中，所述响应于针对所述第二电子发声书的手势操作，基于所述孩童标识对应的眼动数据，播放所述第二电子发声书，包括：响应于针对所述第二电子发声书的手势操作，识别所述手势操作是否为目标手势操作；当识别到所述手势操作为目标手势操作时，则获取所述孩童标识对应的眼动数据以及所述第二电子书中各点读内容的坐标数据；根据所述眼动数据和坐标数据，在所述第二电子书中确定目标点读内容；
播放所述目标点读内容，并在预设时间后，输出所述目标点读内容的图像信息或动效。
[0012]在本专利技术所述的信息交互方法中，所述在所述点读模式下，获取所述孩童标识对应的第二电子发声书，包括：获取所述孩童标识对应的待点读数据和教学进度；基于所述教学进度以及预设配置信息，将所述待点读数据中的目标数据确定为第二电子发声书。
[0013]本专利技术实施例还提供一种信息交互装置，其包括：确定模块，用于响应于针对智能发声设备的交互操作，确定所述交互操作对应的用户标识；第一获取模块，用于当所述用户标识为学生标识时，触发所述智能发声设备进入教学模式，并在所述教学模式下，获取所述学生标识对应的历史教学数据以及第一电子发声书；调整模块，用于基于所述历史教学数据对所述第一电子发声书的发声参数进行调整；第一播放模块，用于响应于针对所述第一电子发声书的播放操作，根据调整后发声参数播放所述第一电子发声书；第二获取模块，用于当所述用户标识为孩童标识时，触发所述智能发声设备进入点读模式，并在所述点读模式下，获取所述孩童标识对应的第二电子发声书；播放模块，用于响应于针对所述第二电子发声书的手势操作，基于所述孩童标识对应的眼动数据，播放所述第二电子发声书。
[0014]本专利技术实施例还提供一种电子设备，包括存储器，处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时执行上述信息交互方法。
[0015]本专利技术实施例还提供一种存储介质，其内存储有处理器可执行指令，所述指令由一个或一个以上处理器加载，以执行上述信息交互方法。
[0016]本专利技术的信息交互方法及信息交互响应于针对智能发声设备的交互操作，确定所述交互操作对应的用户标识后，当所述用户标识为学生标识时，触发所述智能发声设备进入教学模式，并在所述教学模式下，获取所述学生标识对应的历史教学数据以及第一电子发声书；基于所述历史教学数据对所述第一电子发声书的发声参数进行调整；响应于针对所述第一电子发声书的播放操作，根据调整后发声参数播放所述第一电子发声书，当所述用户标识为孩童标识时，触发所述智能发声设备进入点读模式，并在所述点读模式下，获取所述孩童标识对应的第二电子发声书；响应于针对所述第二电子发本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种信息交互方法，应用于智能发声设备，其特征在于，包括：响应于针对智能发声设备的交互操作，确定所述交互操作对应的用户标识；当所述用户标识为学生标识时，触发所述智能发声设备进入教学模式，并在所述教学模式下，获取所述学生标识对应的历史教学数据以及第一电子发声书；基于所述历史教学数据对所述第一电子发声书的发声参数进行调整；响应于针对所述第一电子发声书的播放操作，根据调整后发声参数播放所述第一电子发声书；当所述用户标识为孩童标识时，触发所述智能发声设备进入点读模式，并在所述点读模式下，获取所述孩童标识对应的第二电子发声书；响应于针对所述第二电子发声书的手势操作，基于所述孩童标识对应的眼动数据，播放所述第二电子发声书。2.根据权利要求1所述的方法，其特征在于，所述基于所述历史教学数据对所述第一电子发声书的发声参数进行调整，包括：从所述历史教学数据提取在历史时段内所述第一电子发声书对应的第一教学信息，以及；从所述历史教学数据提取在历史时段内其他历史发声内容对应的第二教学信息；计算所述历史发声内容与所述第一电子发声书之间的匹配度；基于所述第一教学信息、第二教学信息以及匹配度，对所述第一电子发声书的发声参数进行调整。3.根据权利要求2所述的方法，其特征在于，所述基于所述第一教学信息、第二教学信息以及匹配度，对所述第一电子发声书的发声参数进行调整，包括：将匹配度大于第一预设值的历史发声内容确定第一参考发声内容；根据所述第一教学信息，确定所述第一电子发声书对应的历史发声速度、历史跟读速度以及历史跟读错误率；根据所述第二教学信息，确定所述第一参考发声内容的参考发声速度、参考跟读速度以及参考跟读错误率；将所述历史跟读错误率转换为第一调参权重，并将所述第一参考发声内容对应的匹配度转换为第二调参权重；基于所述历史发声速度与历史跟读速度之间的比值，输出第三调参权重，以及基于所述参考发声速度与参考跟读速度之间的比值，输出第四调参权重；计算所述历史发声速度、第一调参权重、第二调参权重、第三调参权重以及第四调参权重的乘积，得到播放所述第一电子发声书对应的目标发声速度；基于所述历史跟读错误率和参考跟读错误率，调整所述第一电子发声书中目标发声内容的播放次数。4.根据权利要求3所述的方法，其特征在于，所述根据所述第一教学信息，确定所述第一电子发声书对应的历史跟读错误率，包括：从所述第一教学信息中提取所述第一电子发声书对应的跟读信息；获取所述第一电子发声书对应的音频文本；从所述音频文本中提取预设时间点对应的文字，得到多个音频单字；提取每个所述音频单字的音高值，得到多个音高值；根据所述音高值以及跟读信息，确定所述第一电子发声书对应的历史跟读错误率。
5.根据权利要求2所述的方法，其特征在于，所述基于所述第一教学信息...

【专利技术属性】
技术研发人员：宣果，容少运，
申请(专利权)人：深圳市新迪泰电子有限公司，
类型：发明
国别省市：