【技术实现步骤摘要】
本公开涉及数字人领域，尤其涉及一种控制方法、装置、电子设备及存储介质。
技术介绍
1、为了提高虚拟形象语音播报和面部动画的协调度，相关技术中通过语音作为驱动源来驱动虚拟形象的面部动作。但是，相关技术驱动虚拟形象说话时的面部的方法对聋哑人不够友好，导致聋哑人的体验感较差。
技术实现思路
1、本公开提供了一种控制方法、装置、电子设备及存储介质。
2、根据本公开的第一方面，提供了一种控制方法，所述方法包括：获取目标用户的肢体动作，并获取目标用户对应的目标虚拟形象；将所述肢体动作转换为语言信息；所述语言信息包括情感信息和文本信息；基于所述情感信息确定所述语言信息对应的面部表情，并基于所述面部表情和所述文本信息确定所述语言信息对应的面部动作；驱动所述目标虚拟形象执行所述面部动作，并基于所述文本信息和所述情感信息进行语音播报。
3、根据本公开的第二方面，提供了一种控制装置，装置包括：获取模块，用于获取目标用户的肢体动作，并获取所述目标用户对应的目标虚拟形象；转换模块，用于将所述肢体动作转换为语言信息，所述语言信息包括情感信息和文本信息；所述转换模块，还用于基于所述情感信息确定所述语言信息对应的面部表情，并基于所述面部表情和所述文本信息确定所述语言信息对应的面部动作；驱动模块，用于驱动所述目标虚拟形象执行所述面部动作，并基于所述文本信息和所述情感信息进行语音播报。
4、根据本公开的第三方面，提供了一种电子设备。该电子设备包括：存储器和处理器，所述存储器上存储有
5、根据本公开的第四方面，提供了一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现本公开的上述方法。
6、根据本公开的第五方面，提供了一种计算机程序产品，该计算机程序产品包括：计算机程序代码，当该计算机程序代码在计算机上运行时，使得该计算机执行上述第一方面或第一方面任意一种可能的实现方式中的方法。
7、本公开实施例提供的控制方法、装置、电子设备及存储介质，通过获取目标用户的肢体动作，并获取目标用户对应的目标虚拟形象；将肢体动作转换为语言信息，语言信息包括情感信息和文本信息。基于情感信息确定语言信息对应的面部表情，并基于面部表情和文本信息确定语言信息对应的面部动作。驱动目标虚拟形象执行面部动作，并基于文本信息和情感信息进行语音播报，能够将用户的肢体动作转换为语言信息，进一步得到该语言信息对应的面部动作，根据语言信息驱动并驱动用户对应的虚拟形象进行发音并执行该面部动作，实现了通过肢体动作来驱动虚拟形象的面部，用户不用发出声音也能驱动对应的虚拟形象面部，提高了用户的体验感。
本文档来自技高网...【技术保护点】
1.一种控制方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述基于所述文本信息和所述情感信息进行语音播报，包括：
3.根据权利要求2所述的方法，其特征在于，所述文本信息包括音素序列；所述方法还包括：
4.根据权利要求3所述的方法，其特征在于，所述基于所述第一发音时长调整所述模板发音动作，并基于所述音素序列对调整后的发音动作进行连接，得到所述面部动作，包括：
5.根据权利要求3所述的方法，其特征在于，所述方法还包括：
6.根据权利要求1-5任一所述的方法，其特征在于，所述方法还包括：
7.一种控制装置，其特征在于，所述装置包括：
8.一种电子设备，其特征在于，包括：
9.一种计算机可读存储介质，其特征在于，当所述计算机可读存储介质中的指令由电子设备的处理器执行时，使得所述电子设备能够执行如权利要求1-6中任一项所述的方法。
10.一种计算机程序产品，其特征在于，包括计算机程序，所述计算机程序被处理器执行时实现权利要求1至6任一所述的方法。
【技术特征摘要】
1.一种控制方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述基于所述文本信息和所述情感信息进行语音播报，包括：
3.根据权利要求2所述的方法，其特征在于，所述文本信息包括音素序列；所述方法还包括：
4.根据权利要求3所述的方法，其特征在于，所述基于所述第一发音时长调整所述模板发音动作，并基于所述音素序列对调整后的发音动作进行连接，得到所述面部动作，包括：
5.根据权利要求3所述的方法，其特征在于，所述方法还包括...
【专利技术属性】
技术研发人员：李宏龙，
申请(专利权)人：咪咕文化科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。