一种数字人互动方法、装置及显示设备制造方法及图纸

本申请涉及数字人技术领域，具体涉及一种数字人互动方法、装置及显示设备，方法包括：获取目标对象针对目标数字人的目标触发信息，根据目标触发信息，确定目标对象对应的目标意图及从预设互动方式集中确定出目标数字人对应的目标互动方式，根据目标互动方式和目标意图，确定目标数字人对应的目标渲染信息，利用目标渲染信息对目标数字人进行渲染，得到渲染后的目标数字人，展示渲染后的目标数字人。本申请在目标对象与目标数字人进行互动时，可根据目标对象需求选择目标数字人对应的目标互动方式，以使得目标数字人根据目标互动方式与目标对象进行互动，提高了目标对象在与目标数字人进行互动时的互动体验。字人进行互动时的互动体验。字人进行互动时的互动体验。

【技术实现步骤摘要】
一种数字人互动方法、装置及显示设备


[0001]本申请涉及数字人
，具体涉及一种数字人互动方法、装置及显示设备。

技术介绍

[0002]数字人是指具有数字化外形的虚拟人物，与具备实体的机器人不同，数字人依赖显示设备存在。在用户与数字人进行互动时，显示设备通过获取用户的相关信息，以根据相关信息使得用户与数字人进行交互。但目前用户与数字人进行互动时，通常数字人只能采用固定互动方式，使得用户在与数字人进行互动时体验性差。

技术实现思路

[0003]本申请的目的之一在于提供一种数字人互动方法，其可以实现提高用户在与数字人进行互动时的互动体验的作用；本申请的目的之二在于提供一种数字人互动装置；本申请的目的之三在于提供一种显示设备。
[0004]为了实现上述目的，第一方面，本申请实施例提供一种数字人互动方法，所述方法，包括：
[0005]获取目标对象针对目标数字人的目标触发信息；
[0006]根据所述目标触发信息，确定所述目标对象对应的目标意图及从预设互动方式集中确定出所述目标数字人对应的目标互动方式；
[0007]根据所述目标互动方式和所述目标意图，确定所述目标数字人对应的目标渲染信息；
[0008]利用所述目标渲染信息对所述目标数字人进行渲染，得到渲染后的所述目标数字人；
[0009]展示渲染后的所述目标数字人。
[0010]进一步地，所述根据所述目标场景，所述根据所述目标互动方式和所述目标意图，确定所述目标数字人对应的目标渲染信息，包括：
>[0011]在所述目标互动方式为第一互动方式时，从第一关联关系中确定出所述目标意图对应的所述目标渲染信息，所述第一关联关系中存储有多组意图与渲染信息之间的对应关系；
[0012]在所述目标渲染信息包括目标文本文件时，将所述目标文本文件转换为目标音频文件；
[0013]所述利用所述目标渲染信息对所述目标数字人进行渲染，得到渲染后的所述目标数字人，包括：
[0014]利用所述目标音频文件对所述目标数字人进行渲染，得到渲染后的所述目标数字人。
[0015]进一步地，在得到所述目标音频文件后，所述方法，还包括：
[0016]从第二关联关系中确定出所述目标音频文件对应的第一面部表情和第一肢体动
作，所述第二关联关系中存储有多组音频文件、面部表情及肢体动作之间的对应关系；
[0017]所述利用所述目标音频文件对所述目标数字人进行渲染，得到渲染后的所述目标数字人，包括：
[0018]利用所述目标音频文件、所述第一面部表情及所述第一肢体动作对所述目标数字人进行渲染，得到渲染后的所述目标数字人。
[0019]进一步地，所述音频文件对应的所述面部表情通过如下方式确定：
[0020]确定第一历史对象集及所述音频文件，所述音频文件包括多个音频帧；
[0021]针对所述第一历史对象集中的每个第一历史对象，确定所述第一历史对象在每个所述音频帧下所对应的初始面部特征；
[0022]针对每个所述音频帧，根据所有所述第一历史对象在所述音频帧下所对应的所述初始面部特征，确定所述音频帧对应的目标面部特征；
[0023]根据所有所述音频帧对应的所述目标面部特征，确定所述音频文件对应的所述面部表情。
[0024]进一步地，所述音频文件对应的所述肢体动作通过如下方式确定：
[0025]确定第二历史对象集及所述音频文件，所述音频文件包括多个音频帧；
[0026]针对所述第二历史对象集中的每个第二历史对象，确定所述第二历史对象在每个所述音频帧下所对应的初始肢体特征；
[0027]针对每个所述音频帧，根据所有所述第二历史对象在所述音频帧下所对应的所述初始肢体特征，确定所述音频帧对应的目标肢体特征；
[0028]根据所有所述音频帧对应的所述目标肢体特征，确定所述音频文件对应的所述肢体动作。
[0029]进一步地，所述根据所述目标互动方式和所述目标意图，确定所述目标数字人对应的目标渲染信息，包括：
[0030]在所述目标互动方式为第二互动方式时，对所述目标意图进行语义识别，得到语义识别结果；
[0031]从所述语义识别结果中提取出目标关键词；
[0032]根据所述目标关键词对目标引擎执行搜索操作，以得到所述目标关键词对应的目标搜索结果；
[0033]将所述目标搜索结果确定为所述目标数字人对应的目标渲染信息。
[0034]进一步地，根据所述目标触发信息，确定所述目标对象对应的目标意图，包括：
[0035]在所述目标触发信息为第二面部表情时，对所述第二面部表情进行识别，得到第一识别结果；
[0036]根据所述第一识别结果，确定所述目标对象对应的目标意图；或，
[0037]在所述目标触发信息为第二肢体动作时，对所述第二肢体动作进行识别，得到第二识别结果；
[0038]根据所述第二识别结果，确定所述目标对象对应的目标意图。
[0039]进一步地，所述目标数字人通过如下方式确定：
[0040]展示目标界面，所述目标界面中展示有多个数字人；
[0041]获取针对所述目标界面的目标操作指令，所述目标操作指令中携带有所述目标数
字人对应的目标标识；
[0042]从多个所述数字人中确定出与所述目标标识对应的所述目标数字人。
[0043]为了实现上述目的，第二方面，本申请实施例提供了一种数字人交互装置，所述装置，包括：
[0044]获取模块，用于获取目标对象针对目标数字人的目标触发信息；
[0045]确定模块，用于根据所述目标触发信息，确定所述目标对象对应的目标意图及从预设互动方式集中确定出所述目标数字人对应的目标互动方式；
[0046]所述确定模块，还用于根据所述目标互动方式和所述目标意图，确定所述目标数字人对应的目标渲染信息；
[0047]渲染模块，用于利用所述目标渲染信息对所述目标数字人进行渲染，得到渲染后的所述目标数字人；
[0048]展示模块，用于展示渲染后的所述目标数字人。
[0049]为了实现上述目的，第三方面，本申请实施例提供了一种显示设备，该显示设备包括处理器和存储器，所述处理器用于执行所述存储器中存储的数字人互动程序，以实现如上所述的数字人互动方法。
[0050]本申请的有益效果：通过获取目标对象针对目标数字人的目标触发信息，根据目标触发信息，确定目标对象对应的目标意图及从预设互动方式集中确定出目标数字人对应的目标互动方式，根据目标互动方式和目标意图，确定目标数字人对应的目标渲染信息，利用目标渲染信息对目标数字人进行渲染，得到渲染后的目标数字人，展示渲染后的目标数字人，从而在目标对象与目标数字人进行互动时，可根据目标对象需求选择目标数字人对应的目标互动方式，以使得目标数字人根据目标互动方式与目标对象进行互动，提高了目标对象在与目标数字人进行互动时的互动体验。
...

【技术保护点】

【技术特征摘要】
1.一种数字人互动方法，其特征在于，所述方法，包括：获取目标对象针对目标数字人的目标触发信息；根据所述目标触发信息，确定所述目标对象对应的目标意图及从预设互动方式集中确定出所述目标数字人对应的目标互动方式；根据所述目标互动方式和所述目标意图，确定所述目标数字人对应的目标渲染信息；利用所述目标渲染信息对所述目标数字人进行渲染，得到渲染后的所述目标数字人；展示渲染后的所述目标数字人。2.根据权利要求1所述的方法，其特征在于，所述根据所述目标互动方式和所述目标意图，确定所述目标数字人对应的目标渲染信息，包括：在所述目标互动方式为第一互动方式时，从第一关联关系中确定出所述目标意图对应的所述目标渲染信息，所述第一关联关系中存储有多组意图与渲染信息之间的对应关系；在所述目标渲染信息包括目标文本文件时，将所述目标文本文件转换为目标音频文件；所述利用所述目标渲染信息对所述目标数字人进行渲染，得到渲染后的所述目标数字人，包括：利用所述目标音频文件对所述目标数字人进行渲染，得到渲染后的所述目标数字人。3.根据权利要求2所述的方法，其特征在于，在得到所述目标音频文件后，所述方法，还包括：从第二关联关系中确定出所述目标音频文件对应的第一面部表情和第一肢体动作，所述第二关联关系中存储有多组音频文件、面部表情及肢体动作之间的对应关系；所述利用所述目标音频文件对所述目标数字人进行渲染，得到渲染后的所述目标数字人，包括：利用所述目标音频文件、所述第一面部表情及所述第一肢体动作对所述目标数字人进行渲染，得到渲染后的所述目标数字人。4.根据权利要求3所述的方法，其特征在于，所述音频文件对应的所述面部表情通过如下方式确定：确定第一历史对象集及所述音频文件，所述音频文件包括多个音频帧；针对所述第一历史对象集中的每个第一历史对象，确定所述第一历史对象在每个所述音频帧下所对应的初始面部特征；针对每个所述音频帧，根据所有所述第一历史对象在所述音频帧下所对应的所述初始面部特征，确定所述音频帧对应的目标面部特征；根据所有所述音频帧对应的所述目标面部特征，确定所述音频文件对应的所述面部表情。5.根据权利要求3所述的方法，其特征在于，所述音频文件对应的所述肢体动作通过如下方式确定：确定第二历史对象集及所述音频文件，所述音频文件包括多个音频帧；针对所述第二历史对象集中的...

【专利技术属性】
技术研发人员：危平安，
申请(专利权)人：重庆长安汽车股份有限公司，
类型：发明
国别省市：