本申请提供了一种生成虚拟数字人的方法、装置、设备及存储介质，属于计算机技术领域。该方法包括：基于多个对象模型的外形特征之间的相似度，构建外形关系图谱；对于外形关系图谱中的任一节点，基于节点的多个邻居节点所表示的外形特征和与节点相连接的多条边的权重，对节点所表示的对象模型的外形特征进行调整；对对象模型进行渲染，将对象模型的动作捕捉数据绑定到对象模型的多个骨骼关键点，得到虚拟数字人。上述技术方案能够生成多个视觉协调一致性的虚拟数字人，以使多个虚拟数字人同屏展示时，多个虚拟数字人的外形特征较为协调，避免了虚拟数字人的身体形状或者身体比例差距过大的现象发生，提高了多个虚拟数字人之间的视觉协调性。
【技术实现步骤摘要】
本申请涉及计算机，特别涉及一种生成虚拟数字人的方法、装置、设备及存储介质。
技术介绍
1、随着计算机技术的发展，虚拟数字人在虚拟现实、增强现实以及电子游戏等领域得到了广泛应用。其中，虚拟数字人是指运用数字技术创造出来的，与人类形象接近的数字化人物形象。虚拟数字人不仅具有人类的外形，还具有与人类相似的面部表情和肢体动作。相关技术中，生成虚拟数字人的过程中，通常会关注单个虚拟数字人的外貌细节和肢体动作协调性等。由于不同的虚拟数字人具有不同的外貌和不同的肢体动作，因此，在生成同屏展示的多个虚拟数字人时，如何保证多个虚拟数字人之间的视觉协调性，是一个需要解决的技术问题。
技术实现思路
1、本申请实施例提供了一种生成虚拟数字人的方法、装置、设备及存储介质，能够生成外形特征较为协调的多个虚拟数字人。所述技术方案如下：
2、一方面，提供了一种生成虚拟数字人的方法，所述方法包括：
3、基于多个对象模型的外形特征之间的相似度，构建外形关系图谱，所述对象模型为虚拟场景中用于表示虚拟数字人的三维模型，所述外形特征包括对应的对象模型的形状和身体比例，所述外形关系图谱中的节点用于表示对象模型的外形特征，所述外形关系图谱中的边用于表示对象模型的外形特征之间的相似度；
4、对于所述外形关系图谱中的任一节点，基于所述节点的多个邻居节点所表示的外形特征和与所述节点相连接的多条边的权重，对所述节点所表示的对象模型的外形特征进行调整，所述边的权重与所述边所表示的相似度正相关；
5、对所述对象模型进行渲染，将所述对象模型的动作捕捉数据绑定到所述对象模型的多个骨骼关键点，得到虚拟数字人，所述动作捕捉数据用于生成所述虚拟数字人的肢体动作。
6、另一方面，提供了一种生成虚拟数字人的装置，所述装置包括：
7、构建模块，用于基于多个对象模型的外形特征之间的相似度，构建外形关系图谱，所述对象模型为虚拟场景中用于表示虚拟数字人的三维模型，所述外形特征包括对应的对象模型的形状和身体比例，所述外形关系图谱中的节点用于表示对象模型的外形特征，所述外形关系图谱中的边用于表示对象模型的外形特征之间的相似度；
8、第一调整模块，用于对于所述外形关系图谱中的任一节点，基于所述节点的多个邻居节点所表示的外形特征和与所述节点相连接的多条边的权重，对所述节点所表示的对象模型的外形特征进行调整，所述边的权重与所述边所表示的相似度正相关；
9、渲染模块，用于对所述对象模型进行渲染，将所述对象模型的动作捕捉数据绑定到所述对象模型的多个骨骼关键点，得到虚拟数字人，所述动作捕捉数据用于生成所述虚拟数字人的肢体动作。
10、在一些实施例中，所述第一调整模块，包括：
11、确定单元，用于对于所述外形关系图谱中的任一节点，基于所述节点所表示的外形特征和所述节点的多个邻居节点所表示的外形特征，确定多个中间调整幅度，所述多个中间调整幅度与所述多个邻居节点一一对应，所述中间调整幅度用于表示将所述节点所表示的外形特征调整为对应的邻居节点所表示的外形特征所需的调整幅度；
12、求和单元，用于基于所述多条边的权重，对所述多个中间调整幅度进行加权求和，得到所述节点的目标调整幅度；
13、调整单元，用于按照所述目标调整幅度，对所述节点所表示的对象模型的外形特征进行调整。
14、在一些实施例中，所述对象模型由多个单位模型组成，所述目标调整幅度用于指示所述多个单位模型的形状调整幅度和形状调整方向；
15、所述调整单元，用于对于所述对象模型中的任一单位模型，基于所述目标调整幅度确定所述单位模型的形状调整幅度和形状调整方向；按照所述形状调整幅度，沿所述形状调整方向调整所述单位模型。
16、在一些实施例中，所述装置还包括：
17、几何分析模块，用于对于任一对象模型，对所述对象模型进行几何分析，得到所述对象模型的外形特征；
18、特征提取模块，用于对所述对象模型的外形特征进行特征提取，得到所述对象模型的特征向量，所述特征向量包括用于表示所述对象模型的多个骨骼关键点的位置坐标的元素和用于表示所述对象模型的多个部位的尺寸的元素；
19、相似度确定模块，用于将任意两个对象模型的特征向量之间的相似度，确定为所述两个对象模型的外形特征之间的相似度。
20、在一些实施例中，所述特征提取模块，用于基于所述对象模型的外形特征，对所述对象模型的多个骨骼关键点进行特征提取，得到位置特征向量，所述位置特征向量中的元素用于表示所述多个骨骼关键点的位置坐标；基于所述对象模型的外形特征，对所述对象模型的多个部位进行特征提取，得到尺寸特征向量，所述尺寸特征向量中的元素用于表示所述多个部位的尺寸；对所述位置特征向量和所述尺寸特征向量进行拼接，得到所述对象模型的特征向量。
21、在一些实施例中，所述构建模块，用于对于任一对象模型，响应于得到所述对象模型的外形特征，在所述外形关系图谱中添加第一节点，所述第一节点用于表示所述对象模型的外形特征；响应于得到所述对象模型的外形特征和其他对象模型的外形特征之间的相似度，在所述外形关系图谱中连接所述第一节点和第二节点，所述第二节点用于表示所述其他对象模型的外形特征。
22、在一些实施例中，所述装置还包括：
23、第二调整模块，用于通过模型编辑器对所述对象模型的外形特征进行参数化，得到一组外形参数，所述模型编辑器用于调整对象模型的外形特征，所述外形参数用于描述所述对象模型的外形特征；对于任一外形参数，在所述外形参数的取值不属于预设范围的情况下，将所述外形参数的取值调整至所述预设范围内；基于调整后的外形参数，通过所述模型编辑器对所述对象模型的外形特征进行调整。
24、在一些实施例中，所述渲染模块，用于基于所述虚拟场景中所述对象模型和观察位置之间的距离，确定渲染所述对象模型的细节级别，所述观察位置为拍摄所述对象模型的摄像机所在的位置，所述细节级别与所述对象模型中待渲染的单位模型的数量正相关，所述细节级别与所述距离负相关；按照所述细节级别，对所述对象模型中的多个单位模型进行渲染。
25、在一些实施例中，所述装置还包括：
26、数据获取模块，用于获取每个对象模型的动作捕捉数据，所述动作捕捉数据记录有对象模型的多个骨骼关键点在不同时刻的位置信息；确定所述多个对象模型的动作捕捉数据之间是否存在相似度大于相似度阈值的相似数据片段；在存在相似数据片段的情况下，对所述多个对象模型的动作捕捉数据中对应的相似数据片段进行融合，得到目标数据片段；将所述多个对象模型的动作捕捉数据中对应的相似数据片段替换为所述目标数据片段。
27、在一些实施例中，所述装置还包括：
28、确定模块，用于对于任一对象模型，确定所述对象模型的动作捕捉数据中相邻时刻之间的时间间隔；
29、插值模块，用于在存在任意相邻的两个时刻之间的时间间隔大于本文档来自技高网
...
【技术保护点】
1.一种生成虚拟数字人的方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述对于所述外形关系图谱中的任一节点，基于所述节点的多个邻居节点所表示的外形特征和与所述节点相连接的多条边的权重，对所述节点所表示的对象模型的外形特征进行调整，包括：
3.根据权利要求2所述的方法，其特征在于，所述对象模型由多个单位模型组成，所述目标调整幅度用于指示所述多个单位模型的形状调整幅度和形状调整方向；
4.根据权利要求1所述的方法，其特征在于，所述方法还包括：
5.根据权利要求4所述的方法，其特征在于，所述对所述对象模型的外形特征进行特征提取，得到所述对象模型的特征向量，包括：
6.根据权利要求1所述的方法，其特征在于，所述基于多个对象模型的外形特征之间的相似度，构建外形关系图谱，包括：
7.根据权利要求1所述的方法，其特征在于，所述对所述节点所表示的对象模型的外形特征进行调整之后，所述方法还包括：
8.根据权利要求1所述的方法，其特征在于，所述对所述对象模型进行渲染，包括：
9.根据权利要求1所述的方法，其特征在于，所述方法还包括：
10.根据权利要求9所述的方法，其特征在于，所述方法还包括：
11.根据权利要求9所述的方法，其特征在于，所述方法还包括：
12.一种生成虚拟数字人的装置，其特征在于，所述装置包括：
13.一种计算机设备，其特征在于，所述计算机设备包括处理器和存储器，所述存储器用于存储至少一段计算机程序，所述至少一段计算机程序由所述处理器加载并执行权利要求1至11任一项权利要求所述的生成虚拟数字人的方法。
14.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质用于存储至少一段计算机程序，所述至少一段计算机程序用于执行权利要求1至11任一项权利要求所述的生成虚拟数字人的方法。
15.一种计算机程序产品，包括计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至11任一项权利要求所述的生成虚拟数字人的方法。
...
【技术特征摘要】
1.一种生成虚拟数字人的方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述对于所述外形关系图谱中的任一节点，基于所述节点的多个邻居节点所表示的外形特征和与所述节点相连接的多条边的权重，对所述节点所表示的对象模型的外形特征进行调整，包括：
3.根据权利要求2所述的方法，其特征在于，所述对象模型由多个单位模型组成，所述目标调整幅度用于指示所述多个单位模型的形状调整幅度和形状调整方向；
4.根据权利要求1所述的方法，其特征在于，所述方法还包括：
5.根据权利要求4所述的方法，其特征在于，所述对所述对象模型的外形特征进行特征提取，得到所述对象模型的特征向量，包括：
6.根据权利要求1所述的方法，其特征在于，所述基于多个对象模型的外形特征之间的相似度，构建外形关系图谱，包括：
7.根据权利要求1所述的方法，其特征在于，所述对所述节点所表示的对象模型的外形特征进行调整之后，所述方法还包括：
8.根据权利要求1所...
【专利技术属性】
技术研发人员：于鑫，
申请(专利权)人：北京声智科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。