System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本申请涉及数字人,特别涉及一种数字人生成方法、装置、设备及程序产品。
技术介绍
1、数字人(digital human)是运用数字技术创造出来的、与人类形象接近的数字化人物形象。随着数字人技术的不断发展,数字人被应用于越来越多日常场景。
2、相关技术中,用户使用设备提供的数字人功能时,设备在屏幕中显示数字人形象,并控制数字人与用户进行语音交互。并且,用户可以根据个人喜好,从多个预置的候选数字人形象中选择符合个人喜好的数字人形象,或者,从多种预置数字人语音中选取符合个人喜好的数字人语音。
3、相关技术中的数字人形象和数字人语音均为预置,无法满足不同用户的个性化需求。
技术实现思路
1、本申请提供了一种数字人生成方法、装置、设备及程序产品,可以提高数字人的个性化程度。所述技术方案如下:
2、一方面,本申请实施例提供了一种数字人生成方法,所述方法包括:
3、获取用户的人脸图像;
4、基于所述人脸图像中人脸的面部特征,生成数字人的数字人形象,所述数字人形象是具有所述面部特征的虚拟形象;
5、基于所述人脸图像中人脸的人脸表情,确定所述数字人的语音情感。
6、另一方面,本申请实施例提供了一种数字人生成装置,所述装置包括:
7、获取模块,用于获取用户的人脸图像;
8、生成模块,用于基于所述人脸图像中人脸的面部特征,生成数字人的数字人形象,所述数字人形象是具有所述面部特征的虚拟形象;
...【技术保护点】
1.一种数字人生成方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述数字人形象由形象生成模型生成,所述形象生成模型包括卷积神经网络和生成对抗网络;
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
4.根据权利要求3所述的方法,其特征在于,所述基于所述样本数字人形象以及所述样本面部特征,确定所述形象生成模型的模型损失,包括:
5.根据权利要求2所述的方法,其特征在于,所述方法还包括:
6.根据权利要求2所述的方法,其特征在于,所述基于所述人脸图像中人脸的人脸表情,确定所述数字人的语音情感,包括:
7.根据权利要求1至6任一所述的方法,其特征在于,所述方法还包括:
8.根据权利要求7所述的方法,其特征在于,所述基于所述语音情感和所述预录制语音,生成所述数字人的语音包,包括:
9.根据权利要求8所述的方法,其特征在于,所述基于所述语音情感对所述语音特征中的韵律特征进行特征调整,得到所述数字人的所述语音包,包括:
10.根据权利要求7所述的
11.一种数字人生成装置,其特征在于,所述装置包括:
12.一种计算机设备,其特征在于,所述计算机设备包括:处理器和存储器,所述存储器中存储有至少一段程序;所述处理器,用于执行所述存储器中的所述至少一段程序以实现上述如权利要求1至10任一所述的数字人生成方法。
13.一种计算机可读存储介质,其特征在于,所述可读存储介质中存储有可执行指令,所述可执行指令由处理器加载并执行以实现上述如权利要求1至10任一所述的数字人生成方法。
14.一种计算机程序产品,其特征在于,所述计算机程序产品包括计算机指令,所述计算机指令存储在计算机可读存储介质中,处理器从所述计算机可读存储介质读取并执行所述计算机指令,以实现上述如权利要求1至10任一所述的数字人生成方法。
...【技术特征摘要】
1.一种数字人生成方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述数字人形象由形象生成模型生成,所述形象生成模型包括卷积神经网络和生成对抗网络;
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
4.根据权利要求3所述的方法,其特征在于,所述基于所述样本数字人形象以及所述样本面部特征,确定所述形象生成模型的模型损失,包括:
5.根据权利要求2所述的方法,其特征在于,所述方法还包括:
6.根据权利要求2所述的方法,其特征在于,所述基于所述人脸图像中人脸的人脸表情,确定所述数字人的语音情感,包括:
7.根据权利要求1至6任一所述的方法,其特征在于,所述方法还包括:
8.根据权利要求7所述的方法,其特征在于,所述基于所述语音情感和所述预录制语音,生成所述数字人的语音包,包括:
9.根据权利要求8所述的方法,其特征在于,所述基于所述语音...
【专利技术属性】
技术研发人员:王峣,肖龙珠,张宁,关蕊,
申请(专利权)人:京东方科技集团股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。