System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 知识问答方法、装置、电子设备及存储介质制造方法及图纸_技高网

知识问答方法、装置、电子设备及存储介质制造方法及图纸

技术编号:44399327 阅读:0 留言:0更新日期:2025-02-25 10:12
本发明专利技术涉及知识问答技术领域,提供一种知识问答方法、装置、电子设备及存储介质,方法包括:获取第一用户的待回答问题;基于知识库确定与待回答问题对应的目标知识素材;基于目标知识素材,确定目标回答;基于目标回答,生成以第二用户作为虚拟人形象的目标虚拟人视频;目标虚拟人视频中的音频是以第二用户的声纹对目标回答进行语音合成得到的;知识库基于第二用户的音频、文本和文档中的至少一种构建。将个性化语音合成与知识问答系统进行统一,避免现有技术中二者分离带来的体验割裂问题,确保用户从问答到语音输出的整体流程流畅无缝,提高用户的使用体验;灵活利用第二用户的知识库,对用户的个性特征进行深度适配,提高用户的使用体验。

【技术实现步骤摘要】

本专利技术涉及知识问答,尤其涉及一种知识问答方法、装置、电子设备及存储介质。


技术介绍

1、目前,语音合成、知识检索、大语言模型(large language model,llm)等技术已广泛应用于智能交互领域。

2、然而,现有的语音交互和知识问答系统多为独立实现,且大多仅支持通用化的响应模式,缺乏对用户个性特征的深度适配。

3、随着个性化需求在个人电子助理、智能教育、知识付费等应用中的日益增长,这一局限性愈发突出,使得现有技术难以满足用户在交互中获得精准、自然的体验需求。


技术实现思路

1、本专利技术提供一种知识问答方法、装置、电子设备及存储介质,用以解决现有技术中语音交互和知识问答系统多为独立实现,且大多仅支持通用化的响应模式,缺乏对用户个性特征的深度适配,降低了用户的使用体验的缺陷。

2、本专利技术提供一种知识问答方法,包括如下步骤:

3、获取第一用户的待回答问题;

4、基于知识库确定与所述待回答问题对应的目标知识素材;

5、基于所述目标知识素材,确定所述待回答问题的目标回答;

6、基于所述目标回答,生成以第二用户作为虚拟人形象的目标虚拟人视频;

7、所述目标虚拟人视频中的音频是以所述第二用户的声纹对所述目标回答进行语音合成得到的;所述知识库基于所述第二用户的音频、文本和文档中的至少一种构建。

8、根据本专利技术提供的一种知识问答方法,所述基于所述目标知识素材,确定所述待回答问题的目标回答,包括:

9、基于所述目标知识素材,构建问题提示文本;

10、基于知识问答模型,应用所述问题提示文本,生成所述目标回答。

11、根据本专利技术提供的一种知识问答方法,所述基于所述目标知识素材,构建问题提示文本,包括:

12、基于所述目标知识素材、回答风格、所属领域、所述第一用户的情绪信息和所述待回答问题中的至少两种,构建所述问题提示文本。

13、根据本专利技术提供的一种知识问答方法,所述基于所述目标回答,生成以第二用户作为虚拟人形象的目标虚拟人视频,包括:

14、基于所述第二用户的虚拟人形象,以及所述目标回答,生成所述目标虚拟人视频;

15、所述虚拟人形象是对所述第二用户进行形象采集和声纹采集构建的。

16、根据本专利技术提供的一种知识问答方法,所述基于所述第二用户的虚拟人形象,以及所述目标回答,生成所述目标虚拟人视频,之后还包括:

17、确定所述目标回答的播报时长;

18、在所述播报时长大于预设阈值的情况下,对所述目标回答进行情绪识别,得到情绪识别结果;

19、基于所述情绪识别结果,优化所述目标虚拟人视频。

20、根据本专利技术提供的一种知识问答方法,所述基于所述情绪识别结果,优化所述目标虚拟人视频,包括:

21、基于所述情绪识别结果,优化所述目标虚拟人视频中的合成音频,以及所述虚拟人形象的表情和/或动作。

22、根据本专利技术提供的一种知识问答方法,所述基于知识库确定与所述待回答问题对应的目标知识素材,包括:

23、基于知识库确定与所述待回答问题对应的候选知识素材;

24、对所述候选知识素材进行知识筛选,得到所述目标知识素材。

25、本专利技术还提供一种知识问答装置,包括如下模块:

26、获取单元,用于获取第一用户的待回答问题;

27、第一确定单元,用于基于知识库确定与所述待回答问题对应的目标知识素材;

28、第二确定单元,用于基于所述目标知识素材,确定所述待回答问题的目标回答;

29、生成单元,用于基于所述目标回答,生成以第二用户作为虚拟人形象的目标虚拟人视频;

30、所述目标虚拟人视频中的音频是以所述第二用户的声纹对所述目标回答进行语音合成得到的;所述知识库基于所述第二用户的音频、文本和文档中的至少一种构建。

31、本专利技术还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一种所述知识问答方法。

32、本专利技术还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述任一种所述知识问答方法。

33、本专利技术还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述任一种所述知识问答方法。

34、本专利技术提供的知识问答方法、装置、电子设备及存储介质,获取第一用户的待回答问题,基于知识库确定与待回答问题对应的目标知识素材,再基于目标知识素材,确定待回答问题的目标回答,最后,基于目标回答,生成以第二用户作为虚拟人形象的目标虚拟人视频,其中,知识库基于第二用户的音频、文本和文档中的至少一种构建,目标虚拟人视频中的音频是以第二用户的声纹对目标回答进行语音合成得到的,一方面,将个性化语音合成与知识问答系统进行统一,避免现有技术中二者分离带来的体验割裂问题,确保用户从问答到语音输出的整体流程流畅无缝,提高用户的使用体验;另一方面,在知识检索和回答生成中灵活利用第二用户的知识库,从而对第一用户的个性特征进行深度适配,进一步提高用户的使用体验。

本文档来自技高网...

【技术保护点】

1.一种知识问答方法,其特征在于,包括:

2.根据权利要求1所述的知识问答方法,其特征在于,所述基于所述目标知识素材,确定所述待回答问题的目标回答,包括:

3.根据权利要求2所述的知识问答方法,其特征在于,所述基于所述目标知识素材,构建问题提示文本,包括:

4.根据权利要求1所述的知识问答方法,其特征在于,所述基于所述目标回答,生成以第二用户作为虚拟人形象的目标虚拟人视频,包括:

5.根据权利要求4所述的知识问答方法,其特征在于,所述基于所述第二用户的虚拟人形象,以及所述目标回答,生成所述目标虚拟人视频,之后还包括:

6.根据权利要求5所述的知识问答方法,其特征在于,所述基于所述情绪识别结果,优化所述目标虚拟人视频,包括:

7.根据权利要求1至6中任一项所述的知识问答方法,其特征在于,所述基于知识库确定与所述待回答问题对应的目标知识素材,包括:

8.一种知识问答装置,其特征在于,包括:

9.一种电子设备,包括存储器、处理器及存储在所述存储器上并在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述知识问答方法。

10.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述知识问答方法。

...

【技术特征摘要】

1.一种知识问答方法,其特征在于,包括:

2.根据权利要求1所述的知识问答方法,其特征在于,所述基于所述目标知识素材,确定所述待回答问题的目标回答,包括:

3.根据权利要求2所述的知识问答方法,其特征在于,所述基于所述目标知识素材,构建问题提示文本,包括:

4.根据权利要求1所述的知识问答方法,其特征在于,所述基于所述目标回答,生成以第二用户作为虚拟人形象的目标虚拟人视频,包括:

5.根据权利要求4所述的知识问答方法,其特征在于,所述基于所述第二用户的虚拟人形象,以及所述目标回答,生成所述目标虚拟人视频,之后还包括:

6.根据权利要求5所述的知识问...

【专利技术属性】
技术研发人员:黄爽龙明康产拙李飞潘青华何山蔡明琦高建清
申请(专利权)人:科大讯飞股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1