本申请涉及人工智能技术领域,本申请提供一种基于语音的绘图方法、装置、电子设备及存储介质。该方法包括:获取素材样本和语言文本样本,提取素材样本的素材特征信息和语言文本样本的文本特征信息,对素材特征信息和文本特征信息进行基于内容的关联处理得到并保存经过关联处理的素材样本,在接收到用户进行内容讲解的过程中的语音信息之后,通过对用户的语音信息进行识别处理得到语音内容信息,然后根据该语音内容信息在素材库中获取对应的目标素材,接着跟随与语音内容信息对应的时间信息对目标素材进行绘制。本申请通过对目标素材进行自动绘制,并且绘制过程与用户的语音信息相配合,不仅能够提高用户的讲解效率,还能够提高观众的观听体验。高观众的观听体验。高观众的观听体验。
【技术实现步骤摘要】
基于语音的绘图方法、装置、电子设备及存储介质
[0001]本申请涉及人工智能
,尤其涉及一种基于语音的绘图方法、装置、电子设备及存储介质。
技术介绍
[0002]目前,用户在远程交流、线上授课或者现场讲座等场景时,为了让听众能够更加理解自己的讲解内容,往往会在讲解的过程中将讲解的内容结合相关的图片或绘图,使得讲解的过程生动有趣,提高听众的观听体验。为了达到这个目的,用户往往需要自行准备好相关的图片,并形成对应的课件,然后按照既定的方式配合该课件中的图片进行内容的讲解,或者,用户需要在讲解的过程中手动绘制相关的图画。但是,不论采用哪种方式,都需要用户自行控制图片的显示或者自行绘制图画,影响用户的讲解效率。
技术实现思路
[0003]本申请实施例的主要目的在于提出一种基于语音的绘图方法、装置、电子设备及存储介质,旨在提高用户在讲解过程中的讲解效率。
[0004]为实现上述目的,本申请实施例的第一方面提出了一种基于语音的绘图方法,包括以下步骤:
[0005]获取素材样本和语言文本样本;
[0006]对所述素材样本进行识别处理得到素材特征信息;
[0007]对所述语言文本样本进行特征提取处理得到文本特征信息;
[0008]对所述素材特征信息和所述文本特征信息进行基于内容的关联处理,得到经过关联处理的素材样本,并将所述经过关联处理的素材样本保存到素材库中;
[0009]当接收到内容讲解过程中的语音信息,对所述语音信息进行语音识别处理,得到语音内容信息,其中,所述语音内容信息对应有时间信息;
[0010]根据所述语音内容信息从所述素材库中获取目标素材,其中,所述目标素材关联有目标文本特征信息,所述目标文本特征信息与所述语音内容信息相对应;
[0011]跟随与所述语音内容信息对应的所述时间信息对所述目标素材进行绘制。
[0012]根据本申请一些实施例提供的基于语音的绘图方法,所述获取素材样本和语言文本样本,包括:
[0013]获取用户同时输入的存在对应关系的素材样本和语言文本样本;
[0014]或者,
[0015]从数据库中获取素材样本,并获取用户对应所述素材样本输入的语言文本样本。
[0016]根据本申请一些实施例提供的基于语音的绘图方法,所述对所述素材样本进行识别处理得到素材特征信息,包括:
[0017]当所述素材样本包括文字素材,对所述素材样本进行光学符号识别处理得到素材特征信息;
[0018]或者,
[0019]当所述素材样本包括图像素材,将所述素材样本输入至图像特征提取模型进行特征提取处理,得到素材特征信息。
[0020]根据本申请一些实施例提供的基于语音的绘图方法,所述素材特征信息和所述文本特征信息的数量均为多个;所述对所述素材特征信息和所述文本特征信息进行基于内容的关联处理,得到经过关联处理的素材样本,包括:
[0021]在多个所述素材特征信息和多个所述文本特征信息中,筛选出内容对应的候选素材特征信息和候选文本特征信息;
[0022]将所述候选素材特征信息和所述候选文本特征信息相关联,得到经过关联处理的多个素材样本。
[0023]根据本申请一些实施例提供的基于语音的绘图方法,所述候选文本特征信息的数量为多个;所述根据所述语音内容信息从所述素材库中获取目标素材,包括:
[0024]根据所述语音内容信息在多个所述候选文本特征信息中查找与所述语音内容信息对应的目标文本特征信息;
[0025]根据所述目标文本特征信息在所述素材库中查找与所述目标文本特征信息相关联的目标素材。
[0026]根据本申请一些实施例提供的基于语音的绘图方法,所述跟随与所述语音内容信息对应的所述时间信息对所述目标素材进行绘制,包括:
[0027]获取与所述语音内容信息对应的所述时间信息;
[0028]跟随所述时间信息对所述目标素材进行绘制。
[0029]根据本申请一些实施例提供的基于语音的绘图方法,所述时间信息包括时刻信息和时长信息;所述跟随所述时间信息对所述目标素材进行绘制,包括:
[0030]根据所述时刻信息确定所述目标素材的开始绘制时刻;
[0031]根据所述时长信息确定所述目标素材的绘制时长;
[0032]根据所述开始绘制时刻和所述绘制时长对所述目标素材进行绘制。
[0033]为实现上述目的,本申请实施例的第二方面提出了一种基于语音的绘图装置,所述绘图装置包括:
[0034]样本获取模块,用于获取素材样本和语言文本样本;
[0035]样本识别模块,用于对所述素材样本进行识别处理得到素材特征信息;
[0036]特征提取模块,用于对所述语言文本样本进行特征提取处理得到文本特征信息;
[0037]信息关联模块,用于对所述素材特征信息和所述文本特征信息进行基于内容的关联处理,得到经过关联处理的素材样本,并将所述经过关联处理的素材样本保存到素材库中;
[0038]语音识别模块,用于当接收到内容讲解过程中的语音信息,对所述语音信息进行语音识别处理,得到语音内容信息,其中,所述语音内容信息对应有时间信息;
[0039]素材获取模块,用于根据所述语音内容信息从所述素材库中获取目标素材,其中,所述目标素材关联有目标文本特征信息,所述目标文本特征信息与所述语音内容信息相对应;
[0040]素材绘制模块,用于跟随与所述语音内容信息对应的所述时间信息对所述目标素
材进行绘制。
[0041]为实现上述目的,本申请实施例的第三方面提出了一种电子设备,所述电子设备包括存储器、处理器、存储在所述存储器上并可在所述处理器上运行的程序,所述程序被所述处理器执行时实现上述第一方面所述的基于语音的绘图方法。
[0042]为实现上述目的,本申请实施例的第四方面提出了一种存储介质,所述存储介质为计算机可读存储介质,用于计算机可读存储,所述存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现上述第一方面所述的基于语音的绘图方法。
[0043]本申请提出一种基于语音的绘图方法、装置、电子设备及存储介质,通过获取素材样本和语言文本样本,并提取素材样本的素材特征信息和语言文本样本的文本特征信息,然后对素材特征信息和文本特征信息进行基于内容的关联处理得到经过关联处理的素材样本,并且将经过关联处理的素材样本保存到素材库中,因此,在接收到用户进行内容讲解的过程中的语音信息之后,通过对用户的语音信息进行识别处理得到语音内容信息,然后根据该语音内容信息在素材库中获取对应的目标素材,接着跟随与该语音内容信息对应的时间信息对目标素材进行绘制,使得用户在讲解内容的过程中,不需要手动控制素材的显示或者手动绘制素材,由于素材会随着用户的讲解内容进行智能的呈现,因此不会导致用户在讲解过程中出现分心的情况,并且,通过目标素材的自动绘制以及用户的语音信息的配合,能够辅助用户对本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种基于语音的绘图方法,其特征在于,包括以下步骤:获取素材样本和语言文本样本;对所述素材样本进行识别处理得到素材特征信息;对所述语言文本样本进行特征提取处理得到文本特征信息;对所述素材特征信息和所述文本特征信息进行基于内容的关联处理,得到经过关联处理的素材样本,并将所述经过关联处理的素材样本保存到素材库中;当接收到内容讲解过程中的语音信息,对所述语音信息进行语音识别处理,得到语音内容信息,其中,所述语音内容信息对应有时间信息;根据所述语音内容信息从所述素材库中获取目标素材,其中,所述目标素材关联有目标文本特征信息,所述目标文本特征信息与所述语音内容信息相对应;跟随与所述语音内容信息对应的所述时间信息对所述目标素材进行绘制。2.根据权利要求1所述的基于语音的绘图方法,其特征在于,所述获取素材样本和语言文本样本,包括:获取用户同时输入的存在对应关系的素材样本和语言文本样本;或者,从数据库中获取素材样本,并获取用户对应所述素材样本输入的语言文本样本。3.根据权利要求1所述的基于语音的绘图方法,其特征在于,所述对所述素材样本进行识别处理得到素材特征信息,包括:当所述素材样本包括文字素材,对所述素材样本进行光学符号识别处理得到素材特征信息;或者,当所述素材样本包括图像素材,将所述素材样本输入至图像特征提取模型进行特征提取处理,得到素材特征信息。4.根据权利要求1所述的基于语音的绘图方法,其特征在于,所述素材特征信息和所述文本特征信息的数量均为多个;所述对所述素材特征信息和所述文本特征信息进行基于内容的关联处理,得到经过关联处理的素材样本,包括:在多个所述素材特征信息和多个所述文本特征信息中,筛选出内容对应的候选素材特征信息和候选文本特征信息;将所述候选素材特征信息和所述候选文本特征信息相关联,得到经过关联处理的多个素材样本。5.根据权利要求4所述的基于语音的绘图方法,其特征在于,所述候选文本特征信息的数量为多个;所述根据所述语音内容信息从所述素材库中获取目标素材,包括:根据所述语音内容信息在多个所述候选文本特征信息中查找与所述语音内容信息对应的目标文本特征信...
【专利技术属性】
技术研发人员:满园园,陈闽,
申请(专利权)人:中国平安人寿保险股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。