交互信息处理方法、装置、终端以及存储介质制造方法及图纸

本公开提供了一种交互信息处理方法、装置、终端以及存储介质，涉及互联网技术领域，其中的方法包括：终端从资料服务器获取绘文字或者绘文字和对应的声音数据；终端基于互动信息处理模式，使用绘文字或者绘文字和对应的声音数据生成互动内容并进行显示；终端将互动内容发送给直播服务器，以使直播服务器将互动内容发送给加入视频直播的其他终端进行显示。本公开的方法、装置、终端以及存储介质，通过将绘文字和声音数据存储在服务器端，对传输流量要求比较低，并且能够便于绘文字和声音数据更新、扩展；可以支持大量音频并发，提供丰富的声光效果，并可以不影响主播的播出效果；丰富了用户之间的交互信息，提高了用户体验。提高了用户体验。提高了用户体验。

【技术实现步骤摘要】
交互信息处理方法、装置、终端以及存储介质


[0001]本公开涉及互联网
，尤其涉及一种交互信息处理方法、装置、终端以及存储介质。

技术介绍

[0002]随着网络技术的发展，网络直播平台的应用越来越广泛，能够应用于视频会议、RCS、直播、在线教育等业务领域中。网络直播平台中可以包括主播和用户，主播可以在直播间中进行网络直播，而用户可以进入该直播间并观看该主播进行网络直播的内容。在用户观看的过程中，用户可以向该主播进行点赞、关注或赠送虚拟礼物等，并可以交互信息。交互的信息可以包括图片、音频等，由于图片和音频通常为用户在本地预置，所以用户对于图片和音频的更新、扩展较为困难，影响用户体验。

技术实现思路

[0003]有鉴于此，本专利技术要解决的一个技术问题是提供一种交互信息处理方法、装置、终端以及存储介质。
[0004]根据本公开的第一方面，提供一种交互信息处理方法，包括：终端在视频直播的过程中，确定互动信息处理模式；所述终端从资料服务器获取绘文字或者绘文字和对应的声音数据；其中，所述资料服务器预存有所述绘文字和所述声音数据；所述终端基于所述互动信息处理模式，使用所述绘文字或者所述绘文字和对应的声音数据生成互动内容并进行显示；所述终端将所述互动内容发送给直播服务器，以使所述直播服务器将所述互动内容发送给加入视频直播的其他终端进行显示。
[0005]可选地，所述绘文字包括：表情符号；所述声音数据包括：MIDI音频、波表信息；所述声音数据存储在对应的XMF文件中；所述资料服务器预先建立所述绘文字ID与所述XMF文件之间的关联关系，并存储所述关联关系。
[0006]可选地，所述互动信息处理模式包括：增加绘文字显示模式；所述终端从资料服务器获取绘文字或者绘文字和对应的声音数据包括：所述终端获取绘文字ID，根据所述绘文字ID从所述资料服务器获取绘文字；所述终端基于所述互动信息处理模式，使用所述绘文字或者所述绘文字和对应的声音数据生成互动内容并进行显示包括：所述终端基于所述增加绘文字模式，使用所述绘文字生成所述互动内容并在显示区域内显示。
[0007]可选地，所述互动信息处理模式包括：背景迭加绘文字显示模式；所述终端为直播主持人终端；所述终端从资料服务器获取绘文字或者绘文字和对应的声音数据包括：所述直播主持人终端获取绘文字ID，根据所述绘文字ID从所述资料服务器获取绘文字以及关联的XMF文件；所述终端基于所述互动信息处理模式，使用所述绘文字或者所述绘文字和对应的声音数据生成互动内容并进行显示包括：所述直播主持人终端根据所述绘文字和关联的XMF文件生成所述互动内容；所述直播主持人终端在所述本地视频图像中确定背景图层和前景图层；所述直播主持人终端基于所述背景迭加绘文字显示模式，在所述背景图层和所
述前景图层之间添加互动内容层，在所述互动内容层中显示所述互动内容。
[0008]可选地，所述互动信息处理模式包括：绘文字和音频合成模式；所述终端从资料服务器获取绘文字或者绘文字和对应的声音数据包括：所述终端获取绘文字ID，根据所述绘文字ID从所述资料服务器获取绘文字以及关联的XMF文件；所述终端基于所述互动信息处理模式，使用所述绘文字或者所述绘文字和对应的声音数据生成互动内容并进行显示包括：所述终端基于所述绘文字和音频合成模式，使用所述绘文字以及关联的XMF文件生成所述互动内容并进行显示。
[0009]可选地，所述互动信息处理模式包括：绘文字音效处理模式；所述终端为直播客户终端，所述终端从资料服务器获取绘文字或者绘文字和对应的声音数据包括：所述直播客户终端获取绘文字ID，根据所述绘文字ID从所述资料服务器获取绘文字以及关联的XMF文件；所述终端基于所述互动信息处理模式，使用所述绘文字或者所述绘文字和对应的声音数据生成互动内容并进行显示包括：所述直播客户终端从所述XMF文件中提取波表信息，基于所述波表信息随机分配音高并进行和弦处理，生成音频信息；所述直播客户终端基于所述绘文字音效处理模式，使用所述绘文字以及所述音频信息生成所述互动内容并进行显示。
[0010]可选地，所述终端根据所述互动内容生成弹幕内容并进行显示；所述终端将所述弹幕内容发送给直播服务器，以使所述直播服务器将所述弹幕内容发送给所述其他终端进行显示。
[0011]根据本公开的第二方面，提供一种交互信息处理装置，应用于终端中，包括：模式确定模块，用于在视频直播的过程中，确定互动信息处理模式；数据获取模块，用于从资料服务器获取绘文字或者绘文字和对应的声音数据；其中，所述资料服务器预存有所述绘文字和所述声音数据；内容处理模块，用于基于所述互动信息处理模式，使用所述绘文字或者所述绘文字和对应的声音数据生成互动内容并进行显示；内容发送模块，用于将所述互动内容发送给直播服务器，以使所述直播服务器将所述互动内容发送给加入视频直播的其他终端进行显示。
[0012]可选地，所述绘文字包括：表情符号；所述声音数据包括：MIDI音频、波表信息；所述声音数据存储在对应的XMF文件中；所述资料服务器预先建立所述绘文字ID与所述XMF文件之间的关联关系，并存储所述关联关系。
[0013]可选地，所述互动信息处理模式包括：增加绘文字显示模式；所述数据获取模块，用于获取绘文字ID，根据所述绘文字ID从所述资料服务器获取绘文字；所述内容处理模块，用于基于所述增加绘文字模式，使用所述绘文字生成所述互动内容并在显示区域内显示。
[0014]可选地，所述互动信息处理模式包括：背景迭加绘文字显示模式；所述终端为直播主持人终端；所述数据获取模块，用于获取绘文字ID，根据所述绘文字ID从所述资料服务器获取绘文字以及关联的XMF文件；所述内容处理模块，用于所述直播主持人终端根据所述绘文字和关联的XMF文件生成所述互动内容；在所述本地视频图像中确定背景图层和前景图层；基于所述背景迭加绘文字显示模式，在所述背景图层和所述前景图层之间添加互动内容层，在所述互动内容层中显示所述互动内容。
[0015]可选地，所述互动信息处理模式包括：绘文字和音频合成模式；所述数据获取模块，用于获取绘文字ID，根据所述绘文字ID从所述资料服务器获取绘文字以及关联的XMF文
件；所述内容处理模块，用于基于所述绘文字和音频合成模式，使用所述绘文字以及关联的XMF文件生成所述互动内容并进行显示。
[0016]可选地，所述互动信息处理模式包括：绘文字音效处理模式；所述终端为直播客户终端；所述数据获取模块，用于获取绘文字ID，根据所述绘文字ID从所述资料服务器获取绘文字以及关联的XMF文件；所述内容处理模块，用于从所述XMF文件中提取波表信息，基于所述波表信息随机分配音高并进行和弦处理，生成音频信息；基于所述绘文字音效处理模式，使用所述绘文字以及所述音频信息生成所述互动内容并进行显示。
[0017]可选地，所述内容处理模块，还用于根据所述互动内容生成弹幕内容并进行显示；所述内容发送模块，用于将所述弹幕内容发送给直播服务器，以使所述直播服务器将所述弹幕内容发送本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种交互信息处理方法，包括：终端在视频直播的过程中，确定互动信息处理模式；所述终端从资料服务器获取绘文字或者绘文字和对应的声音数据；其中，所述资料服务器预存有所述绘文字和所述声音数据；所述终端基于所述互动信息处理模式，使用所述绘文字或者所述绘文字和对应的声音数据生成互动内容并进行显示；所述终端将所述互动内容发送给直播服务器，以使所述直播服务器将所述互动内容发送给加入视频直播的其他终端进行显示。2.如权利要求1所述的方法，其中，所述绘文字包括：表情符号；所述声音数据包括：MIDI音频、波表信息；所述声音数据存储在对应的XMF文件中；所述资料服务器预先建立所述绘文字ID与所述XMF文件之间的关联关系，并存储所述关联关系。3.如权利要求2所述的方法，所述互动信息处理模式包括：增加绘文字显示模式；所述终端从资料服务器获取绘文字或者绘文字和对应的声音数据包括：所述终端获取绘文字ID，根据所述绘文字ID从所述资料服务器获取绘文字；所述终端基于所述互动信息处理模式，使用所述绘文字或者所述绘文字和对应的声音数据生成互动内容并进行显示包括：所述终端基于所述增加绘文字模式，使用所述绘文字生成所述互动内容并在显示区域内显示。4.如权利要求2所述的方法，所述互动信息处理模式包括：背景迭加绘文字显示模式；所述终端为直播主持人终端；所述终端从资料服务器获取绘文字或者绘文字和对应的声音数据包括：所述直播主持人终端获取绘文字ID，根据所述绘文字ID从所述资料服务器获取绘文字以及关联的XMF文件；所述终端基于所述互动信息处理模式，使用所述绘文字或者所述绘文字和对应的声音数据生成互动内容并进行显示包括：所述直播主持人终端根据所述绘文字和关联的XMF文件生成所述互动内容；所述直播主持人终端在所述本地视频图像中确定背景图层和前景图层；所述直播主持人终端基于所述背景迭加绘文字显示模式，在所述背景图层和所述前景图层之间添加互动内容层，在所述互动内容层中显示所述互动内容。5.如权利要求2所述的方法，所述互动信息处理模式包括：绘文字和音频合成模式；所述终端从资料服务器获取绘文字或者绘文字和对应的声音数据包括：所述终端获取绘文字ID，根据所述绘文字ID从所述资料服务器获取绘文字以及关联的XMF文件；所述终端基于所述互动信息处理模式，使用所述绘文字或者所述绘文字和对应的声音数据生成互动内容并进行显示包括：所述终端基于所述绘文字和音频合成模式，使用所述绘文字以及关联的XMF文件生成所述互动内容并进行显示。6.如权利要求2所述的方法，所述互动信息处理模式包括：绘文字音效处理模式；所述
终端为直播客户终端，所述终端从资料服务器获取绘文字或者绘文字和对应的声音数据包括：所述直播客户终端获取绘文字ID，根据所述绘文字ID从所述资料服务器获取绘文字以及关联的XMF文件；所述终端基于所述互动信息处理模式，使用所述绘文字或者所述绘文字和对应的声音数据生成互动内容并进行显示包括：所述直播客户终端从所述XMF文件中提取波表信息，基于所述波表信息随机分配音高并进行和弦处理，生成音频信息；所述直播客户终端基于所述绘文字音效处理模式，使用所述绘文字以及所述音频信息生成所述互动内容并进行显示。7.如权利要求1至6任一项所述的方法，其中，所述终端根据所述互动内容生成弹幕内容并进行显示；所述终端将所述弹幕内容发送给直播服务器...

【专利技术属性】
技术研发人员：施隆海，
申请(专利权)人：中国电信股份有限公司，
类型：发明
国别省市：