System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种基于数字算力的交互系统技术方案_技高网

一种基于数字算力的交互系统技术方案

技术编号:42377048 阅读:14 留言:0更新日期:2024-08-16 15:01
本申请适用于数字算力交互技术领域,提供了一种基于数字算力的交互系统,包括一数字算力中心设备和多个不同种类的数字终端,所述数字算力中心设备包括:获取模块,获取每个数字终端采集的终端媒体流;识别模块,识别每个终端媒体流的所有内容,并将每个终端媒体流的所有内容转换为同一数据格式,形成底层数据库;输出模块,响应于当前交互的输出终端的种类,将当前需要交互的内容编码为所述输出终端对应的数据格式进行输出。本申请提供的交互系统是将不同种类的数字终端的媒体流内容识别并转换为同一数据格式,使得不同种类的终端能够进行无障碍的交互,用户能够更加方便快捷地完成交互操作,增强交互体验。

【技术实现步骤摘要】

本申请属于信息交互,尤其涉及一种基于数字算力的交互系统


技术介绍

1、在数字社会中,各种终端设备已经成为人们生活和工作的必备工具。然而,由于不同设备采用的技术标准和协议各不相同,设备之间的交互存在着诸多障碍。因此本申请提供一种新的交互系统,旨在解决不同平台和设备之间存在交互障碍的问题。


技术实现思路

1、本申请实施例提供了一种基于数字算力的交互系统,可以解决不同平台和设备之间存在交互障碍的问题。

2、本申请实施例提供的数字算力交互系统包括一数字算力中心设备和多个不同种类的数字终端,所述数字算力中心设备包括:

3、获取模块,获取每个数字终端采集的终端媒体流;

4、识别模块,识别每个终端媒体流的所有内容,并将每个终端媒体流的所有内容转换为同一数据格式,形成底层数据库;

5、输出模块,响应于当前交互的输出终端的种类,将当前需要交互的内容编码为所述输出终端对应的数据格式进行输出。

6、在一种可能的实现方式中,所述终端媒体流包括音频流,所述识别模块具体用于:

7、通过语音识别算法解析所述音频流,生成音频流的文字信息;

8、通过语义识别算法解析所述文字信息,生成所述音频流的内容;

9、将所述内容按照语义相似度和关联连贯度切分为多段子内容;

10、利用多个不同维度的标签标记每段子内容,并将每段子内容按照多维度标签相似度分类,其中,所有终端媒体流的所有内容按照所述多维度标签相似度分类形成所述底层数据库。

11、在一种可能的实现方式中,所述终端媒体流包括视频流,所述识别模块具体用于:

12、通过图像识别算法识别所述视频的每一个视频画面,得到每个视频画面中的所有实体图案和轨迹图案;

13、识别所述实体图案和轨迹图案,生成实体内容和轨迹内容;

14、结合语义识别算法,拼接所述实体内容和轨迹内容,生成至少一个视频画面的内容;

15、将所述内容按照语义相似度和关联连贯度切分为多段子内容;

16、利用多个不同维度的标签标记每段子内容,并将每段子内容按照多维度标签相似度分类,其中,所有终端媒体流的所有内容按照所述多维度标签相似度分类形成所述底层数据库。

17、在一种可能的实现方式中,所述终端媒体流包括红外书写轨迹,所述识别模块具体用于:

18、结合预设的轨迹数据库,识别连续书写的所述红外书写轨迹,生成每个红外书写轨迹对应的书写内容;

19、将所有书写内容按照语义相似度和关联连贯度切分为多段子内容;

20、利用多个不同维度的标签标记每段子内容,并将每段子内容按照多维度标签相似度分类,其中,所有终端媒体流的所有内容按照所述多维度标签相似度分类形成所述底层数据库。

21、在一种可能的实现方式中,所述数字终端包括:应用于录播环境的摄像头和麦克风。

22、在一种可能的实现方式中,所述输出终端包括:应用于校园广播业务的扩音器;应用于录播观看场景的显示屏、扬声器以及手写板。

23、在一种可能的实现方式中,所述算力中心设备与至少一个摄像头的传感器通过mipi接口直接连接,并通过内置的处理芯片处理所述传感器的传感数据。

24、在一种可能的实现方式中,所述算力中心设备包括数字算力交互终端主控芯片,所述数字算力交互终端主控芯片的架构包括四核arm cortex-a73和双核arm cortex-a53。

25、在一种可能的实现方式中,所述算力中心设备包括摄像头连接接口,所述摄像头连接接口提供供应商识别码和产品识别码,用于从直接从摄像头获取yuv或mjpeg数据。

26、在一种可能的实现方式中,在同一次交互内,所述输出终端包括多个,且多个输出终端处于同一交互场景中,所述交互场景包括录播课播放场景、录播互动教学场景,所述输出终端包括:显示屏,所述交互场景中进一步包括至少一种数字终端,用于采集所述交互场景中的终端媒体流作为监控数据。

27、本申请的有益效果

28、本申请提供一种基于数字算力的交互系统,将不同平台不同设备的不同类型媒体流以数字化的形式统一到相同格式的底层数据库,对于不同接口的输出终端可以直接按照输出终端的类型转换数据格式输出,这样一来,一方面所有数据以统一格式存储和识别,可以根据需要组合拼接任意内容输出,例如同一内容的音频流和书写轨迹拼接形成“边画边学”的教学场景,将所有内容统一到一个数字平台,通过集中算力来进行内容处理、识别和拼接,从而无论数字终端和输出终端的类型和型号是否相同,都可以将其绑定到统一的数字平台。

29、本申请提供的交互系统解决了传统交互过程需要针对不同终端设备单独进行交互设置的问题,降低了交互成本,使交互方式变得更为便捷。同时,该方法支持不同平台和设备,使得不同种类的终端能够进行无障碍的交互,从而增强了交互体验。用户可以更加方便快捷地完成不同设备之间的交互操作,满足了当前数字社会对于交互便捷性和多样性的需求。

本文档来自技高网...

【技术保护点】

1.一种基于数字算力的交互系统,其特征在于,所述基于数字算力的交互系统包括一数字算力中心设备和多个不同种类的数字终端,所述数字算力中心设备包括:

2.根据权利要求1所述的交互系统,其特征在于,所述终端媒体流包括音频流,所述识别模块具体用于:

3.根据权利要求1所述的交互系统,其特征在于,所述终端媒体流包括视频流,所述识别模块具体用于:

4.根据权利要求1所述的交互系统,其特征在于,所述终端媒体流包括红外书写轨迹,所述识别模块具体用于:

5.根据权利要求1所述的交互系统,其特征在于,所述数字终端包括:应用于录播环境的摄像头和麦克风。

6.根据权利要求1所述的交互系统,其特征在于,所述输出终端包括:应用于校园广播业务的扩音器;应用于录播观看场景的显示屏、扬声器以及手写板。

7.根据权利要求1所述的交互系统,其特征在于,所述算力中心设备与至少一个摄像头的传感器通过MIPI接口直接连接,并通过内置的处理芯片处理所述传感器的传感数据。

8.根据权利要求1所述的交互系统,其特征在于,所述算力中心设备包括数字算力交互终端主控芯片,所述数字算力交互终端主控芯片的架构包括四核ARM Cortex-A73和双核ARM Cortex-A53。

9.根据权利要求1所述的交互系统,其特征在于,所述算力中心设备包括摄像头连接接口,所述摄像头连接接口提供供应商识别码和产品识别码,用于从直接从摄像头获取YUV或MJPEG数据。

10.根据权利要求1所述的交互系统,其特征在于,在同一次交互内,所述输出终端包括多个,且多个输出终端处于同一交互场景中,所述交互场景包括录播课播放场景、录播互动教学场景,所述输出终端包括:显示屏,所述交互场景中进一步包括至少一种数字终端,用于采集所述交互场景中的终端媒体流作为监控数据。

...

【技术特征摘要】

1.一种基于数字算力的交互系统,其特征在于,所述基于数字算力的交互系统包括一数字算力中心设备和多个不同种类的数字终端,所述数字算力中心设备包括:

2.根据权利要求1所述的交互系统,其特征在于,所述终端媒体流包括音频流,所述识别模块具体用于:

3.根据权利要求1所述的交互系统,其特征在于,所述终端媒体流包括视频流,所述识别模块具体用于:

4.根据权利要求1所述的交互系统,其特征在于,所述终端媒体流包括红外书写轨迹,所述识别模块具体用于:

5.根据权利要求1所述的交互系统,其特征在于,所述数字终端包括:应用于录播环境的摄像头和麦克风。

6.根据权利要求1所述的交互系统,其特征在于,所述输出终端包括:应用于校园广播业务的扩音器;应用于录播观看场景的显示屏、扬声器以及手写板。

7.根据权利要求1所述的交互系统,其特征在于,所述算力中...

【专利技术属性】
技术研发人员:周雪松杨定高
申请(专利权)人:江苏欧帝电子科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1