System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种处理实时数据传输的方法及相关设备技术_技高网

一种处理实时数据传输的方法及相关设备技术

技术编号:40706735 阅读:8 留言:0更新日期:2024-03-22 11:06
本申请公开提供一种处理实时数据传输的方法,包括:确定数据开始上传运行,识别所述录入数据的注册信息是否属于网关端的转出信息;在所述注册信息属于所述网关端的转出信息的情况下,判断所述注册信息与所述识别端的存储环境是否匹配;在所述注册信息与所述存储环境相匹配的情况下,将所述注册信息录入到中间件;确定所述中间件的输出端识别数据库输入端的录入请求;在所述录入请求符合所述输出端输出要求的情况下,将所述注册信息输出到所述数据库中;基于所述数据库的格式生成要求,转化所述注册信息格式,得到最终输出信息;判断所述最终输出信息是否被识别和录入;未被识别和录入的所述最终输出信息,将存储到所述中间件。

【技术实现步骤摘要】

本申请涉及计算机,尤其涉及一种处理实时数据传输的方法及相关设备


技术介绍

1、缓存,是互联网中常常使用到的一种架构方式,主要作用是减少了数据库读的压力,缓存的开发比较容易,大部分的读操作都可以先去缓存,找不到的再渗透到数据库。但在互联网的应用场景中,常常数据量大、并发量高、高可用要求高、一致性要求高,缓存就不能处理了,因为如果保障高可用,缓存一旦挂了,所有的流量都同时聚集到了数据库上,那么数据库是肯定会挂掉的。

2、既要保证高可用,又要防止数据丢失,是当下数据库技术应用中急需解决的问题。


技术实现思路

1、本申请实施例提供一种处理实时数据传输的方法及相关设备,不但可以解决行业超大量数据上传的问题,还解决了数据丢失的问题,并且提供较高的数据安全性。

2、本申请实施例的第一方面,提供一种处理实时数据传输的方法,包括:

3、确定数据开始上传运行,识别所述录入数据的注册信息是否属于网关端的转出信息;

4、在所述注册信息属于所述网关端的转出信息的情况下,判断所述注册信息与所述识别端的存储环境是否匹配;

5、在所述注册信息与所述存储环境相匹配的情况下,将所述注册信息录入到中间件;

6、确定所述中间件的输出端识别数据库输入端的录入请求;

7、在所述录入请求符合所述输出端输出要求的情况下,将所述注册信息输出到所述数据库中;

8、基于所述数据库的格式生成要求,转化所述注册信息格式,得到最终输出信息;p>

9、判断所述最终输出信息是否被识别和录入;

10、未被识别和录入的所述最终输出信息,将存储到所述中间件。

11、可选的,所述判断所述注册信息与所述识别端的存储环境是否匹配,包括判断网关端的运行是否基于负载均衡。

12、可选的,确定所述中间件的运行基于负载均衡;

13、确定所述中间件的输出端识别数据库端的录入请求,包括确定所述数据库输入端是否基于负载均衡;

14、判断所述最终输出信息是否被识别和录入,包括判断最终输出信息的识别和录入是否基于负载均衡。

15、本申请实施例的第二方面,提供一种处理实时数据传输的管理系统,包括:

16、确定模块,用于确定数据开始上传运行,识别所述录入数据的注册信息是否属于网关端的转出信息;

17、适配识别模块,用于在所述注册信息属于所述网关端的转出信息的情况下,判断所述注册信息与所述识别端的存储环境是否匹配;

18、录入模块,用于在所述注册信息与所述存储环境相匹配的情况下,将所述注册信息录入到中间件;

19、确定所述中间件的输出端识别数据库输入端的录入请求;

20、在所述录入请求符合所述输出端输出要求的情况下,将所述注册信息输出到所述数据库中;

21、转换模块,用于基于所述数据库的格式生成要求,转化所述注册信息格式,得到最终输出信息;

22、存储模块,判断所述最终输出信息是否被识别和录入;

23、未被识别和录入的所述最终输出信息,将存储到所述中间件。

24、本申请实施例的第三方面,提供一种电子设备,包括:

25、存储器,所述存储器中存储有计算机程序;

26、处理器,所述处理器用于执行所述计算机程序时实现如第一方面所述的处理实时数据传输方法。

27、本申请实施例的第四方面,提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的处理实时数据传输方法。

28、本申请实施例提供的处理实时数据传输的方法,利用确定数据开始上传运行,识别所述录入数据的注册信息是否属于网关端的转出信息;在所述注册信息属于所述网关端的转出信息的情况下,判断所述注册信息与所述识别端的存储环境是否匹配;在所述注册信息与所述存储环境相匹配的情况下,将所述注册信息录入到中间件;确定所述中间件的输出端识别数据库输入端的录入请求;在所述录入请求符合所述输出端输出要求的情况下,将所述注册信息输出到所述数据库中;基于所述数据库的格式生成要求,转化所述注册信息格式,得到最终输出信息;判断所述最终输出信息是否被识别和录入;未被识别和录入的所述最终输出信息,将存储到所述中间件的方法,解决了大批量数据上传的问题,及数据并发过大,后台死机丢数据的问题。

本文档来自技高网...

【技术保护点】

1.一种处理实时数据传输的方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述判断所述注册信息与所述识别端的存储环境是否匹配,包括判断网关端的运行是否基于负载均衡。

3.根据权利要求1所述的方法,其特征在于,确定所述中间件的运行基于负载均衡;

4.一种处理实时数据传输的管理系统,其特征在于,包括:

5.一种电子设备,其特征在于,包括:

6.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1-4中任一项所述的处理实时数据传输的方法。

【技术特征摘要】

1.一种处理实时数据传输的方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述判断所述注册信息与所述识别端的存储环境是否匹配,包括判断网关端的运行是否基于负载均衡。

3.根据权利要求1所述的方法,其特征在于,确定所述中间件的运行基于负载均衡;

...

【专利技术属性】
技术研发人员:梁丹薛丽萍刘远利付小瑜邓慧唐宗伟
申请(专利权)人:四川航天信息有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1