System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种数据网关的数据传输方法及系统技术方案_技高网

一种数据网关的数据传输方法及系统技术方案

技术编号:44269487 阅读:9 留言:0更新日期:2025-02-14 22:11
为解决现有技术中加密账户进入数据网关的管理控制后台对数据库中的数据随意修改导致存储数据混乱且影响数据安全的问题,本发明专利技术提供了一种数据网关的数据传输方法及系统。该方法包括:从数据源采集数据;对采集到的数据进行预处理和格式转换;将格式转换后的数据缓存到数据网关的数据库中;用户在通过管理控制后台访问数据网关的数据库时,先进行用户验证;验证通过后,若用户对存储到数据库中的数据进行过修改,对修改前后的数据文件分别进行存储,并将用户的修改信息进行记录,再退出用户登录信息;在需要进行数据传输时,从数据网关的数据库中提取出待传输数据,并按照预设传输协议和预设目标地址将待传输数据进行加密传输。

【技术实现步骤摘要】

本专利技术涉及数据域数据网关领域,具体为一种数据网关的数据传输方法及系统


技术介绍

1、在当今数字化时代,各种设备和系统产生大量不同类型的数据,这些数据需要高效、可靠地传输到不同的目的地进行处理和分析,其中数据网关可以方便传输。数据网关在传输中可以将数据暂存到数据库中,并且进行保存,当需要进行使用的时候,数据网关可以将数据进行提取,并且输送到指定的位置。

2、但是位于数据库中的数据是可以进行修改的,当很多个新修改后的数据储存后,整个数据储存路径是乱的,所以当加密账号进入管理控制后台后,可能导致数据备份被其他人修改的情况,且已修改的数据不能及时找回,进而影响数据安全。


技术实现思路

1、为解决现有技术中加密账户进入数据网关的管理控制后台对数据库中的数据随意修改导致存储数据混乱且影响数据安全的问题,本专利技术提供了一种数据网关的数据传输方法及系统。

2、本专利技术的技术方案为:

3、本专利技术提供了一种数据网关的数据传输方法,包括:

4、从多种数据源采集数据;

5、对采集到的数据进行预处理,并将预处理后的不同格式的数据进行格式转换;

6、将格式转换后的数据缓存到数据网关的数据库中;

7、用户在通过管理控制后台访问数据网关的数据库时,先进行用户验证;验证通过后,若用户对存储到数据库中的数据进行过修改,对修改后得到的新数据文件和修改前的原数据文件分别进行存储,并将用户的修改信息进行记录,再退出用户登录信息

8、在需要进行数据传输时,从数据网关的数据库中提取出待传输数据,并按照预设传输协议和预设目标地址将待传输数据进行加密传输;

9、若用户进行过数据修改,则待传输数据为用户修改后得到的新数据文件。

10、优选地,将用户的修改信息进行记录的步骤包括:

11、将用户信息、访问时间、修改时间和修改内容进行记录。

12、优选地,按照预设传输协议和预设目标地址将待传输数据进行加密传输的步骤包括:

13、对待传输数据进行数据完整性校验,采用重传机制对待传输数据进行加密传输。

14、优选地,按照预设传输协议和预设目标地址将待传输数据进行加密传输的步骤包括:

15、将实时性要求高和/或优先级排序在前的待传输数据进行优先传输。

16、优选地,对采集到的数据进行预处理,并将预处理后的不同格式的数据进行格式转换的步骤包括:

17、对采集到的数据进行清洗和过滤处理;

18、清洗和过滤处理后,将不同格式的数据转换为统一的数据格式。

19、另一方面,本专利技术还提供了一种数据网关的数据传输系统,包括:

20、数据采集模块,用于从多种数据源采集数据;

21、数据预处理模块,用于对采集到的数据进行预处理,并将预处理后的不同格式的数据进行格式转换;

22、数据缓存模块,用于将格式转换后的数据缓存到数据网关的数据库中;

23、数据安全保障模块,用于用户在通过管理控制后台访问数据网关的数据库时,先进行用户验证;验证通过后,若用户对存储到数据库中的数据进行过修改,对修改后得到的新数据文件和修改前的原数据文件分别进行存储,并将用户的修改信息进行记录,再退出用户登录信息;

24、数据传输模块,用于在需要进行数据传输时,从数据网关的数据库中提取出待传输数据,并按照预设传输协议和预设目标地址将待传输数据进行加密传输;

25、若用户进行过数据修改,则待传输数据为用户修改后得到的新数据文件。

26、优选地,数据安全保障模块中,将用户的修改信息进行记录包括:

27、将用户信息、访问时间、修改时间和修改内容进行记录。

28、优选地,数据传输模块中,按照预设传输协议和预设目标地址将待传输数据进行加密传输包括:

29、对待传输数据进行数据完整性校验,采用重传机制对待传输数据进行加密传输。

30、优选地,数据传输模块中,按照预设传输协议和预设目标地址将待传输数据进行加密传输包括:

31、将实时性要求高和/或优先级排序在前的待传输数据进行优先传输。

32、优选地,数据预处理模块中,对采集到的数据进行预处理,并将预处理后的不同格式的数据进行格式转换包括:

33、对采集到的数据进行清洗和过滤处理;

34、清洗和过滤处理后,将不同格式的数据转换为统一的数据格式。

35、本专利技术的有益效果为:

36、用户在通过管理控制后台访问数据网关的数据库时,如用户对数据库中的数据做了修改,通过对修改前的原数据文件做备份存储,以及对用户的修改信息进行记录;在因为修改导致错误时,可以快速追述到修改源头,便于及时查找修改人以及通过备份的原数据文件进行数据恢复。此外,减少了数据转换和传输的中间环节,提高了数据传输的效率,并且还采用数据校验、重传机制和加密技术,确保数据传输的可靠性和安全性。

本文档来自技高网...

【技术保护点】

1.一种数据网关的数据传输方法,其特征在于,包括:

2.根据权利要求1所述的数据网关的数据传输方法,其特征在于,将用户的修改信息进行记录的步骤包括:

3.根据权利要求1所述的数据网关的数据传输方法,其特征在于,按照预设传输协议和预设目标地址将待传输数据进行加密传输的步骤包括:

4.根据权利要求3所述的数据网关的数据传输方法,其特征在于,按照预设传输协议和预设目标地址将待传输数据进行加密传输的步骤包括:

5.根据权利要求1所述的数据网关的数据传输方法,其特征在于,对采集到的数据进行预处理,并将预处理后的不同格式的数据进行格式转换的步骤包括:

6.一种数据网关的数据传输系统,其特征在于,包括:

7.根据权利要求6所述的数据网关的数据传输系统,其特征在于,数据安全保障模块中,将用户的修改信息进行记录包括:

8.根据权利要求6所述的数据网关的数据传输系统,其特征在于,数据传输模块中,按照预设传输协议和预设目标地址将待传输数据进行加密传输包括:

9.根据权利要求8所述的数据网关的数据传输系统,其特征在于,数据传输模块中,按照预设传输协议和预设目标地址将待传输数据进行加密传输包括:

10.根据权利要求6所述的数据网关的数据传输系统,其特征在于,数据预处理模块中,对采集到的数据进行预处理,并将预处理后的不同格式的数据进行格式转换包括:

...

【技术特征摘要】

1.一种数据网关的数据传输方法,其特征在于,包括:

2.根据权利要求1所述的数据网关的数据传输方法,其特征在于,将用户的修改信息进行记录的步骤包括:

3.根据权利要求1所述的数据网关的数据传输方法,其特征在于,按照预设传输协议和预设目标地址将待传输数据进行加密传输的步骤包括:

4.根据权利要求3所述的数据网关的数据传输方法,其特征在于,按照预设传输协议和预设目标地址将待传输数据进行加密传输的步骤包括:

5.根据权利要求1所述的数据网关的数据传输方法,其特征在于,对采集到的数据进行预处理,并将预处理后的不同格式的数据进行格式转换的步骤包括:

6.一种数据网关的...

【专利技术属性】
技术研发人员:舒海东杨思琪王洪亮袁媛朱尚龙周麒麟刘旭清
申请(专利权)人:重庆市环卫集团有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1