System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本公开涉及数据处理,特别涉及一种数据处理方法及装置、电子设备、存储介质、程序产品。
技术介绍
1、数据处理可以包括数据存储和数据查询,通常情况下使用数据表来存储数据,当需要进行数据查询时,先确定数据对应的数据表,然后在相应的数据表中进行查询。
2、由于在多数业务场景下,需要处理的数据较多,需要维护的数据也多。针对大量数据的存储,将数据存储至哪个数据表以及在数据表中如何对数据进行存储比较复杂,数据存储效率较低。针对大量数据的查询,从哪个数据表中查询数据以及在数据表中如何查询数据比较复杂,数据查询效率较低。如何进行高效的数据处理就成为研究的热点问题。
技术实现思路
1、本公开提供一种数据处理方法及装置、电子设备、存储介质、程序产品。
2、第一方面,本公开提供了一种数据处理方法,该数据处理方法包括:
3、根据待处理数据的生存时间,确定用于存储所述待处理数据的数据表需满足的目标生存时间;
4、基于所述目标生存时间,确定n个数据表;所述n个数据表具有相同的生存时间,且与所述目标生存时间相同;n为大于1的整数;所述n个数据表具有不同的表名后缀;
5、生成用于存储所述待处理数据的数据表需满足的目标表名后缀;
6、根据所述目标表名后缀,从所述n个数据表中查找目标数据表,并基于所述目标数据表对所述待处理数据进行处理。
7、第二方面,本公开提供了一种数据处理装置,该数据处理装置包括:
8、处理单元,用于根据
9、所述处理单元,还用于基于所述目标生存时间,确定n个数据表;所述n个数据表具有相同的生存时间,且与所述目标生存时间相同;n为大于1的整数;所述n个数据表具有不同的表名后缀;
10、生成单元,用于生成用于存储所述待处理数据的数据表需满足的目标表名后缀;
11、查找单元,用于根据所述目标表名后缀,从所述n个数据表中查找目标数据表,并基于所述目标数据表对所述待处理数据进行处理。
12、第三方面,本公开提供了一种电子设备,该电子设备包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的一个或多个计算机程序,一个或多个所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述的数据处理方法。
13、第四方面,本公开提供了一种计算机可读存储介质,其上存储有计算机程序,其中,所述计算机程序在被处理器执行时实现上述的数据处理方法。
14、第五方面,本公开提供了一种计算机程序产品,包括计算机可读代码,或者承载有计算机可读代码的非易失性计算机可读存储介质,当所述计算机可读代码在电子设备的处理器中运行时,所述电子设备中的处理器执行上述的数据处理方法。
15、本公开实施例所提供的数据处理方法,根据待处理数据的生存时间,确定用于存储待处理数据的数据表需满足的目标生存时间,基于目标生存时间,确定n个数据表,然后生成用于存储待处理数据的数据表需满足的目标表名后缀,根据目标表名后缀,从n个数据表中查找目标数据表,并基于目标数据表对待处理数据进行处理。
16、在上述数据处理过程中,用于进行数据处理的目标数据表与待处理数据具有相同的生存时间,当待处理数据在目标数据表中的存储时长等于相同的生存时间时,目标数据表会自动删除待处理数据,无需在目标数据表中手动删除过期的待处理数据,提升数据处理效率,减少过期数据对目标数据表的占用,减少查询到过期数据的情况发生,提升数据处理效率。另外,目标数据表的选择还参考了根据待处理数据生成的目标表名后缀,能够根据待处理数据准确查找到用于进行数据处理的目标数据表,提升数据处理效率以及数据处理的准确性。
17、应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
本文档来自技高网...【技术保护点】
1.一种数据处理方法,其特征在于,包括:
2.根据权利要求1所述的数据处理方法,其特征在于,所述方法还包括:
3.根据权利要求2所述的数据处理方法,其特征在于,所述待处理数据包括待存储数据,所述基于所述查询条件和所述数据获取接口的接口标识,在所述目标数据表中对所述待处理数据进行处理,包括:
4.根据权利要求2所述的数据处理方法,其特征在于,所述待处理数据包括待查询数据,所述基于所述查询条件和所述数据获取接口的接口标识,在所述目标数据表中对所述待处理数据进行处理,包括:
5.根据权利要求3所述的数据处理方法,其特征在于,所述根据所述查询条件、所述数据获取接口的接口标识以及存储时间戳,将所述待存储数据存储至所述目标数据表中,包括:
6.根据权利要求2所述的数据处理方法,其特征在于,所述目标生存时间是从目标表名前缀中确定的;所述目标表名前缀是指用于存储所述待处理数据的数据表需满足的表名前缀;所述目标表名前缀是通过如下方式确定的:
7.根据权利要求2所述的数据处理方法,其特征在于,所述生成用于存储所述待处理数据的数据
8.根据权利要求5所述的数据处理方法,其特征在于,所述将所述待存储数据进行序列化处理,得到待存储字符串之后,所述方法还包括:
9.根据权利要求5或8所述的数据处理方法,其特征在于,所述将所述待存储数据进行序列化处理,得到待存储字符串,包括:
10.根据权利要求4所述的数据处理方法,其特征在于,所述根据所述查询条件、所述数据获取接口的接口标识、待查询开始时间戳以及待查询结束时间戳,从所述目标数据表中查询得到所述待查询数据,包括:
11.根据权利要求2所述的数据处理方法,其特征在于,所述待处理数据包括待查询数据,所述基于所述查询条件和所述数据获取接口的接口标识,在所述目标数据表中对所述待处理数据进行处理,包括:
12.根据权利要求10所述的数据处理方法,其特征在于,所述将所述待查询字符串进行反序列化处理,得到所述待查询数据,包括:
13.一种数据处理装置,其特征在于,包括:
14.一种电子设备,其特征在于,包括:
15.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序在被处理器执行时实现如权利要求1-12中任一项所述的数据处理方法。
16.一种计算机程序产品,其特征在于,包括计算机可读代码,或者承载有计算机可读代码的非易失性计算机可读存储介质,当所述计算机可读代码在电子设备的处理器中运行时,所述电子设备中的处理器执行如权利要求1-12中任一项所述的数据处理方法。
...【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:
2.根据权利要求1所述的数据处理方法,其特征在于,所述方法还包括:
3.根据权利要求2所述的数据处理方法,其特征在于,所述待处理数据包括待存储数据,所述基于所述查询条件和所述数据获取接口的接口标识,在所述目标数据表中对所述待处理数据进行处理,包括:
4.根据权利要求2所述的数据处理方法,其特征在于,所述待处理数据包括待查询数据,所述基于所述查询条件和所述数据获取接口的接口标识,在所述目标数据表中对所述待处理数据进行处理,包括:
5.根据权利要求3所述的数据处理方法,其特征在于,所述根据所述查询条件、所述数据获取接口的接口标识以及存储时间戳,将所述待存储数据存储至所述目标数据表中,包括:
6.根据权利要求2所述的数据处理方法,其特征在于,所述目标生存时间是从目标表名前缀中确定的;所述目标表名前缀是指用于存储所述待处理数据的数据表需满足的表名前缀;所述目标表名前缀是通过如下方式确定的:
7.根据权利要求2所述的数据处理方法,其特征在于,所述生成用于存储所述待处理数据的数据表需满足的目标表名后缀,包括:
8.根据权利要求5所述的数据处理方法,其特征在于,所述将所述待存储数据进行序列化处理,得到待存储字符串之后,所述方法还包括:
【专利技术属性】
技术研发人员:李界鹏,
申请(专利权)人:马上消费金融股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。