System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本申请涉及数据处理,尤其涉及一种缓存数据库中数据管理方法、装置及设备。
技术介绍
1、目前,缓存数据库(例如redis,memcached等)为纯内存操作,可以减少后端数据的负载,但是,引入缓存数据库,虽然降低了响应延迟的问题,但是也会存在数据过期导致的缓存穿透,甚至缓存雪崩的问题。
技术实现思路
1、有鉴于此,本申请提供了一种缓存数据库中数据管理方法、装置及设备,旨在尽量避免缓存数据库缓存穿透的问题。
2、第一方面,本申请提供了一种缓存数据库中数据管理方法,包括:
3、响应于访问的目标键,将哈希表中总访问量增加一,以及所述目标键对应的访问频次增加一,所述目标键为所述哈希表包括的键中的一个,所述目标键在缓存数据库中存在对应的数据;
4、根据目标时间段内的总访问量,以及哈希表包括的键和所述键对应的访问频次,确定所述目标时间段内各键的访问频次占比;
5、根据哈希表中所述目标时间段内各键的访问频次占比,调整所述缓存数据库中的数据的存储可用情况。
6、可选的,所述根据哈希表中所述目标时间段内各键的访问频次占比,调整所述缓存数据库中的数据的存储可用情况,包括:
7、根据哈希表中所述目标时间段内各键的访问频次占比,对所述缓存数据库对应的数据进行分类,形成不同访问频次等级的数据;
8、更新延长高访问频次等级的数据的过期时间。
9、可选的,所述根据哈希表中所述目标时间段内各键的访问频次占比,调整所述缓存
10、确定所述哈希表中所述目标时间段内访问频次占比超过阈值的高频键,更新所述高频键在所述缓存数据库中对应的数据的过期时间。
11、可选的,所述根据哈希表中所述目标时间段内各键的访问频次占比,调整所述缓存数据库中的数据的存储可用情况,包括:
12、确定所述访问频次占比为0的键在所述缓存数据库中对应的第一数据;
13、将所述第一数据从所述缓存数据库中移除。
14、可选的,更新数据的过期时间,包括:
15、根据所述数据对应的键的访问频次占比,更新所述数据的过期时间,所述访问频次占比约高,所述过期时间越长。
16、可选的,所述数据的过期时间的计算公式为:
17、tle new=(1+ratio)×tle ori
18、其中,tleori为所述数据对应的键当前剩余的过期时间,tlenew为更新后所述键的过期时间,ratio为所述目标时间段内所述键的访问频次占比。
19、可选的,所述目标时间段内各键的访问频次占比的计算方法,包括:
20、计算在所述目标时间段内,所述键的访问频次与所述总访问量的比值,得到所述键的访问频次占比。
21、第二方面,本申请还提供了一种缓存数据库中数据管理装置,所述装置包括:监控单元、统计单元和更新单元,所述监控单元包括哈希表;
22、所述监控单元,用于响应于访问的目标键,将所述哈希表中总访问量增加一,以及所述目标键对应的访问频次增加一,所述目标键为所述哈希表包括的键中的一个,所述目标键在缓存数据库中存在对应的数据;
23、所述统计单元,用于根据目标时间段内的总访问量,以及哈希表包括的键和所述键对应的访问频次,确定所述目标时间段内各键的访问频次占比;
24、所述更新单元,用于根据哈希表中所述目标时间段内各键的访问频次占比,调整所述缓存数据库中的数据的存储可用情况。
25、可选的,所述更新单元,具体用于根据哈希表中所述目标时间段内各键的访问频次占比,对所述缓存数据库对应的数据进行分类,形成不同访问频次等级的数据;更新高访问频次等级的数据的过期时间。
26、第三方面,本申请提供了一种电子设备,所述设备包括存储器和处理器,所述存储器用于存储指令或代码,所述处理器用于执行所述指令或代码,以使所述设备执行前述第一方面任一项所述的一种缓存数据库中数据管理方法。
27、第四方面,本申请提供了一种计算机存储介质,所述计算机存储介质中存储有代码,当所述代码被运行时,运行所述代码的设备实现前述第一方面任一项所述的一种缓存数据库中数据管理方法。
28、本申请提供了一种缓存数据库中数据管理方法、装置及设备。包括响应于访问的目标键,将哈希表中总访问量增加一,以及所述目标键对应的访问频次增加一,所述目标键为所述哈希表包括的键中的一个,所述目标键在缓存数据库中存在对应的数据;根据目标时间段内的总访问量,以及哈希表包括的键和所述键对应的访问频次,确定所述目标时间段内各键的访问频次占比;根据哈希表中所述目标时间段内各键的访问频次占比,调整所述缓存数据库中的数据的存储可用情况。如此能够,统计目标时间段内各键的访问频次以及总访问量确定访问频次占比,进而根据访问频次占比调整缓存数据库中的数据的存储可用情况,尽量避免不考虑数据使用频次情况,随机淘汰,造成缓存穿透的问题。
本文档来自技高网...【技术保护点】
1.一种缓存数据库中数据管理方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,所述根据哈希表中所述目标时间段内各键的访问频次占比,调整所述缓存数据库中的数据的存储可用情况,包括:
3.根据权利要求1所述的方法,其特征在于,所述根据哈希表中所述目标时间段内各键的访问频次占比,调整所述缓存数据库中的数据的存储可用情况,包括:
4.根据权利要求1-3任意一项所述的方法,其特征在于,所述根据哈希表中所述目标时间段内各键的访问频次占比,调整所述缓存数据库中的数据的存储可用情况,包括:
5.根据权利要求2或3所述的方法,其特征在于,更新数据的过期时间,包括:
6.根据权利要求5所述的方法,其特征在于,所述数据的过期时间的计算公式为:
7.根据权利要求1所述的方法,其特征在于,所述目标时间段内各键的访问频次占比的计算方法,包括:
8.一种缓存数据库中数据管理装置,其特征在于,所述装置包括:监控单元、统计单元和更新单元,所述监控单元包括哈希表;
9.根据权利要求8所述的装置,其特征在
10.一种电子设备,其特征在于,所述设备包括存储器和处理器,所述存储器用于存储指令或代码,所述处理器用于执行所述指令或代码,以使所述设备执行上述权利要求1-7任意一项所述的一种缓存数据库中数据管理方法。
...【技术特征摘要】
1.一种缓存数据库中数据管理方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,所述根据哈希表中所述目标时间段内各键的访问频次占比,调整所述缓存数据库中的数据的存储可用情况,包括:
3.根据权利要求1所述的方法,其特征在于,所述根据哈希表中所述目标时间段内各键的访问频次占比,调整所述缓存数据库中的数据的存储可用情况,包括:
4.根据权利要求1-3任意一项所述的方法,其特征在于,所述根据哈希表中所述目标时间段内各键的访问频次占比,调整所述缓存数据库中的数据的存储可用情况,包括:
5.根据权利要求2或3所述的方法,其特征在于,更新数据的过期时...
【专利技术属性】
技术研发人员:罗金飞,
申请(专利权)人:中国农业银行股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。