System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 数据获取方法、装置、计算机设备和计算机可读存储介质制造方法及图纸_技高网

数据获取方法、装置、计算机设备和计算机可读存储介质制造方法及图纸

技术编号:42838721 阅读:7 留言:0更新日期:2024-09-27 17:11
本申请涉及一种数据获取方法、装置、计算机设备和计算机可读存储介质。所述方法包括:响应于针对待获取的目标数据的数据获取请求,在可编程交换机的缓存模块中存储有目标数据的情况下,直接从缓存模块中获取数据并返回客户端,在缓存模块未存储有目标数据的情况下,获取目标数据的请求量,在请求量满足预设条件的情况下,从存储服务器中获取目标数据并存入缓存模块,并将存储入的目标数据返回客户端,若请求量未满足预设条件,则直接从存储服务获取目标数据并返回。采用本方法能够降低客户端与服务器之间的计算开销,进而提高了数据的获取效率且节约了成本。

【技术实现步骤摘要】

本申请涉及云计算,特别是涉及一种数据获取方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。


技术介绍

1、在现代互联网服务迭代更新的背景下,高性能键值存储成为搜索、社交网络和电子商务等服务严重依赖的技术之一。一个互联网服务的用户数越多,系统越依赖于键值存储以满足应用的吞吐量需求。

2、键值存储(key-value stores)大规模应用的一个主要挑战是动态工作负载的不均衡问题。极热内容比其他项目收到的查询要多得多。比如,10%的热门产品占查询的60%-90%。

3、对于极热内容,服务器一般会采取选择性复制来将热项目复制到其他存储节点,这种方法还需要复杂的数据移动、数据一致性和查询路由机制,这会使系统设计复杂化并带来巨大的计算开销。


技术实现思路

1、基于此,有必要针对上述技术问题,提供一种能够减少客户端交互,降低计算开销的数据获取方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。

2、第一方面,本申请提供了一种数据获取方法,应用于可编程交换机,包括:

3、响应于针对待获取的目标数据的数据获取请求,在可编程交换机的缓存模块中存储有目标数据的情况下,从缓存模块中获取目标数据并返回;

4、在缓存模块中未存储有目标数据的情况下,获取目标数据的请求量;

5、在请求量满足预设条件的情况下,从存储服务器中获取目标数据,并将目标数据存入缓存模块,以及将存入缓存模块的目标数据返回;

6、在请求量未满足预设条件的情况下,从存储服务器中获取目标数据并返回。

7、在其中一个实施例中,响应于针对待获取的目标数据的数据获取请求之后,还包括:

8、在目标数据关联有计数器的情况下,对计数器中的计数信息进行自加1;

9、获取目标数据的请求量,包括:

10、从目标数据关联的计数器中,获取目标数据的计数信息,并将计数信息作为目标数据的请求量。

11、在一个实施例中,将计数信息作为目标数据的请求量之后,还包括:

12、在计数信息达到预设计数阈值的情况下,确定请求量满足预设条件;

13、在计数信息未达到预设计数阈值的情况下,确定请求量未满足预设条件。

14、在一个示例性的实施例中,响应于针对待获取的目标数据的数据获取请求之后,还包括:

15、在目标数据未关联有计数器的情况下,生成与目标数据关联的计数器,并将计数器中的计数信息设置为1。

16、在一个实施例中,将目标数据存入缓存模块之前,还包括:

17、获取缓存模块中的缓存数据的请求量;

18、根据缓存数据的请求量,删除其中请求量最小的缓存数据。

19、在其中一个实施例中,数据获取请求携带目标数据对应的数据标识;

20、从缓存模块中获取目标数据并返回,包括:

21、根据数据标识从缓存模块中获取对应的目标数据;

22、通过可交换编程机的路由模块返回客户端;

23、将存入缓存模块的目标数据返回,包括:

24、通过路由模块将存入缓存模块的目标数据返回客户端。

25、在一个示例性的实施例中,从存储服务器中获取目标数据并返回,包括:

26、通过路由模块将数据获取请求转发至存储服务器;

27、接收存储服务器响应于数据获取请求确定出的目标数据;

28、利用路由模块将目标数据返回客户端。

29、在一个实施例中,数据获取请求携带目标数据对应的数据标识,方法包括:

30、在缓存模块中携带有与目标数据对应的数据标识相匹配的缓存数据标识的情况下,确定缓存模块中存储有目标数据;

31、在缓存模块中未携带有与目标数据对应的数据标识相匹配的缓存数据标识的情况下,确定缓存模块中未存储有目标数据。

32、第二方面,本申请还提供了一种数据缓存装置,应用于可编程交换机,包括:

33、目标数据获取第一模块,用于响应于针对待获取的目标数据的数据获取请求,在可编程交换机的缓存模块中存储有目标数据的情况下,从缓存模块中获取目标数据并返回;

34、请求量获取模块,用于在缓存模块中未存储有目标数据的情况下,获取目标数据的请求量;

35、目标数据获取第二模块,用于在请求量满足预设条件的情况下,从存储服务器中获取目标数据,并将目标数据存入缓存模块,以及将存入缓存模块的目标数据返回;

36、目标数据获取第三模块,用于在请求量未满足预设条件的情况下,从存储服务器中获取目标数据并返回。

37、第三方面,本申请还提供了一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:

38、响应于针对待获取的目标数据的数据获取请求,在可编程交换机的缓存模块中存储有目标数据的情况下,从缓存模块中获取目标数据并返回;

39、在缓存模块中未存储有目标数据的情况下,获取目标数据的请求量;

40、在请求量满足预设条件的情况下,从存储服务器中获取目标数据,并将目标数据存入缓存模块,以及将存入缓存模块的目标数据返回;

41、在请求量未满足预设条件的情况下,从存储服务器中获取目标数据并返回。

42、第四方面,本申请还提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:

43、响应于针对待获取的目标数据的数据获取请求,在可编程交换机的缓存模块中存储有目标数据的情况下,从缓存模块中获取目标数据并返回;

44、在缓存模块中未存储有目标数据的情况下,获取目标数据的请求量;

45、在请求量满足预设条件的情况下,从存储服务器中获取目标数据,并将目标数据存入缓存模块,以及将存入缓存模块的目标数据返回;

46、在请求量未满足预设条件的情况下,从存储服务器中获取目标数据并返回。

47、第五方面,本申请还提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现以下步骤:

48、响应于针对待获取的目标数据的数据获取请求,在可编程交换机的缓存模块中存储有目标数据的情况下,从缓存模块中获取目标数据并返回;

49、在缓存模块中未存储有目标数据的情况下,获取目标数据的请求量;

50、在请求量满足预设条件的情况下,从存储服务器中获取目标数据,并将目标数据存入缓存模块,以及将存入缓存模块的目标数据返回;

51、在请求量未满足预设条件的情况下,从存储服务器中获取目标数据并返回。

52、上述数据获取方法、装置、计算机设备、计算机可读存储介质和计算机程序产品,响应于针对待获取的目标数据的数据获取请求,在可编程交换机的缓存模块中存储有目标数据的情况下,直接从缓存模块中获取数据并本文档来自技高网...

【技术保护点】

1.一种数据获取方法,其特征在于,应用于可编程交换机,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述响应于针对待获取的目标数据的数据获取请求之后,还包括:

3.根据权利要求2所述的方法,其特征在于,所述将所述计数信息作为所述目标数据的请求量之后,还包括:

4.根据权利要求2所述的方法,其特征在于,所述响应于针对待获取的目标数据的数据获取请求之后,还包括:

5.根据权利要求1所述的方法,其特征在于,所述将所述目标数据存入所述缓存模块之前,还包括:

6.根据权利要求1所述的方法,其特征在于,所述数据获取请求携带所述目标数据对应的数据标识;所述从所述缓存模块中获取所述目标数据并返回,包括:

7.根据权利要求6所述的方法,其特征在于,所述从存储服务器中获取所述目标数据并返回,包括:

8.根据权利要求1所述的方法,其特征在于,所述数据获取请求携带所述目标数据对应的数据标识,所述方法包括:

9.一种数据获取装置,其特征在于,应用于可编程交换机,所述装置包括:

10.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至8中任一项所述的方法的步骤。

11.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至8中任一项所述的方法的步骤。

12.一种计算机程序产品,包括计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至8中任一项所述的方法的步骤。

...

【技术特征摘要】

1.一种数据获取方法,其特征在于,应用于可编程交换机,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述响应于针对待获取的目标数据的数据获取请求之后,还包括:

3.根据权利要求2所述的方法,其特征在于,所述将所述计数信息作为所述目标数据的请求量之后,还包括:

4.根据权利要求2所述的方法,其特征在于,所述响应于针对待获取的目标数据的数据获取请求之后,还包括:

5.根据权利要求1所述的方法,其特征在于,所述将所述目标数据存入所述缓存模块之前,还包括:

6.根据权利要求1所述的方法,其特征在于,所述数据获取请求携带所述目标数据对应的数据标识;所述从所述缓存模块中获取所述目标数据并返回,包括:

7.根据权利要求6所述的方法,其特征...

【专利技术属性】
技术研发人员:傅铭江庄一嵘潘庆陈麒渠文宽
申请(专利权)人:中国电信股份有限公司技术创新中心
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1