数据处理方法、装置及系统制造方法及图纸

本申请公开了一种数据处理方法、装置及系统。其中，该方法包括：接收访问第一数据的访问请求，其中，第一数据为访问频率小于预设频率的数据；获取与第一数据具有关联关系的第二数据列表，其中，第二数据列表包含的第二数据为待预热数据；返回携带有第一数据和第二数据列表的请求结果。本申请解决了现有技术中访问频率较低的数据的命中率较低的技术问题。

Data Processing Method, Device and System

【技术实现步骤摘要】
数据处理方法、装置及系统
本申请涉及数据处理领域，具体而言，涉及一种数据处理方法、装置及系统。
技术介绍
在内容分发网络CDN(全称是ContentDeliveryNetwork)系统中，通过在网络各处放置节点服务器所构成的在现有的互联网基础之上的一层智能虚拟网络，能够实时根据网络流量和各节点的连接、负载状态以及到用户的距离和响应时间等综合信息将用户的请求重新导向离用户最近的服务节点上。CDN系统的本质是一个缓存系统，缓存的命中率对用户体验有巨大的影响，对于一些冷数据(也即被低频访问的数据)，由于缓存空间有限，冷数据容易被热数据(也即被高频访问的数据)挤出去，CDN不容易对冷数据进行缓存，导致命中率较低。针对现有技术中访问频率较低的数据的命中率较低的问题，目前尚未提出有效的解决方案。
技术实现思路
本申请实施例提供了一种数据处理方法、装置及系统，以至少解决现有技术中访问频率较低的数据的命中率较低的技术问题。根据本申请实施例的一个方面，提供了一种数据处理方法，包括：接收访问第一数据的访问请求，其中，第一数据为访问频率小于预设频率的数据；获取与第一数据具有关联关系的第二数据列表，其中，第二数据列表包含的第二数据为待预热数据；返回携带有第一数据和第二数据列表的请求结果。根据本申请实施例的另一方面，还提供了一种数据处理装置，包括：接收模块，用于接收访问第一数据的访问请求，其中，第一数据为访问频率小于预设频率的数据；获取模块，用于获取与第一数据具有关联关系的第二数据列表，其中，第二数据列表包含的第二数据为待预热数据；返回模块，用于返回携带有第一数据和第二数据列表的请求结果。根据本申请实施例的另一方面，还提供了一种数据处理系统，包括：缓存模块，用于接收访问第一数据的访问请求；第一处理模块，与缓存模块连接，用于获取与第一数据具有关联关系的第二数据列表，其中，第二数据列表包含的第二数据为待预热数据；缓存模块还用于返回携带有第一数据和第二数据列表的请求结果。根据本申请实施例的另一方面，还提供了一种存储介质，存储介质包括存储的程序，其中，在程序运行时控制存储介质所在设备执行如下步骤：接收访问第一数据的访问请求，其中，第一数据为访问频率小于预设频率的数据；获取与第一数据具有关联关系的第二数据列表，其中，第二数据列表包含的第二数据为待预热数据；返回携带有第一数据和第二数据列表的请求结果。根据本申请实施例的另一方面，还提供了一种处理器，处理器用于运行程序，其中，程序运行时执行如下步骤：接收访问第一数据的访问请求，其中，第一数据为访问频率小于预设频率的数据；获取与第一数据具有关联关系的第二数据列表，其中，第二数据列表包含的第二数据为待预热数据；返回携带有第一数据和第二数据列表的请求结果。根据本申请实施例的另一方面，还提供了一种数据处理系统，包括：处理器；以及存储器，与处理器连接，用于为处理器提供处理以下处理步骤的指令：接收访问第一数据的访问请求，其中，第一数据为访问频率小于预设频率的数据；获取与第一数据具有关联关系的第二数据列表，其中，第二数据列表包含的第二数据为待预热数据；返回携带有第一数据和第二数据列表的请求结果。在本申请实施例中，接收访问第一数据的访问请求，获取与第一数据具有关联关系的第二数据列表，并返回携带有第一数据和第二数据列表的请求结果，从而实现数据访问的目的。容易注意到的是，由于第二数据为待预热数据，也即，在访问第一数据的过程中，通过缓存模块对与第一数据具有关联关系的第二数据进行预热，与现有技术相比，可以根据冷数据之间的关联关系，将冷数据缓存在缓存模块中，达到有效提升冷数据的缓存命中率，提升用户体验感的技术效果。由此，本申请提供的方案解决了现有技术中访问频率较低的数据的命中率较低的技术问题。附图说明此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：图1是根据本申请实施例1的一种数据处理系统的示意图；图2是根据本申请实施例的一种可选的数据处理系统的示意图；图3是根据本申请实施例1的另一种数据处理系统的示意图；图4是根据本申请实施例的一种用于实现数据处理方法的计算机终端(或移动设备)的硬件结构框图；图5是根据本申请实施例2的一种数据处理方法的流程图；图6是根据本申请实施例3的一种数据处理装置的示意图；以及图7是根据本申请实施例的一种计算机终端的结构框图。具体实施方式为了使本
的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。首先，在对本申请实施例进行描述的过程中出现的部分名词或术语适用于如下解释：冷数据：可以是被低频访问的数据。热数据：可以是被高频访问的数据。预热数据：可以是指从源站主动缓存到缓存系统中的数据。实施例1由于现有技术中缓存系统存储空间有限，冷数据容易被热数据挤出去，导致冷数据命中率较低，用户体验感较差。为了解决上述技术问题，本申请提出了一种数据处理系统。图1是根据本申请实施例1的一种数据处理系统的示意图，如图1所示，该系统可以包括：缓存模块12和第一处理模块14。其中，缓存模块12用于接收访问第一数据的访问请求；第一处理模块14与缓存模块连接，用于获取与第一数据具有关联关系的第二数据列表，其中，第二数据列表包含的第二数据为待预热数据；缓存模块还用于返回携带有第一数据和第二数据列表的请求结果。具体地，上述的缓存模块可以是CDN系统中用于缓存数据的服务节点，缓存模块中存储有用户访问的数据，用户每次访问网络数据时，首先可以访问缓存模块，查找缓存模块中是否存储有对应的数据资源，从而提高用户访问响应速度和命中率；上述的第一数据和第二数据均可以是冷数据，第一数据和第二数据之间的关联关系可以存在于用户历史访问行为中，用户在访问第一数据之后，总是会访问第二数据；上述的第二数据列表可以是用户之后可能会访问的资源列表，并对资源列表中的数据进行预热，存储在缓存模块中。由于冷数据不容易缓存在缓存模块中，可以在CDN系统中增加资源预取模块(即上述的第一处理模块)，通过资源预取模块可以存储冷数据之间的关联关系，从而用户在访问第一数据的过程中，缓存模块可以返回第一数据，同时可以从资源预取模块中获取到用户之后可能会访问的冷数据的资源列表，缓存模块对列表中记录的冷数据进行预热。需要说明的是，当本文档来自技高网...

【技术保护点】
1.一种数据处理方法，其特征在于，包括：接收访问第一数据的访问请求，其中，所述第一数据为访问频率小于预设频率的数据；获取与所述第一数据具有关联关系的第二数据列表，其中，所述第二数据列表包含的第二数据为待预热数据；返回携带有所述第一数据和所述第二数据列表的请求结果。

【技术特征摘要】
1.一种数据处理方法，其特征在于，包括：接收访问第一数据的访问请求，其中，所述第一数据为访问频率小于预设频率的数据；获取与所述第一数据具有关联关系的第二数据列表，其中，所述第二数据列表包含的第二数据为待预热数据；返回携带有所述第一数据和所述第二数据列表的请求结果。2.根据权利要求1所述的方法，其特征在于，获取与所述第一数据具有关联关系的第二数据列表包括：获取预设关联规则集合，其中，所述预设关联规则集合用于表征所述第一数据和所述第二数据之间的关联关系；从所述预设关联规则集合中获取所述第一数据匹配成功的目标关联规则；从所述目标关联规则中读取所述第二数据。3.根据权利要求2所述的方法，其特征在于，在获取预设关联规则集合之前，所述方法还包括：获取访问日志；对所述访问日志进行处理，生成所述预设关联规则集合；对所述预设关联规则集合进行结构化处理，并存储处理后的预设关联规则集合。4.根据权利要求3所述的方法，其特征在于，对所述访问日志进行处理，生成所述预设关联规则集合，包括：对所述访问日志进行处理，确定访问完所述第一数据之后访问的其他数据；获取所述其他数据的访问概率，其中，所述访问概率用于表征访问完所述第一数据之后访问所述其他数据的概率；确定访问概率超过预设概率的其他数据为所述第二数据；根据所述第一数据和所述第二数据，得到所述预设关联规则集合。5.根据权利要求3所述的方法，其特征在于，在对所述访问日志进行处理，生成所述预设关联规则集合之前，所述方法还包括：判断所述访问日志是否满足预设条件；在所述访问日志满足所述预设条件的情况下，对所述访问日志进行处理，生成所述预设关联规则集合。6.根据权利要求5所述的方法，其特征在于，判断所述访问日志是否满足预设条件包括：获取所述访问日志中数据对应的访问频率；判断所述访问频率是否小于所述预设频率；在所述访问频率小于所述预设频率的情况下，确定所述访问日志满足所述预设条件。7.根据权利要求1所述的方法，其特征在于，在获取与所述第一数据具有关联关系的第二数据列表之后，所述方法还包括：获取所述第二数据，并对所述第二数据进行缓存。8.根据权利要求1所述的方法，其特征在于，在返回携带有所述第一数据和所述第二数据列表的请求结果之后，所述方法还包括：接收访问所述第二数据的访问请求；返回携带有所述第二数据的请求结果。9.一种数据处理装置，其特征在于，包括：接收模块，用于接收访问第一数据的访问请求，其中，所述第一数据为访问频率小于预设频率的数据；获取模块，用于获取与所述第一数据具有关联关系的第二数据列表，其中，所述第二数据列表包含的第二数据为待预热数据；返回模块，用于返回携带有所述第一数据和所述第二数据列表的请求结果。...

【专利技术属性】
技术研发人员：徐若晨，
申请(专利权)人：阿里巴巴集团控股有限公司，
类型：发明
国别省市：开曼群岛,KY