网络资源获取方法、装置、电子设备及存储介质制造方法及图纸

技术编号:24091951 阅读:49 留言:0更新日期:2020-05-09 08:28
本申请公开了网络资源获取方法、装置、电子设备及存储介质,方法包括:当本节点设备接收到下级节点设备发送的用于获取目标资源的资源请求时,在本地缓存中查找目标资源对应的第一缓存资源和第一缓存资源对应的第一指纹信息,如果查找到第一缓存资源,则从上级节点设备获取第二指纹信息,并通过对比第一指纹信息和第二指纹信息确定资源是否更新;如果第一指纹信息与第二指纹信息一致,则返回第一缓存资源给下级节点设备,否则,重定位目标资源,并将重定位的目标资源返回给下级节点设备。本申请方法既能提高客户端访问资源的速度,减轻网络带宽压力,还能确保资源的准确性,避免脏读。

Network resource acquisition methods, devices, electronic devices and storage media

【技术实现步骤摘要】
网络资源获取方法、装置、电子设备及存储介质
本申请涉及计算机领域,尤其涉及一种网络资源获取方法、装置、电子设备及存储介质。
技术介绍
网络信息资源简称网络资源,是指以电子资源数据的形式,将文字、图像、声音、动画等多种形式的信息储存在光、磁等非印刷质的介质中,利用计算机通过网络进行发布、传递、储存的各类信息资源的总和。客户端可以通过向代理服务器或者负载均衡服务器发送资源请求,直接获取网络资源。随着互联网业务的丰富及资源需求量的增加,直接获取网络资源的方式已然无法满足用户对资源访问速度的要求。为了提高资源访问速度,已有技术将网络资源预先缓存在网络中的各个节点设备内,并通过预定的资源分发策略为客户端所需资源分发给客户端,从而使客户端可以避开拥塞链路并就近获取到所需资源,提高资源访问速度。例如,将网络资源缓存在CDN(ContentDeliveryNetwork,内容分发网络)设备中,并利用CDN的负载均衡、内容分发及调度等功能模块为客户端分发资源。然而,由于缓存中的网络资源存在更新延迟的问题,即缓存中网络资源的更新时间晚于资源提供者更新网络资源的时间,因此容易使客户端获取到错误信息。
技术实现思路
本申请提供一种网络资源获取方法、装置、电子设备及存储介质,以解决由于缓存中的网络资源存在更新延迟的问题,即缓存中网络资源的更新时间晚于资源提供者更新网络资源的时间,因此容易使客户端获取到错误信息的问题。第一方面,本申请提供一种网络资源获取方法,所述方法包括:接收下级节点设备发送的资源请求,所述资源请求用于获取目标资源;根据所述资源请求在本地缓存中查找所述目标资源对应的第一缓存资源和所述第一缓存资源对应的第一指纹信息;如果查找到所述第一缓存资源,则从上级节点设备获取第二指纹信息,所述第二指纹信息对应于所述上级节点设备中的与所述目标资源对应的第二缓存资源;对比所述第一指纹信息与所述第二指纹信息;如果所述第一指纹信息与所述第二指纹信息一致,则返回所述第一缓存资源给所述下级节点设备;如果未查找到所述第一缓存资源或者所述第一指纹信息与所述第二指纹信息不一致,则根据所述资源请求重定位所述目标资源;将重定位的目标资源返回给所述下级节点设备。进一步,所述资源请求包括所述目标资源的URL、资源标识和资源参数中的至少一项;所述根据资源请求在本地缓存中查找所述目标资源对应的第一缓存资源,包括:根据所述目标资源的URL、资源标识和/或资源参数在本地缓存中查找所述第一缓存资源,所述第一缓存资源的URL、资源标识和/或资源参数中的至少一项与所述目标资源相同。进一步,所述根据资源请求重定位目标资源,包括:将所述资源请求发送给上级节点设备;接收上级节点设备根据所述资源请求返回的目标资源,所述重定位的目标资源为所述第二缓存资源或者其他节点设备中的所述目标资源对应的缓存资源。进一步,如果查找到所述第一缓存资源且未查找到所述第一指纹信息,则根据所述第一缓存资源生成第一指纹信息,以用于与所述第二指纹信息进行对比;以及,将生成的所述第一指纹信息在所述本地缓存中与所述第一缓存资源对应保存。进一步,所述方法还包括:使用所述重定位的目标资源替换所述第一缓存资源;以及,根据所述重定位的目标资源生成目标指纹信息;使用所述目标指纹信息替换所述第一指纹信息。进一步,所述方法还包括:周期性从上级节点设备获取第二资源列表,所述第二资源列表对应存储有所述上级节点设备缓存的所有资源的资源标识和指纹信息;根据所述第二资源列表对本地缓存中的资源进行更新。进一步,所述根据所述第二资源列表对本地缓存中的资源进行更新,包括:根据所述资源标识,将同一个资源在所述第二资源列表中的指纹信息与所述资源在本地缓存中的指纹信息对比;确定指纹信息不一致的资源为待更新资源;重定位所述待更新资源对应的更新资源;使用更新资源对所述待更新资源及对应的指纹信息进行更新。进一步,所述方法还包括:周期性向所述下级节点设备发送第一资源列表,以使所述下级节点设备根据所述第一资源列表对所述下级节点设备缓存的资源进行更新,所述第一资源列表对应存储有所述本地缓存中所有资源的资源标识和指纹信息。第二方面,本申请还提供一种网络资源获取装置,应用于中间节点设备,所述装置包括:存储模块,用于缓存网络资源和所述网络资源对应的指纹信息;接收模块,用于接收下级节点设备发送的资源请求,所述资源请求用于获取目标资源;查找模块,用于根据所述资源请求在所述存储模块中查找所述目标资源对应的第一缓存资源和所述第一缓存资源对应的第一指纹信息;获取模块,用于如果查找到所述第一缓存资源,则从上级节点设备获取第二指纹信息,所述第二指纹信息对应于所述上级节点设备中的与所述目标资源对应的第二缓存资源;对比模块,用于对比所述第一指纹信息与所述第二指纹信息;返回模块,用于如果所述第一指纹信息与所述第二指纹信息一致,则返回所述第一缓存资源给所述下级节点设备;重定位模块,用于如果未查找到所述第一缓存资源或者所述第一指纹信息与所述第二指纹信息不一致,根据所述资源请求重定位目标资源;所述返回模块,还用于将重定位的目标资源返回给所述下级节点设备。进一步,所述资源请求包括所述目标资源的URL、资源标识和资源参数中的至少一项;所述查找模块具体用于,根据所述目标资源的URL、资源标识和/或资源参数在本地缓存中查找所述第一缓存资源,所述第一缓存资源的URL、资源标识和/或资源参数中的至少一项与所述目标资源相同。进一步,所述重定位模块包括:发送单元,用于将所述资源请求发送给上级节点设备;接收单元,用于接收上级节点设备根据所述资源请求返回的目标资源,所述重定位的目标资源为所述第二缓存资源或者其他节点设备中的所述目标资源对应的缓存资源。进一步,所述装置还包括:指纹生成模块,用于如果查找到所述第一缓存资源且未查找到所述第一指纹信息,则根据所述第一缓存资源生成第一指纹信息,以用于与所述第二指纹信息进行对比;所述存储模块,还用于将生成的所述第一指纹信息与所述第一缓存资源对应保存。进一步,所述装置还包括:资源更新模块,用于使用所述重定位的目标资源替换所述第一缓存资源;以及,使用所述指纹生成模块根据所述重定位的目标资源生成的目标指纹信息替换所述第一指纹信息;所述指纹生成模块,还用于根据所述重定位的目标资源生成目标指纹信息。进一步,所述装置还包括:资源同步模块,用于周期性从上级节点设备获取第二资源列表,所述第二资源列表对应存储有所述上级节点设备缓存的所有资源的资源标识和指纹信息;以及,根据所述第二资源列表对本地缓存中的资源进行更新。进一步,所述资源同步模块包括:对比单元,本文档来自技高网...

【技术保护点】
1.一种网络资源获取方法,其特征在于,所述方法包括:/n接收下级节点设备发送的资源请求,所述资源请求用于获取目标资源;/n根据所述资源请求在本地缓存中查找所述目标资源对应的第一缓存资源和所述第一缓存资源对应的第一指纹信息;/n如果查找到所述第一缓存资源,则从上级节点设备获取第二指纹信息,所述第二指纹信息对应于所述上级节点设备中的与所述目标资源对应的第二缓存资源;/n对比所述第一指纹信息与所述第二指纹信息;/n如果所述第一指纹信息与所述第二指纹信息一致,则返回所述第一缓存资源给所述下级节点设备;/n如果未查找到所述第一缓存资源或者所述第一指纹信息与所述第二指纹信息不一致,则根据所述资源请求重定位所述目标资源;/n将重定位的目标资源返回给所述下级节点设备。/n

【技术特征摘要】
1.一种网络资源获取方法,其特征在于,所述方法包括:
接收下级节点设备发送的资源请求,所述资源请求用于获取目标资源;
根据所述资源请求在本地缓存中查找所述目标资源对应的第一缓存资源和所述第一缓存资源对应的第一指纹信息;
如果查找到所述第一缓存资源,则从上级节点设备获取第二指纹信息,所述第二指纹信息对应于所述上级节点设备中的与所述目标资源对应的第二缓存资源;
对比所述第一指纹信息与所述第二指纹信息;
如果所述第一指纹信息与所述第二指纹信息一致,则返回所述第一缓存资源给所述下级节点设备;
如果未查找到所述第一缓存资源或者所述第一指纹信息与所述第二指纹信息不一致,则根据所述资源请求重定位所述目标资源;
将重定位的目标资源返回给所述下级节点设备。


2.根据权利要求1所述的方法,其特征在于,所述资源请求包括所述目标资源的URL、资源标识和资源参数中的至少一项;
所述根据资源请求在本地缓存中查找所述目标资源对应的第一缓存资源,包括:
根据所述目标资源的URL、资源标识和/或资源参数在本地缓存中查找所述第一缓存资源,所述第一缓存资源的URL、资源标识和/或资源参数中的至少一项与所述目标资源相同。


3.根据权利要求1所述的方法,其特征在于,所述根据资源请求重定位目标资源,包括:
将所述资源请求发送给上级节点设备;
接收上级节点设备根据所述资源请求返回的目标资源,所述重定位的目标资源为所述第二缓存资源或者其他节点设备中的所述目标资源对应的缓存资源。


4.根据权利要求1所述的方法,其特征在于:
如果查找到所述第一缓存资源且未查找到所述第一指纹信息,则根据所述第一缓存资源生成第一指纹信息,以用于与所述第二指纹信息进行对比;
以及,将生成的所述第一指纹信息在所述本地缓存中与所述第一缓存资源对应保存。


5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
使用所述重定位的目标资源替换所述第一缓存资源;
以及,根据所述重定位的目标资源生成目标指纹信息;
使用所述目标指纹信息替换所述第一指纹信息。


6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
周期性从上级节点设备获取第二资源列表,所述第二资源列表对应存储有所述上级节点设备缓存的所有资源的资源标识和指纹信息;
根据所述第二资源列表对本地缓存中的资源进行更新。


7.根据权利要求6所述的方法,其特征在于,所述根据所述第二资源列表对本地缓存中的资源进行更新,包括:
根据所述资源标识,将同一个资源在所述第二资源列表中的指纹信息与所述资源在本地缓存中的指纹信息对比;
确定指纹信息不一致的资源为待更新资源;
重定位所述待更新资源对应的更新资源;
使用更新资源对所述待更新资源及对应的指纹信息进行更新。


8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
周期性向所述下级节点设备发送第一资源列表,以使所述下级节点设备根据所述第一资源列表对所述下级节点设备缓存的资源进行更新,所述第一资源列表对应存储有所述本地缓存中所有资源的资源标识和指纹信息。


9.一种网络资源获取装置,应用于中间节点设备,其特征在于,所述装置包括:
存储模块,用于缓存网络资源和所述网络资源对应的指纹信息;
接收模块,用于接收下级节点设备发送的资源请求,所述资源请求用于获取目标资源;
查找模块,用于根据所述资源请求在所述存储模块中查找所述目标资源对应的第一缓存资源和所述第一缓存资源对应的第一指纹信息;

【专利技术属性】
技术研发人员:孔德刚
申请(专利权)人:北京五八信息技术有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1