数据下载方法和系统技术方案

技术编号:9465299 阅读:118 留言:0更新日期:2013-12-19 02:56
一种数据下载方法,获取待下载文件的下载请求,下载请求中包含原始下载链接,原始下载链接为源URL链接、BT种子文件、eMule下载链接中任意一种;根据原始下载链接获得待下载文件的哈希值;根据待下载文件的哈希值,且当原始下载链接为BT种子文件时,获取待下载文件的eMule下载链接信息以及多源URL集合;当原始下载链接为eMule下载链接时,获取待下载文件的Bt种子文件信息以及多源URL集合;当原始下载链接为源URL链接时,获取待下载文件的Bt种子文件信息和eMule下载链接信息以及多源URL集合;根据待下载文件的Bt种子文件信息和/或eMule下载链接信息以及多源URL集合下载待下载文件。通过上述方法能实现基于不同下载协议的网络进行数据共享。此外,还提供一种数据下载系统。

【技术实现步骤摘要】
数据下载方法和系统
本专利技术涉及网络技术,特别是涉及一种数据下载方法和系统。
技术介绍
主要的数据下载方式有P2P和P2SP。P2P是基于点对点协议,藉由仲裁中介服务器的数据传输,P2SP即点对服务器和点,“点”指的是网络节点-或终端。p2sp下载系统能有效的整合散落于互联网中的资源,为用户下载数据提供更多的通道,实现数据的共享,且相对于传统的P2P下载系统来说稳定性有了较大的加强。目前应用最广泛的三种下载协议分别为Http下载协议、Bt下载协议和eMule下载协议。然而,一般的p2sp下载系统采用上述三种下载协议中的一种,每种下载系统只能共享在同一下载协议下的数据。例如,一个用户采用的下载系统是基于Bt下载协议的,当用户在下载某一数据文件时,下载系统首先会获取该数据文件的种子文件,然后根据种子文件在互联网中查找存有该数据文件的节点(Peer),形成一个P2P网络,进而实现该P2P网络中该数据文件的共享。另一个用户采用的是基于eMule下载协议的下载系统,当用户在下载同样的数据时,下载系统首先获得该数据的信息摘要值,然后根据该信息摘要值在互联网中查找存有该数据文件的Peer,并形成一个新的P2P网络。该用户只会在这个新的P2P网络中与其他节点进行数据共享,而不会共享基于Bt下载协议的P2P网络中的数据。因此,目前的P2sp技术还没有充分实现网络上数据资源的无缝共享。基于不同下载协议的p2p网络是隔离的,他们下载的同一个数据文件之间的Peer也无法共享,不同的下载协议之间还存在不能互通的鸿沟。
技术实现思路
基于此,有必要提供一种能实现基于不同下载协议的网络进行数据共享的数据下载方法和系统。一种数据下载方法,包括以下步骤:获取待下载文件的下载请求,所述下载请求中包含原始下载链接,所述原始下载链接为源URL链接、BT种子文件、eMule下载链接中任意一种;根据所述原始下载链接获得所述待下载文件的哈希值;根据所述待下载文件的哈希值,且当所述原始下载链接为BT种子文件时,获取所述待下载文件的eMule下载链接信息以及多源URL集合;当所述原始下载链接为eMule下载链接时,获取所述待下载文件的Bt种子文件信息以及多源URL集合;当所述原始下载链接为源URL链接时,获取所述待下载文件的Bt种子文件信息和eMule下载链接信息以及多源URL集合;根据获取待下载文件的Bt种子文件信息和/或eMule下载链接信息、以及多源URL集合下载所述待下载文件。在其中一个实施例中,所述根据所述原始下载链接获得所述待下载文件的哈希值的步骤为:当所述原始下载链接为源URL链接时,根据预设的URL链接与哈希值的映射关系,查询与所述待下载文件的源URL链接对应的哈希值;当所述原始下载链接为BT种子文件时,根据预设的Bt种子文件信息与哈希值的映射关系,查询与所述待下载文件的Bt种子文件信息对应的哈希值;当所述原始下载链接为eMule下载链接时,根据预设的eMule下载链接信息与哈希值的映射关系,查询与所述待下载文件的eMule下载链接信息对应的哈希值。在其中一个实施例中,当所述原始下载链接为源URL链接时,根据所述待下载文件的哈希值,获取所述待下载文件的Bt种子文件信息和eMule下载链接信息以及多源URL集合的步骤为:根据预设的URL链接与哈希值的映射关系,查询与所述待下载文件的哈希值对应的多源URL集合;根据预设的Bt种子文件信息与哈希值的映射关系,查询与所述待下载文件的哈希值对应的Bt种子文件信息;根据预设的eMule下载链接信息与哈希值的映射关系,查询与所述待下载文件的哈希值对应的eMule下载链接信息。在其中一个实施例中,当所述原始下载连接为BT种子文件时,根据所述待下载文件的哈希值,获取所述待下载文件的eMule下载链接信息以及多源URL集合的步骤为:根据预设的URL链接与哈希值的映射关系,查询与所述待下载文件的哈希值对应的多源URL集合;根据预设的eMule下载链接信息与哈希值的映射关系,查询与所述待下载文件的哈希值对应的eMule下载链接信息。在其中一个实施例中,当所述原始下载连接为eMule下载链接时,根据所述待下载文件的哈希值,获取所述待下载文件的Bt种子文件信息以及多源URL集合的步骤为:根据预设的URL链接与哈希值的映射关系,查询与所述待下载文件的哈希值对应的多源URL集合;根据预设的Bt种子文件信息与哈希值的映射关系,查询与所述待下载文件的哈希值对应的Bt种子文件信息。在其中一个实施例中,所述Bt种子文件信息为Bt种子文件的特征码和文件序号,所述eMule下载链接信息为待下载文件的信息摘要值和文件大小,所述根据获取待下载文件的Bt种子文件信息和/或eMule下载链接信息、以及多源URL集合下载所述待下载文件的步骤为:将所述待下载文件划分为多个分片,并根据下载能力对所述分片的下载任务进行调度;根据所述待下载文件的多源URL集合下载所述分片;当所述原始下载链接为Bt种子文件时,根据所述原始下载链接下载所述分片,否则,根据所述待下载文件的Bt种子文件的特征码获取Bt种子,并根据所述BT种子下载所述分片;当所述原始下载链接为eMule下载链接时,根据所述原始下载链接下载所述分片,否则,根据所述待下载文件的信息摘要值和文件大小构造eMule下载链接,并根据所述eMule下载链接下载所述分片。在其中一个实施例中,所述方法还包括:当所述待下载文件为新文件时,建立并存储所述新文件的URL链接与哈希值、Bt种子信息与哈希值或eMule下载链接信息与哈希值之间的映射关系。在其中一个实施例中,所述方法还包括:当所述待下载文件为新文件时,获取并存储所述待下载文件的Bt种子文件。此外,还提供一种数据下载系统,所述系统包括下载服务器和下载客户端,所述下载服务器包括:资源查询服务器,用于获取待下载文件的下载请求,所述下载请求中包含原始下载链接,所述原始下载链接为源URL链接、BT种子文件、eMule下载链接中任意一种;逻辑服务器群,用于根据所述原始下载链接获得所述待下载文件的哈希值;所述逻辑服务器群还用于根据所述待下载文件的哈希值,且当所述原始下载链接为BT种子文件时,获取所述待下载文件的eMule下载链接信息以及多源URL集合;当所述原始下载链接为eMule下载链接时,获取所述待下载文件的Bt种子文件信息以及多源URL集合;当所述原始下载链接为源URL链接时,获取所述待下载文件的Bt种子文件信息和eMule下载链接信息以及多源URL集合;所述下载客户端用于根据获取待下载文件的Bt种子文件信息和/或eMule下载链接信息、以及多源URL集合下载所述待下载文件。在其中一个实施例中,所述原始下载链接为源URL链接或BT种子文件或eMule下载链接,所述逻辑服务器群包括:U2h服务器,用于当所述原始下载链接为源URL链接时,根据预设的URL链接与哈希值的映射关系,查询与所述待下载文件的源URL链接对应的哈希值;Bt2h服务器,用于当所述原始下载链接为BT种子文件时,根据预设的Bt种子文件信息与哈希值的映射关系,查询与所述待下载文件的Bt种子文件信息对应的哈希值;eMule2h服务器,用于当所述原始下载链接为eMule下载链接时,根据预设的本文档来自技高网...
数据下载方法和系统

【技术保护点】
一种数据下载方法,包括以下步骤:获取待下载文件的下载请求,所述下载请求中包含原始下载链接,所述原始下载链接为源URL链接、BT种子文件、eMule下载链接中任意一种;根据所述原始下载链接获得所述待下载文件的哈希值;根据所述待下载文件的哈希值,且当所述原始下载链接为BT种子文件时,获取所述待下载文件的eMule下载链接信息以及多源URL集合;当所述原始下载链接为eMule下载链接时,获取所述待下载文件的Bt种子文件信息以及多源URL集合;当所述原始下载链接为源URL链接时,获取所述待下载文件的Bt种子文件信息和eMule下载链接信息以及多源URL集合;根据获取的待下载文件的Bt种子文件信息和/或eMule下载链接信息、以及多源URL集合下载所述待下载文件。

【技术特征摘要】
1.一种数据下载方法,包括以下步骤:获取待下载文件的下载请求,所述下载请求中包含原始下载链接,所述原始下载链接为源URL链接、BT种子文件、eMule下载链接中任意一种;根据所述原始下载链接获得所述待下载文件的哈希值;根据所述待下载文件的哈希值,且当所述原始下载链接为BT种子文件时,获取所述待下载文件的eMule下载链接信息以及多源URL集合;当所述原始下载链接为eMule下载链接时,获取所述待下载文件的BT种子文件信息以及多源URL集合;当所述原始下载链接为源URL链接时,获取所述待下载文件的BT种子文件信息和eMule下载链接信息以及多源URL集合;进行下载之前,将所述待下载文件划分为多个分片,并根据下载能力为基于不同协议的下载方式分配分片的下载任务;根据获取的待下载文件的BT种子文件信息和/或eMule下载链接信息、以及多源URL集合下载所述待下载文件;若在所述待下载文件的下载过程中,有一种或两种下载方式提前完成所分配的下载任务,对剩余的下载任务进行重新分配。2.根据权利要求1所述的数据下载方法,其特征在于,所述根据所述原始下载链接获得所述待下载文件的哈希值的步骤为:当所述原始下载链接为源URL链接时,根据预设的URL链接与哈希值的映射关系,查询与所述待下载文件的源URL链接对应的哈希值;当所述原始下载链接为BT种子文件时,根据预设的BT种子文件信息与哈希值的映射关系,查询与所述待下载文件的BT种子文件信息对应的哈希值;当所述原始下载链接为eMule下载链接时,根据预设的eMule下载链接信息与哈希值的映射关系,查询与所述待下载文件的eMule下载链接信息对应的哈希值。3.根据权利要求1或2所述的数据下载方法,其特征在于,当所述原始下载链接为源URL链接时,根据所述待下载文件的哈希值,获取所述待下载文件的BT种子文件信息和eMule下载链接信息以及多源URL集合的步骤为:根据预设的URL链接与哈希值的映射关系,查询与所述待下载文件的哈希值对应的多源URL集合;根据预设的BT种子文件信息与哈希值的映射关系,查询与所述待下载文件的哈希值对应的BT种子文件信息;根据预设的eMule下载链接信息与哈希值的映射关系,查询与所述待下载文件的哈希值对应的eMule下载链接信息。4.根据权利要求1或2所述的数据下载方法,其特征在于,当所述原始下载连接为BT种子文件时,根据所述待下载文件的哈希值,获取所述待下载文件的eMule下载链接信息以及多源URL集合的步骤为:根据预设的URL链接与哈希值的映射关系,查询与所述待下载文件的哈希值对应的多源URL集合;根据预设的eMule下载链接信息与哈希值的映射关系,查询与所述待下载文件的哈希值对应的eMule下载链接信息。5.根据权利要求1或2所述的数据下载方法,其特征在于,当所述原始下载连接为eMule下载链接时,根据所述待下载文件的哈希值,获取所述待下载文件的BT种子文件信息以及多源URL集合的步骤为:根据预设的URL链接与哈希值的映射关系,查询与所述待下载文件的哈希值对应的多源URL集合;根据预设的BT种子文件信息与哈希值的映射关系,查询与所述待下载文件的哈希值对应的BT种子文件信息。6.根据权利要求1所述的数据下载方法,其特征在于,所述BT种子文件信息为BT种子文件的特征码和文件序号,所述eMule下载链接信息为待下载文件的信息摘要值和文件大小,所述根据获取待下载文件的BT种子文件信息和/或eMule下载链接信息、以及多源URL集合下载所述待下载文件的步骤为:根据所述待下载文件的多源URL集合下载所述分片;当所述原始下载链接为BT种子文件时,根据所述原始下载链接下载所述分片,否则,根据所述待下载文件的BT种子文件的特征码获取BT种子,并根据所述BT种子下载所述分片;当所述原始下载链接为eMule下载链接时,根据所述原始下载链接下载所述分片,否则,根据所述待下载文件的信息摘要值和文件大小构造eMule下载链接,并根据所述eMule下载链接下载所述分片。7.根据权利要求1所述的数据下载方法,其特征在于,所述方法还包括:当所述待下载文件为新文件时,建立并存储所述新文件的URL链接与哈希值、BT种子文件信息与哈希值...

【专利技术属性】
技术研发人员:刘刚
申请(专利权)人:腾讯科技深圳有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1