本实用新型专利技术公开了一种大数据并行计算装置,包括PR7010B刀片服务器,所述PR7010B刀片服务器通过网线分别与千兆以太网络交换机和INFINIBAND交换机连接,所述千兆以太网络交换机和INFINIBAND交换机均分为三路,所述千兆以太网络交换机和INFINIBAND交换机均分别与计算节点、存储节点和登录管理节点通过网线连接,所述计算节点内由高密度节点和SMP胖节点组成,所述SMP胖节点上设有SRIO外部数据交换接口,所述存储节点内并行排列磁盘阵列,所述登录管理节点分别与Windows客户端、MAC客户端和LINEX客户端。本实用新型专利技术计算网络采用高带宽、低延迟的QDR INFINIBAND网络,为并行程序提供无阻塞的通信高速通道,并配置一套或两套千兆网络,用于集群管理和监控,千兆网络也可作为备用计算网络,提高系统的高可用性。
【技术实现步骤摘要】
一种大数据并行计算装置
本技术涉及大数据并行计算装置
,具体为一种大数据并行计算装置。
技术介绍
并行计算或称平行计算是相对于串行计算来说的,它是一种一次可执行多个指令的算法,目的是提高计算速度,及通过扩大问题求解规模,解决大型而复杂的计算问题,所谓并行计算可分为时间上的并行和空间上的并行,时间上的并行就是指流水线技术,而空间上的并行则是指用多个处理器并发的执行计算,普通的并行计算装置在网络传输上存在延迟,数据传输慢,存储系统存储量不够等问题。
技术实现思路
本技术的目的在于提供一种大数据并行计算装置,以解决上述
技术介绍
中提出的普通的并行计算装置在网络传输上存在延迟,数据传输慢,存储系统存储量不够等问题。为实现上述目的,本技术提供如下技术方案:一种大数据并行计算装置,包括PR7010B刀片服务器,所述PR7010B刀片服务器通过网线分别与千兆以太网络交换机和INFINIBAND交换机连接,所述千兆以太网络交换机和INFINIBAND交换机均分为三路,所述千兆以太网络交换机和INFINIBAND交换机均分别与计算节点、存储节点和登录管理节点通过网线连接,所述计算节点内由高密度节点和SMP胖节点组成,所述SMP胖节点上设有SRIO外部数据交换接口,所述存储节点内并行排列磁盘阵列,所述登录管理节点分别与Windows客户端、MAC客户端和LINEX客户端连接。优选的,所述计算节点选用双路及以上服务器,每个计算节点提供8-24处理器核心,平均每个核心配置2-4GB内存。优选的,所述SMP胖节点上设有四路SRIO外部数据交换接口,或者设置八路SRIO外部数据交换接口。优选的,所述计算节点、存储节点、登录管理节点、千兆以太网络交换机和INFINIBAND交换机构成并行计算集群系统,所述INFINIBAND交换机采用40Gb的QDRINFINIBAND网络,高带宽、低延迟。优选的,所述PR7010B刀片服务器采用一个具有80Gbps数据交换能力的SRIO交换芯片互联十二颗DSP和一颗FPGA,所述DSP子卡采用TMS320C6474-1000/1200高性能三核心DSP处理器。优选的,所述存储节点内部设有256MBDDR2-667高速动态内存和256KbEEPROM程序存储器。与现有技术相比,本技术的有益效果是:本技术计算网络采用高带宽、低延迟的QDRINFINIBAND网络,为并行程序提供无阻塞的通信高速通道;另外,配置千兆以太网络交换机,用于集群管理和监控,千兆网络也可作为备用计算网络,提高系统的高可用性;大容量、高性能、高容错、高可扩展性的分布式并行存储系统为集群提供了强大的存储支持,系统设计为用户预留了自由的可扩展空间,用户可根据业务系统的增长,灵活地增配计算节点,扩充计算网络,提升计算性能;扩充存储系统的容量和性能,满足增长的数据存放和IO性能需求,该新型具有运算速度快、运算准确、效率高的优点。附图说明图1为本技术一种大数据并行计算装置的系统结构示意图;图2为本技术一种大数据并行计算装置的流水线技术结构示意图。图中:1-Windows客户端、2-MAC客户端、3-LINEX客户端、4-千兆以太网络交换机、5-INFINIBAND交换机、6-存储节点、7-SMP胖节点、8-计算节点、9-高密度节点、10-登录管理节点、11-SRIO外部数据交换接口、12-磁盘阵列、13-PR7010B刀片服务器。具体实施方式下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本技术一部分实施例,而不是全部的实施例。基于本技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本技术保护的范围。请参阅图1-2,本技术提供的一种实施例:一种大数据并行计算装置,包括PR7010B刀片服务器13,PR7010B刀片服务器13通过网线分别与千兆以太网络交换机4和INFINIBAND交换机5连接,千兆以太网络交换机4和INFINIBAND交换机5均分为三路,千兆以太网络交换机4和INFINIBAND交换机5均分别与计算节点8、存储节点6和登录管理节点10通过网线连接,计算节点8内由高密度节点9和SMP胖节点7组成,SMP胖节点7上设有SRIO外部数据交换接口11,存储节点6内并行排列磁盘阵列12,登录管理节点10分别与Windows客户端1、MAC客户端2和LINEX客户端3。计算节点8选用双路及以上服务器,每个计算节点8提供8-24处理器核心,平均每个核心配置2-4GB内存,可获得最佳性能加速比。SMP胖节点7上设有四路SRIO外部数据交换接口11,或者设置八路SRIO外部数据交换接口11,支持多种并行程序或用于其它一些大内存应用配备。计算节点8、存储节点6、登录管理节点10、千兆以太网络交换机4和INFINIBAND交换机5构成并行计算集群系统,INFINIBAND交换机5采用40Gb的QDRINFINIBAND网络,高带宽、低延迟。PR7010B刀片服务器13采用一个具有80Gbps数据交换能力的SRIO交换芯片互联十二颗DSP和一颗FPGA,DSP子卡采用TMS320C6474-1000/1200高性能三核心DSP处理器,非常适合大数据密集型计算。存储节点6内部设有256MBDDR2-667高速动态内存和256KbEEPROM程序存储器,并采用磁盘阵列12提供了海量数据存储能力的同时,其创新的RAID级别提供了更高的数据保护功能。具体使用方式:本技术工作中,通过PR7010B刀片服务器13输入大数据,采用并行计算的方法,通过千兆以太网络交换机4和INFINIBAND交换机5传输数据,通过计算节点8内的SMP胖节点7和高密度节点9进行并行大数据运算,存储节点6采用磁盘阵列12提供了海量数据存储能力的同时,其创新的RAID级别提供了更高的数据保护功能,然后通过登录管理节点10将数据运算结果传输到Windows客户端1、MAC客户端2和LINEX客户端3,传输速度快,无延迟,准确度高。对于本领域技术人员而言,显然本技术不限于上述示范性实施例的细节,而且在不背离本技术的精神或基本特征的情况下,能够以其他的具体形式实现本技术。因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本技术的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化囊括在本技术内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。本文档来自技高网...
【技术保护点】
一种大数据并行计算装置,包括PR7010B刀片服务器(13),其特征在于:所述PR7010B刀片服务器(13)通过网线分别与千兆以太网络交换机(4)和INFINIBAND交换机(5)连接,所述千兆以太网络交换机(4)和INFINIBAND交换机(5)均分为三路,所述千兆以太网络交换机(4)和INFINIBAND交换机(5)均分别与计算节点(8)、存储节点(6)和登录管理节点(10)通过网线连接,所述计算节点(8)内由高密度节点(9)和SMP胖节点(7)组成,所述SMP胖节点(7)上设有SRIO外部数据交换接口(11),所述存储节点(6)内并行排列磁盘阵列(12),所述登录管理节点(10)分别与Windows客户端(1)、MAC客户端(2)和LINEX客户端(3)连接。
【技术特征摘要】
1.一种大数据并行计算装置,包括PR7010B刀片服务器(13),其特征在于:所述PR7010B刀片服务器(13)通过网线分别与千兆以太网络交换机(4)和INFINIBAND交换机(5)连接,所述千兆以太网络交换机(4)和INFINIBAND交换机(5)均分为三路,所述千兆以太网络交换机(4)和INFINIBAND交换机(5)均分别与计算节点(8)、存储节点(6)和登录管理节点(10)通过网线连接,所述计算节点(8)内由高密度节点(9)和SMP胖节点(7)组成,所述SMP胖节点(7)上设有SRIO外部数据交换接口(11),所述存储节点(6)内并行排列磁盘阵列(12),所述登录管理节点(10)分别与Windows客户端(1)、MAC客户端(2)和LINEX客户端(3)连接。2.根据权利要求1所述的一种大数据并行计算装置,其特征在于:所述计算节点(8)选用双路及以上服务器,每个计算节点(8)提供8-24处理器核心,平均每个核心配置2-4GB内存。3...
【专利技术属性】
技术研发人员:李修来,陈明锐,罗逸涵,陆浪,张博涵,刘子恒,
申请(专利权)人:海南大学,
类型:新型
国别省市:海南,46
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。