2010年2月高性能计算机和曙光GHPC1000集群系统培训资料

《2010年2月高性能计算机和曙光GHPC1000集群系统培训资料》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、高性能计算机和曙光GHPC1000集群系统技术支持中心曙光信息产业（北京）有限公司目录1高性能计算简介1.1什么是高性能并行计算机1.2流行的高性能计算机架构1.3集群技术的趋势2本项目GHPC1000集群系统介绍1.1什么是高性能并行计算机由众多部件组成，具有运算速度快、存储容量大、可靠性高的特性。也称为：巨型计算机、超级计算机目前任何高性能计算和超级计算都离不开使用并行技术，所以高性能计算机肯定是并行计算机。1.2流行的高性能计算机架构并行向量机SMPDSM（NUMA）MPP，节点可以是单处理器的节点，也可以是SMP，DSMCluster混合架构1993—2006年高

2、性能计算机在TOP500中的变化1.3集群技术的趋势MPP/PVP在构造大规模系统，应用饱和性能方面具有优势，资金充足的依然会选择；大型的CC-NUMA系统将逐渐走向衰落：它的优势是大物理内存，大量CPU共享内存的高效编程对用户是一件困难的事；大规模并行计算的效率问题；不适合构造更大的系统；价格高，优势丧失；SMP系统存在访存瓶颈，导致可扩展性的限制，不能用于构建更大的并行机器（64路以上）集群系统由于无可比拟的性价比优势占据主流位置。1高性能计算简介2本项目GHPC1000集群系统介绍目录设计目标及设计思路基于通用CPU+专用GPU的高性能计算集群GPU峰值速度：183

3、TFlops(单精度)高性能、高可靠的高性能计算平台系统整体配置节点：计算节点1(A620r-T)：43×2=86台GPU显卡：GTX295计算节点2(A620r-T)：16×2=32台GPU显卡：C1060IO节点(A620-H)：1台存储：DS6310EE1台容量：16TB网络：计算网：Infiniband1套36口IB交换机1台96口IB交换机1台20GbIB网卡119块管理网：千兆以太网1套48口交换机3台水冷和支撑系统：水冷机柜6个控制系统系统：SKVM系统1套集群控制台1套软件系统：操作系统GridView管理系统Powerconf节能软件系统GNU编译器并行

4、环境CUDA开发环境详见配置表系统整体拓扑图计算结点１：A620r-T曙光GPU计算节点A620r-T：43台GPU处理单元:1×NvidiaGTX295GPU卡处理器：1颗AMDOpteron23782.4G四核处理器内存：16G内存硬盘：1×160GBSATA热插拔网络：集成2×1000MInfiniband：集成DDR20Gb/sHCA计算结点2：A620r-T曙光GPU计算节点A620r-T：16台GPU处理单元:1×NvidiaC1060GPU卡处理器：1颗AMDOpteron23782.4G四核处理器内存：16G内存硬盘：1×160GBSATA热插拔网络：集成

5、2×1000MInfiniband：集成DDR20Gb/sHCA机箱结构-整体示意图机箱前部硬盘GPU卡2风扇主板1电源1电源2主板2GPU卡1整机方案细节描述—主板规格主板技术规格FormFactor：大约16.7”x6.8”（42.3cmx17.3cm）CPU:最高支持2颗AMDbarcelonaorshanghai处理器Chipset:NvidianForce3600内存：16DIMM插槽，支持DDR2533/667ECCREGLAN:2GigabitLANInfiniband:MellanoxInfiniHostIIILxDDRMT25204A0-FCC-Dsin

6、gleportSATA:4-SATA2SupportRaid0,1,5PCIE:1全长全高PCI-Ex16(支持双卡宽度，每机箱支持2片卡）IPMI2.0图片仅供参考曙光天阔GPU-SERVER主板存储系统I/O结点磁盘阵列曙光A620r（1台）：处理器：2×AMDOpteron23782.4G内存：16GBDDR2-667硬盘：1×146GBSAS热插拔HBA：1×12Gb/sSAS4xHBA卡网络：2×千兆IB：20GbIBHCA曙光DS6310EE盘阵(16T):企业级存储系统，热插拔Raid控制器性能：4个SAS4x主机通道扩展性：最大扩展至80个驱动器可靠性：C

7、ache镜像及掉电保护容量：16块1TBSATA磁盘存储系统Infiniband计算节点冗余的企业级后端存储架构业界主流的nfs网络文件系统IO节点：1台盘阵容量：16TA620r-H:产品技术规格规格备注处理器支持2路Opteron2000系列普通功耗处理器L2/L3512K/core，共享2MBL34核巴塞罗那处理器L2/L3512K/core，共享6MBL34核上海处理器芯片组NVIDIAnForce3600内存/Max16×DIMMs/64GB支持DDR2533/667ECC、Reg光驱、软驱DVD-RW，可选USB-