ibm_gfps与存储应用解决方案（ibm gpfs并行文件系统解决方案）

《ibm_gfps与存储应用解决方案（ibm gpfs并行文件系统解决方案）》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。

1、IBMGPFS并行文件系统解决方案随着技术的发展，大规模的并行计算的方式激发有关行业对高性能计算机的需求,作为后起之秀的Linux集群系统，吸取了SP大规模并行机的诸多优势，IBM的通用并行文件系统GPFS等和Linux集群系统的竭诚不仅能在并行运算方面的性能得到保障，增强了集群系统的可管理性，而且采用具有高可用性的IBMxSeries服务器，可以大大降低成本。目标市场：金融行业、气象局、地质勘探、高校实验室、生物工程、科研探索等高性能计算领域。IBMGPFS并行文件系统解决方案构成高性能计算机的架构主要

2、以集群为主，整个高性能计算系统在硬件基础架构上包含计算资源、网络资源和存储资源三大部分。在目前主流的采用Linux并行集群架构的高性能计算系统中，计算资源分为计算节点和I/O节点，计算节点负责运行计算任务，I/O节点则负责数据的存储并响应计算节点的读写请求，不同计算资源节点之间通过高速网络进行通信和信息交换。在此次方案中，我们选用的IBMLinux集群系统使用了基于IntelXeon处理器的刀片服务器节点、成熟的集群管理软件、提供极高的持续带宽保证的存储服务器，集中了最好的IBM高性能设备和技术。不仅能在

3、并行运算方面的性能得到保障，而且增强了集群系统的可管理性和可维护性。采用具有高可用性的IBMxSeries服务器，大大降低了总体成本。同时，数据量的增加，带来了针对数据的管理，共享，分布，保护等实际需求，市场要求存储厂商不断推出适合需求的解决方案和产品。传统的服务器－客户机网络结构在性能、可管理性、连接性等方面都达到了极限，而SAN是解决这些问题的理想方案。IBMDS3500存储平台作为IBM针对大规模并行计算领域有着高性能、高稳定性和易扩展、易管理等特性，十分满足高性能计算平台对于存储设备的要求。在计算

4、节点的选择上，IBM建议采用BladeCenter+HS22刀片,IBMBladeCenter支持最新的Intel和AMD四核处理器,支持业界最快的高达4.0GHz的Power6处理器,以及专用于高性能计算的九核Cell处理器。IBMHS22是业界功能最强大的刀片，HS22采用最新的IntelNahelem处理器,在集成了IBMBladeCenter传统的高可靠等优势的基础上，性能、功耗和虚拟化的功能都比上一代产品有了显著提升。IO节点采用IBM的X3850或者X3650，产品前后端高吞吐量以及灵活组合方

5、式，能提供极高的持续带宽保证，非常适合做高性能计算环境下持续带宽要求极高的存储服务器，显著提高I/O节点的处理能力：?I/O节点是提供存贮共享的计算机。为了使任务可以并行执行，每台执行任务的计算机必须能够访问同样的数据，本方案存贮节点通过集群文件系统（IBMGPFS）来确保数据访问的同步。?I/O节点和高性能存储直接相连，并通过自己的FiberChannelI/O通道将冗余磁盘阵列上的多个分区做成集群并行文件系统GPFS，并向计算节点提供数个唯一路径且全局共享的文件系统。本方案提供高速的文档读写服务给所有

6、计算节点，特别适合于有可能会产生大文档的高性能应用上。通常的IO节点机共计4套主机，每个主机为两块8Gb的高性能HBA卡，单IO节点连接到SAN网络交换机，每个节点配置的带宽为16Gb的带宽性能，本次测试配置4个IO节点，共计有8条8Gb带宽联入SAN核心网络中，从IO节点联入核心网络总持续写入带宽为6.4GB/S的带宽。两台DS3500存储节点，每台配置8个8GbFC接口联入SAN网络中，共计IO带宽为12.8GB/S.每台DS3500存储节点配置为48块300G15KRPMSAS及48块1TBNL7.

7、2KSAS,在每台DS3500上实现IO分级存储，将核心的频繁读写的IO的LUN划分在15K的高速SAS存储上，其它的分布在NLSAS上，IBM的GPFS支持HPC的分级IO功能。本次方案为双节点DS3500存储节点，每个节点连接3个扩展柜，一级存储容量为300G×96SAS共计28TB容量，二级存储容量为1TB*96NLSAS,共计存储容量为96TB.针对DS3500，在全配置8个8GbFC接口的情况下，每个DS3500盘阵可以提供4GB/S的硬盘持续带宽，两台DS3500共计可提供8Gb/S的持续带宽

8、。在GPFS配置上，我们建议用户配置2MB的IOBlockSize,针对大规模并发运算应采用较大的IO读写带宽，在我们提供的GPFSHPC运算方式中，保证用户为提供最大带宽，单个GPFS系统并发带宽可以通过16个8GbFC端口平均分布在这24个Lun上，GPFS系统对LUN使用率可以达到90%以上，在这样的配置下，2台双节点的存储节点带宽持续可以达到6GB以上。DS3500存储节点的优势：DS3500系列适合交易型的应用，如数