性能计算集群存储解决方案

《性能计算集群存储解决方案》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、BlueWhale高性能计算集群存储解决方案———蓝鲸集群存储系统天津中科蓝鲸信息技术有限公司TIANJINZHONGKEBLUEWHALEINFORMATIONTECHNOLOGYCO.,LTD天津中科蓝鲸信息技术有限公司天津中科蓝鲸信息技术有限公司是在中国科学院与天津市政府开展院地合作的背景下，在天津新技术产业园区管委会的支持下，由中科院计算技术研究所、天津海泰科技投资管理有限公司、美国飞康软件股份有限公司等单位共同出资成立的，主要从事网络存储产品的研发、生产和销售，及相关技术开发与服务，为用户提供具有完全自有知识产权的存储产品和基于这些产品的存储解决方案。

2、中科蓝鲸公司是中科院计算所在国内的唯一的存储技术产业化基地，其目标是成为中国存储产业的领军企业和国家网络存储研发基地，促进国内存储产业的发展，打造国产网络存储产品知名品牌。中科蓝鲸公司主要在中科院计算所工程中心已有的存储系列研究成果基础上，结合国外先进的存储技术，研发、生产和销售自有品牌的网络存储系统，提供优质的存储技术服务，同时针对各行业的具体应用，向用户提供网络存储解决方案。目前公司已有的成熟的蓝鲸系列存储产品包括：蓝鲸集群存储系统、蓝鲸部署系统、蓝鲸数据备份系统和蓝鲸网络存储设备等，并已经在石油、遥感、高教、政府、科研等行业得以应用。工程中心于1997年4

3、月经国家科学技术委员会批准组建，2000年通过国家科技部验收，依托于中国科学院计算技术研究所，是国家批准成立的2个计算机领域内的国家工程技术研究中心之一。自2001年以来，工程中心将高性能计算研究的重点集中到网络存储系统以及基于网络存储系统的高性能计算机系统的关键技术上来。是国内存储行业最早进行基于IP的网络存储系统研究的机构之一，其研发成果包括“蓝鲸品牌”的蓝鲸系列高端技术存储产品。蓝鲸系列存储产品之一的蓝鲸集群存储系统（BWStor）正是BlueWhale为高性能计算领域量身定制的专业存储产品。本系列产品不仅提供PB级的存储、几十GB的I/O吞吐率，打破了存

4、储I/O瓶颈，还可实现系统容量和性能的动态扩展，以及快速部署和管理应用服务器，而且针对高性能领域里特殊应用环境需求，通过利用高性能的Linux集群，在达到极高地址：天津新技术产业园区华苑产业区海泰发展6道6号海泰绿色产业基地F座5门201号网站：http://www.bwstor.com.cn/电话：022-85689592(中继线Ⅰ)电话：022-85689593(中继线Ⅱ)版权所有©2008天津中科蓝鲸信息技术有限公司地计算能力的同时，提供无缝集成原有系统和易管理的专业的存储解决方案，极大地提高计算性能、减小总体拥有成本。使用BWStor存储解决方案，企业能

5、够通过控制他们的存储基础结构的费用和复杂性，降低总体拥有成本，实现最高的应用性能。随着产品化工作不断发展，现已部署在能源、制造业、遥感、生物计算等高性能计算领域中。BWStor的应用，大大提高了应用系统的生产效率并简化了系统管理。在数据密集型高性能集群计算应用中，采用蓝鲸存储技术后，计算系统的计算效率被提高了2-10倍。地址：天津新技术产业园区华苑产业区海泰发展6道6号海泰绿色产业基地F座5门201号网站：http://www.bwstor.com.cn/电话：022-85689592(中继线Ⅰ)电话：022-85689593(中继线Ⅱ)版权所有©2008天津中

6、科蓝鲸信息技术有限公司高性能计算环境I/O性能问题解析从上个世纪80年初计算机应用开始，高性能计算机系统已经经历了好几代的更新，从早期的向量服务器，一直到现在集群（PCCluster）。目前PCCluster已经成为高性能计算环境下的主流系统发展趋势。高性能计算往往是一种数据密集型和计算密集型相结合的应用，对计算和I/O的处理能力都有较高的要求，而集群应用可分为计算密集型和数据密集型两大类。所谓数据密集型应用，主要指在计算过程中使用、生产大量数据的应用，这种应用模式对集群系统在数据的峰值高速导入、大量并发共享访问、高速传输、高的I/O扩展性、大目录（大量小文件）

7、和大文件的性能等多个方面都提出了很高的要求。根据对应用需求的分析我们可以看出，工业应用已经取代科学计算和技术研究成为高性能计算的主体应用，其中数据处理更成为核心应用，如在地球物理、大气气象、生物信息等领域等。I/O密集型是数据密集型应用中最主要的一种，但在使用PCCluster进行数据处理的时候，一个最主要的问题就是数据的I/O瓶颈问题。如果PCCluster中的节点无法获得高速率的数据传输性能，其计算性能也无法获得充分发挥。在我国大多数的高性能计算集群中，PCCluster环境通常采用网络文件系统（NetworkFileSystem，NFS）进行数据传输和共享

8、，但由于受到NFS协议的