欢迎来到天天文库
浏览记录
ID:48143530
大小:164.25 KB
页数:8页
时间:2020-01-17
《HDFS云存储平台搭建.pptx》由会员上传分享,免费在线阅读,更多相关内容在行业资料-天天文库。
1、HDFS云存储平台搭建云存储结构模型目标在现有的硬件基础上,选择合适的云存储平台;完成云存储平台的搭建,实现文件存储功能;在建立的云存储平台上开发若干个应用案例。HDFSHadoopDistributedFileSystem,简称HDFS,是一个分布式文件系统。HDFS有着高容错性的特点,并且设计用来部署在低廉的硬件上。而且它提供高传输率来访问应用程序的数据,适合那些有着超大数据集的应用程序。ApacheHadoop是一个软件框架(平台),它可以分布式地操纵大量数据。它于2006年出现,由Google、Yahoo!和IB
2、M等公司支持。可以认为它是一种PaaS模型。它的设计核心是MapReduce实现和HDFS(HadoopDistributedFileSystem),它们源自MapReduce(由一份Google文件引入)和GoogleFileSystem。应用平台和开发工具操作系统:Linux开发语言:Java应用案例Yahoo!拥有最大的HadoopLinux生产架构,共由10,000多个内核组成,有超过5PB字节的储存分布到各个DataNode。在它们的Web索引内部差不多有一万亿个链接。可以使用AmazonElasticComp
3、uteCloud(EC2)构建一个包含20个节点的虚拟集群。事实上,纽约时报使用Hadoop和EC2在36个小时内将4TB的TIFF图像—包括405K大TIFF图像,3.3MSGML文章和405KXML文件—转换为800K适合在Web上使用的PNG图像。这种处理称为云计算,它是一种展示Hadoop的威力的独特方式。
此文档下载收益归作者所有