虚拟化与云计算课程设计

《虚拟化与云计算课程设计》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、虚拟化与云计算课程设计学生学院计算机学院______专业班级学号____学生姓名_________2016年11月1日一、部署方式Hadoop主要有两种安装方式，即传统解压包方式和Linux标准方式。早期的Hadoop都是采用直接解压Hadoop-x.gz包方式部署的，近两年来由于Cloudera、Hortonworks等公司对Hadoop及相关组件的包装、整合，Hadoop部署方式正向标准Linux部署方式靠拢。相对来说，标准Linux部署方式简单易用，而传统部署方式则繁琐易错；标准部署方式隐藏了太多细节，而传统部署方式则有助于读者深入理解Hadoop。本课设是采用传统部

2、署方式部署Hadoop2.0。二、实验步骤1.硬件环境部署使用VMware将此机器虚拟成三台CentOS机器cMaster，cSlave0，cSlave12.软件环境部署下载Headoop和JDK，并完成修改机器名、添加域名映射、关闭防火墙和安装JDK四个操作。（1）修改机器名：将“HOSTNAME=localhost.localdomain”中的“localhost.localdomain”替换成需要使用的机器名。（2）添加域名映射先用ifconfig命令查看IP地址，然后编辑域名映射文件/etc/hosts，将“IP地址机器名”加入到此文件中。（3）关闭防火墙使用chk

3、config--level35iptablesoff命令永久关闭防火墙，并且重启机器使命令生效。（4）安装JDK把JDK安装到CentOS中。安装成功结果：（5）添加映射后，在cMaster上ping另外两台机器的机器名结果如下1.部署Hadoop2.0（1）下载并解压Hadoop分别登录三台机器，每台都执行如下命令解压Headoop文件tar-zxvf/home/Hadoop-2.2.0.tar.gz（2）配置Hadoop文件（三台机器都配置，且配置相同）首先编辑文件“/home/joe/Hadoop-2.20/etc/Hadoop/Hadoop-env.sh”；其次编辑

4、文件“/home/joe/Hadoop-2.20/etc/Hadoop/core-site.xml”；编辑文件“/home/joe/Hadoop-2.20/etc/Hadoop/yarn-site.xml”；最后，将文件“/home/joe/Hadoop-2.20/etc/Hadoop/mapred-site.xml.template”重命名为“/home/joe/Hadoop-2.20/etc/Hadoop/mapred-site.xml”，接着编辑此文件并将如下的内容嵌入此文件的configuration标签间。（2）启动Hadoop首先，在主节点cMaster上格式化

5、主节点命名空间：其次，在主节点cMaster上启动存储主服务namenode和资源管理主服务resourcemanager；最后，在从节点启动存储从服务datanode和资源管理从服务nodemanager，注意，cSlave0和cSlave1这两台机器都要执行，命令如下：（3）测试Hadoop分别在三台机器上执行命令：$/usr/java/jdk1.7.0_40/bin/jps$ps-ef

6、grepjava则在cMaster上看到如图信息：此外，还可以任选一台机器，如cMaster，打开CentOS默认浏览器Firefox，地址栏输入“cMaster：50070”，即可在

7、Web界面看到HDFS相关信息；同理，地址栏输入“cMaster：8088”，即可在web界面看到Yarn相关信息。（2）验证集群用浏览器打开“cMaster：8088”，会看到Web界面上显示正在运行的WordCount信息。打开“cMaste：50070r”并点击链接“Browsethefilesystem”会看到输入数据“/in”和输出结果数据“/out/wc-01/part-r-00000”。