Hadoop1.2.1伪分布模式安装小结

《Hadoop1.2.1伪分布模式安装小结》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、Hadoop1.2.1伪分布模式安装小结Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。其安装模式有单机模式，伪分布式，真正分布式，针对伪分布模式的安装总结如下：1：软件环境准备1.1Hadoop：我们使用hadoopRelease1.2.1(stable)版本，下载链接：http://mirrors.ustc.edu.cn/apache/hadoop/common/hadoop-1.2.1/我们选择hadoop-1.2.1-bin.tar.gz文件下载。1.2J

2、ava:Java在这里使用的是jdk1.7版本的，当然也可以使用1.6的，下载链接：http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html我们选择Linuxx86的 jdk-7u40-linux-i586.tar.gz版本下载，因为我的Linux机器是32位的；如果Linux机器是64的就必须选择64位的下载，可以选择jdk-7u40-linux-x64.tar.gz；这个步骤非常重要，不同的机器必须要配置不同的jdk版本。2：安装到Linux中2.1创建目录：首

3、先我们创建一个目录：mkdir/data/installation,该目录存储下载好的的两个安装文件包。mkdir/data/software/hadoop,该目录存储hadoop程序文件。mkdir/data/software/java,该目录存储jdk的文件。mkdir/data/software/eclipse,该目录存储eclipse的文件。注意：在实际安装的时候我们最好单独为运行hadoop程序建立一个账号，并赋予相关权限。在这里我直接以root身份安装。2.2解压安装包文件：把刚刚下载好的文件都放到/data/installation/目录下。首先解压java安

4、装包文件，运行以下命令：tar-xzvf/data/installation/jdk-7u40-linux-x64.tar.gz-C/data/software/java/然后解压hadoop安装包文件，运行以下命令：tar-xzvf/data/installation/hadoop-1.2.1-bin.tar.gz-C/data/software/hadoop/最后解压eclipse安装包文件，运行以下命令：tar-xzvf/data/installation/eclipse-standard-kepler-SR1-linux-gtk.tar.gz-C/data/soft

5、ware/eclipse/  3：配置HadoopHadoop环境的配置关重要，首先必须要配置java运行环境。3.1配置java环境：添加JAVA_HOME,CLASSPATH环境变量：使用vi/etc/profile命令编辑profile文件，在文件末尾加上以下内容：HADOOP_INSTALL=/data/software/hadoop/hadoop-1.2.1/JAVA_HOME=/data/software/java/jdk1.7.0_40PATH=$JAVA_HOME/bin:$HADOOP_INSTALL/bin:$PATHCLASSPATH=$JAVA_HO

6、ME/libexportJAVA_HOMEPATHCLASSPATHHADOOP_INSTALL然后保存，退出，使用source/etc/profile使刚刚的更改立即生效。然后使用java–version命令，查看是否配置成功，如果成功会出现以下信息：javaversion"1.7.0_40"Java(TM)SERuntimeEnvironment(build1.7.0_40-b43)JavaHotSpot(TM)ClientVM(build24.0-b56,mixedmode)3.2配置ssh环境：使用以下命令设置ssh无密码连接：ssh-keygen-tdsa-P""

7、-f~/.ssh/id_dsacat~/.ssh/id_dsa.pub>>~/.ssh/authorized_keys测试ssh配置是否成功:sshlocalhost可以看到配置成功了，连接无需使用密码了；配置ssh无密码访问有很多种方法，以上只是其中一种，以下是另外一种方法：cd~ssh-keygen-trsacd.sshcpid_rsa.pubauthorized_keyssshhostname //测试连接hostname是否成功 3.3配置hadoop环境：我们首先进入到/data/software/had