欢迎来到天天文库
浏览记录
ID:37511709
大小:364.00 KB
页数:8页
时间:2019-05-24
《Hadoop+HBase+Zookeeper集群的配置》由会员上传分享,免费在线阅读,更多相关内容在行业资料-天天文库。
1、Hadoop+HBase+Zookeeper集群的配置文档环境lOS:ubuntu-10.04.2-desktoplHadoop:Hadoop-0.20.2lHBase:HBase-0.20.6lZookeeper:Zookeeper-3.3.3lJDK:JDK-1.6.0.24本集群有三台机器IP对应分别如下:192.168.9.128:ubuntu(namenode,SecondarNameNode,HMaster,HQuorumPeer,HRegionServer,DateNode)192.168.9.131:test1(DataNode
2、,HRegionServer,HquorumPeer)192.168.9.132:test2(DataNode,HRegionServer,HquorumPeer)由于机器所限,为了模拟更多的节点,在Namenod节点上同时部署了DataNode,HRegionServer,SecondarNameNode,同时又作为HBase的主节点。Hadoop集群的部署详见Hadoop集群部署手册安装和部署HBase修改机器的hosts文件修改所有机器的/etc/hosts文件将下面的内容添加进去:192.168.9.128ubuntu192.168.9
3、.131test1192.168.9.132test2安装通过命令tarzxvfhbase-0.20.6.tar.gz加压到当前文件夹修改HBase的配置文件编辑所有机器上的hbase安装目录conf目录下的hbase-site.xml、hbase-default.xml、hbase-env.sh几个文件Hbase-site.xml编辑这个文件要注意hbase.rootdir参数,这个参数必须与你的hadoop集群里的core-site.xml文件里fs.default.name保持一致才可以。在就是hbase该项不识别机器的IP,只能使用机器
4、的hostname才可以。Hbase.zookeeper.quorum个数必须为奇数。hbase.rootdirhdfs://ubuntu:54310/hbasehbase.cluster.distributedtruehbase.masterubuntu5、lue>hbase.zookeeper.quorumubuntu,test1,test2zookeeper.session.timeout60000hbase.zookeeper.property.clientPort22226、nfiguration>Hbase-default.xml这个配置文件只需修改前面的hbase.rootdir和hbase.cluster.distributed这两项hbase.rootdirhdfs://ubuntu:54310/hbasehbase.master.port60000hbase.cluster.dis7、tributedfalseHbase-env.sh修改代码如下exportJAVA_HOME=/usr/lib/jvm/java-6-sun-1.6.0.24exportHBASE_HOME=/home/zhangfeng/hbase-0.20.6exportPATH=$PATH:/home/zhangfeng/hbase-0.20.6/binexportHBASE_OPTS="$HBASE_OPTS-XX:+HeapDumpOnOutOfMemoryError-XX:+UseC8、oncMarkSweepGC-XX:+CMSIncrementalMode"exportHBASE_MANAGES_ZK=trueexportHADO
5、lue>
6、nfiguration>Hbase-default.xml这个配置文件只需修改前面的hbase.rootdir和hbase.cluster.distributed这两项hbase.rootdirhdfs://ubuntu:54310/hbasehbase.master.port60000hbase.cluster.dis
7、tributedfalseHbase-env.sh修改代码如下exportJAVA_HOME=/usr/lib/jvm/java-6-sun-1.6.0.24exportHBASE_HOME=/home/zhangfeng/hbase-0.20.6exportPATH=$PATH:/home/zhangfeng/hbase-0.20.6/binexportHBASE_OPTS="$HBASE_OPTS-XX:+HeapDumpOnOutOfMemoryError-XX:+UseC
8、oncMarkSweepGC-XX:+CMSIncrementalMode"exportHBASE_MANAGES_ZK=trueexportHADO
此文档下载收益归作者所有