个人学习搭建Zookeeper_Hadoop_HBase集群文档.doc

《个人学习搭建Zookeeper_Hadoop_HBase集群文档.doc》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、E3BASE大数据基础平台维护手册个人学习搭建Zookeeper集群Hadoop集群HBase集群文档0.1第59页共59页E3BASE大数据基础平台维护手册变更记录变更序号变更原因变更页码变更前版本号变更后版本号更改人批准人生效日期备注1文档建立、起草0.1张金刚第59页共59页E3BASE大数据基础平台维护手册目录1.引言61.1.编写目的62.系统介绍72.1.总体说明72.2.软件版本72.3.网络与部署结构72.4.虚拟机信息82.5.软件安装目录103.系统安装部署113.1.系统配置113.1.1.添加主机名113.1.2.防

2、火墙设置123.1.3.selinux设置123.1.4.时区133.1.5.保证部署的各集群所使用的用户及组是同一个133.1.6.更改系统资源配置143.1.7.SSH无密码访问配置153.1.8.JAVA安装163.1.9.添加环境变量173.1.10.其他的系统环境注意事项（不完整，仅有基本参数说明，日后需要补充）183.2.Zookeeper193.2.1.Zookeeper安装193.2.2.Zookeeper配置（不完整，仅有基本参数说明，日后需要补充）203.2.3.复制zk到其他主机上213.2.4.设置myid223.3.H

3、adoop233.3.1.Hadoop安装24第59页共59页E3BASE大数据基础平台维护手册3.3.2.Hadoop配置（不完整，仅有基本参数说明，日后需要补充）243.4.Hbase323.4.1.Hbase安装323.4.2.Hbase配置（不完整，仅有基本参数说明，日后需要补充）334.服务启停384.1.Zookeeper384.1.1.Zookeeper启动384.1.2.Zookeeper停止384.2.Hadoop384.2.1.前提条件384.2.2.初始化394.2.3.hadoop启动394.2.4.hadoop停止40

4、4.3.Hbase414.3.1.前提条件414.3.2.Hbase启动414.3.3.Hbase停止425.使用435.1.Hadoop操作命令使用435.1.1.显示文件列表435.1.2.增加文件目录435.1.3.查看所有目录435.1.4.用put将文件从本地文件复制到HDFS中去435.1.5.从HDFS中取回文件435.1.6.删除文件435.1.7.杀掉任务445.1.8.查看任务445.2.Hadoop监控页面使用445.2.1.查看namenode44第59页共59页E3BASE大数据基础平台维护手册5.2.2.查看data

5、node（未做过，日后需验证并修改）445.3.HbaseShell使用445.3.1.创建表445.3.2.显示所有表455.3.3.关闭shell455.3.4.查看表结构455.3.5.修改表结构455.3.6.删除一个列簇465.3.7.增加一个列簇465.3.8.删除表，先disable再进行删除465.3.9.查询表是否存在465.3.10.判断表是否enable465.3.11.判断表是否disable465.3.12.表中插入数据465.3.13.全表扫描475.3.14.rowkey范围查找475.3.15.删除一行数据475

6、.3.16.获取表一个id的数据475.3.17.更新一条记录475.3.18.通过timestamp来获取一个版本的数据475.3.19.通过VERSIONS来获取多个版本的数据485.3.20.删除表某一id一个版本的一个字段485.3.21.删除表某一id所有版本的一个字段485.3.22.删除整行数据485.3.23.查询表中有多少行485.3.24.给表某一id增加一个字段并使用counter实现递增485.3.25.清空表485.3.26.查询服务器状态495.3.27.执行脚本文件49第59页共59页E3BASE大数据基础平台维护

7、手册5.4.Hbase监控页面使用495.4.1.查看MasterServer495.4.2.查看RegionServer496.运行状态检测及维护506.1.Zookeeper506.1.1.进程查看506.1.2.进程异常维护506.1.3.进程状态查看506.2.Hadoop506.2.1.进程查看506.2.2.Namenode状态516.3.Hbase516.3.1.进程查看516.3.2.进程异常维护527.动态扩展节点(暂未做过，需要核实并修改)537.1.动态扩展datanode537.1.1.增加节点537.1.2.删除节点5

8、57.2.HBASE动态扩展regionserver567.2.1.增加节点567.2.2.删除节点58第59页共59页E3BASE大数据基础平台维护