欢迎来到天天文库
浏览记录
ID:41837932
大小:3.00 MB
页数:41页
时间:2019-09-03
《跨象乘云大数据分析平台使用手册》由会员上传分享,免费在线阅读,更多相关内容在应用文档-天天文库。
1、跨象乘云大数据分析平台使用手册目录集群管理2数据管理10查看文件11上传文件12删除文件13Hive表管理15查看表15创建表16删除表19查询表19HBase表管理21查看表21创建表22删除表23禁用表23添加数据23查询表24NBA投篮分析24集群管理1.登录服务器IP:7180端口,使用账户登录,即可看到如下界面此页面展示了所有已启动的服务以及集群的性能监控信息2.点击顶部“主机”菜单,即可看到集群中所有的主机信息这里,我们可以看到所有的节点信息以及它上面所拥有的角色和它的状态等信息。3.然后,我们点击“Par
2、cel”这里我们可以下载某些包,对我们的环境或某个服务进行升级。1.点击状态下的YARN可以看到yarn是hadoop2.x中引入的,在上面可以运行MR以及其他的服务。1.YARN的webui提供了两个图形界面,首先,我们看下jobHistoryUI,如下:这个就是MR默认的job运行记录2.再来看看resourceManagerUI这个是YARN提供的application运行记录1.在状态下点击HBase可以看到:我们可以在状态摘要看到,hbase安装后拥有的服务。同时,也可以通过此图形化界面进行一些相关的配置。1
3、.接下来我们看看tablestatistic这里展示了hbase中表的统计信息。2.然后,我们看看hbasewebui,地址为服务器IP:60010我们可以看到表的列族等信息。1.在状态下点击HDFS可以看到:我们可以看到hdfs的容量状况,读写的情况1.我们进入主节点NameNode,可以浏览hdfs中的文件信息,地址为服务器IP:500702.在状态下点击Hive可以看到:1.在状态下点击Impala可以看到:impala与hive的区别,一个是在内存中运算,用于实时查询,另一个是启动MR运算,用于离线查询。进入i
4、mpala,可以看到:另外,我们可以点击查询,可以看到我们在impala-shell执行过的所有命令,如下:1.zookeeper,动物管理,起到协调作用。进入后,便可看到:数据管理登录服务器IP:8888端口,使用账户登录登录后如下图所示:查看文件点击左上角的图标,选择Files即可打开大数据平台的文件系统上传文件点击右上角的Upload按钮这里可以选择文件和压缩文件下面我们上次一个本地的文件到大数据平台在弹出的窗口中,点击Selectfiles按钮,选择要上传的文件。如,我选择E盘下一个专利4.pdf的文件。双击即
5、可上传删除文件点击文件前的复选框,然后点击表格上方的Movetotrash按钮,这里有两个删除选项,第一项是删除文件到垃圾箱,然后在垃圾箱中可以恢复文件。第二个是永久删除文件。文件其他操作选中某个文件后,点击表格上方的Action按钮,这里我们可以重命名文件,移动文件,复制文件,下载文件,修改文件权限,文件的概要,设置文件的复制因子等。文件的概要修改文件权限修改文件的复制因子Hive表管理查看表点击左上角的图标,选择Tables点击Tables后即可看到系统中所有的表当前没有创建表,所以是空的。创建表1.点击表列表的右
6、上角的加号或者左侧菜单中的加号我们可以来添加一张表2.在这里我们可以基于个文件来创建表1.选择要创建表的数据文件这里我们以Transactions.csv文件来创建表,注意:该文件在该手册统计目录中,请自行上传2.下面需要制定列的分隔符,该文件中的数据是以;分隔的。请填写;然后下面会显示出该文件中解析出来的数据。然后点击下方的Next按钮。1.下面需要指定表名称,表文件的存储类型,表的列。保持默认即可2.点击Submit按钮提交3.之后会在左侧显示表的名称,右侧显示表的详细信息删除表在表信息的右上角有个删除图标可以删除
7、该表查询表1.点击页面上方的Query按钮,即可打开查询编辑页面1.在此编辑框内,我们可以对左侧显示的数据表进行查询。如我们查询transactions表的前10条数据注意:编辑器右上角的数据库的选择,一定要选择好数据库,否则查询的表会找不到。2.点中要执行的SQL语句,点击左下角的运行图标3.查询完成后,会在下方显示查询出的数据HBase表管理查看表点击左上角的图标,选择HBase即可查询系统中所有的HBase表因为尚未创建表,所以是空的。创建表1.点击右上角的NewTable来创建2.然后填写表名称,列族3.点击S
8、ubmit提交删除表点击表前方的复选框,然后点击上方的Drop按钮即可删除表禁用表点击表前方的复选框,然后点击上方的Disable按钮即可禁用表添加数据1.点击表名称,可以进入表中,点击右下角NewRow可以添加新的数据2.输入行键和列信息即可添加数据查询表点击表名称可以查看该表中所有的数据在上方的输入框可以输入条件查询数据。如只
此文档下载收益归作者所有