资源描述：
《大数据实验报告》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。
1、课程实验报告专业年级14级软件工程课程名称大数据技术原理与应用指导教师李均涛学生姓名吴勇学号20142205042026实验日期2017.05.04实验地点笃行楼B栋301实验成绩教务处制2017年03月09日实验项目名称Liunx基本操作实验目的及要求1.了解Liunx操作系统发展历史。2.学习Liunx操作系统基本概念及操作。3.学习Liunx操作系统用户及文件权限管理。4.Linux目录结构及文件基本操作。实验内容1.实验楼环境介绍，常用Shell命令及快捷键，Linux使用小技巧。2.Li
2、nux中创建、删除用户，及用户组等操作。Linux中的文件权限设置。3.Linux的文件组织目录结构，相对路径和绝对路径，对文件的移动、复制、重命名、编辑等操作。实验步骤1.Liunx输入输出命令。2.使用touch命令创建文件夹，后缀都为txt。3.学会在命令行中获取帮助。1.输出图形字符。2.查看用户。1.创建新用户。2.删除用户。1.查看文件权限。2.用ls–A/Al/dl/AsSh查看文件。1.变更文件所有者。2.修改文件权限。1.目录路径。2.新建空白文件。3.文件的复制、删除、移动、重
3、命名。实验环境Liunx操作系统实验结果与分析通过学习Liunx操作系统的发展历史、基本操作、用户及文件权限管理以及Linux目录结构及文件基本操作。是得我大致了解Liunx操作系统的使用，并且能够完成相应的练习。教师评语注：可根据实际情况加页课程实验报告专业年级14级软件工程课程名称大数据技术原理与应用指导教师李均涛学生姓名吴勇学号20142205042026实验日期2017.05.04实验地点笃行楼B栋301实验成绩教务处制2017年03月09日实验项目名称Hadoop的基本操作实验目的及要求
4、1.Hadoop单机模式安装.2.Hadoop伪分布模式配置部署.3.Hadoop介绍及1.X伪分布式安装.4.adoop2.X64位编译.5.Hadoop2.X64位环境搭建.实验内容1.hadoop三种安装模式介绍,hadoop单机模式安装,测试安装2.hadoop配置文件介绍及修改,hdfs格式化,启动hadoop进程，验证安装.3.Hadoop1.X伪分布安装,Hadoop介绍,Hadoop变量配置.4.Hadoop2.X64位编译,编译Hadoop2.X64位,编译Hadoop.5.搭建
5、环境,部署Hadooop2.X,启动Hadoop.实验步骤1.用户及用户组,添加用户及用户组,添加sudo权限.2.安装及配置依赖的软件包,安装openssh-server、java、rsync等,配置ssh免密码登录.3.下载并安装Hadoop,下载Hadoop2.6.0,解压并安装,配置Hadoop.4.测试验证.5.相关配置文件修改:修改core-site.xml:6.格式化HDFS文件系统.7.Hadoop集群启动.1.测试验证.2.设置Host映射文件.3.下载并解压hadoop安装包4
6、.在Hadoop-1.1.2目录下创建子目录.5.启动hadoop.13.编译Hadoop2.X64位.14.使用yum安装sun.15.部署Hadooop2.X.与Hadoop1.X类似。实验环境hadoopXfce终端实验结果与分析通过本次实验，让我对Hadoop有所了解，但是在实验过程中出现许多问题。例如，不知道该如何下载javajdk，甚至如何创建文件夹目录下的文件，以及Hadoop的环境配置原理以及编译原理和方法。这些都是实验中出现的问题，但是通过自己查询，问同学，部分问题已经得到解决，
7、但是还存在一部分就只能通过课后自学进行解决！！！通过上述的学习，让我对Hadoop的基本操作有了基础的掌握，包括Hadoop介绍及1.X伪分布式安装，adoop2.X64位编译，Hadoop2.X64位环境搭建等。教师评语注：可根据实际情况加页课程实验报告专业年级14级软件工程课程名称大数据技术原理与应用指导教师李均涛学生姓名吴勇学号20142205042026实验日期2017.06.01实验地点笃行楼B栋301实验成绩教务处制2017年03月09日实验项目名称HDFS和MapReduce实验目的
8、及要求1.HDFS原理及操作。2.MapReduce原理及操作。实验内容1.HDFS原理及操作。环境说明，HDFS原理，HDFS架构，HDFS读操作，HDFS写操作，测试例子2．MapReduce原理及操作。环境说明，MapReduce原理，Map过程，Reduce过程，测试例子实验步骤1.HDFS原理及操作。1.1环境说明。虚拟机操作系统：CentOS6.664位，单核，1G内存JDK：1.7.0_5564位Hadoop：1.1.21.2HDFS原理。HDFS（HadoopDis
