大数据考点总结范文.doc

《大数据考点总结范文.doc》由会员上传分享，免费在线阅读，更多相关内容在应用文档-天天文库。

1、大数据考点总结范文　　名词解释1.Hadoop是一个开源分布式计算平台，为用户提供了系统底层细节透明的分布式基础架构。　　基于Java语言开发的，具有很好的跨平台特性，并且可以部署在廉价的计算机集群中。　　核心是分布式文件系统HDFS（HadoopDistributedFileSystem）和MapReduce。　　是一个开源分布式计算平台，为用户提供了系统底层细节透明的分布式基础架构。　　基于Java语言开发的，具有很好的跨平台特性，并且可以部署在廉价的计算机集群中。　　核心是分布式文件系统HDFS（Ha

2、doopDistributedFileSystem）和MapReduce。　　2.HDFS是Hadoop的一个分布式文件系统，它的主要设计理念为存储超大文件，最高效的访问模式是一次写入、多次读取，运行在普通廉价的服务器上。　　是Hadoop的一个分布式文件系统，它的主要设计理念为存储超大文件，最高效的访问模式是一次写入、多次读取，运行在普通廉价的服务器上。　　3.Hbase是一个高可靠、高性能、面向列、可伸缩的分布式数据库，主要用来存储非结构化和半结构化的松散数据。　　是一个高可靠、高性能、面向列、可伸缩的

3、分布式数据库，主要用来存储非结构化和半结构化的松散数据。　　$hbaseshell4.SparkAMP实验室于xx年开发，基于内存计算的大数据并行计算框架，可用于构建大型的、低延迟的数据分析应用程序年开发，基于内存计算的大数据并行计算框架，可用于构建大型的、低延迟的数据分析应用程序5.推荐系统:是自动联系用户和物品的一种工具，通过研究用户的兴趣偏好，进行个性化计算，帮助用户从海量信息中去发掘自己潜在的需求6.网络爬虫:又称为网络蜘蛛，是一种按照一定的规则，自动的抓取万维网信息的程序或者脚本。　　7.大数据一

4、种规模大到在获取、存储、管理、分析方面大大超出了传统数据库能力范围的数据集合（1.数据量大2.数据类型多3.处理速度快4价值密度低即Volume、Variety、Value、Velocity））8.物联网物物相连的互联网，是互联网的延伸，它利用局部网络或互联网等通信技术把传感器、控制器、机器、人员和物等通过新的方式联在一起，形成人与物、物与物相联，实现信息化和远程管理控制物物相连的互联网，是互联网的延伸，它利用局部网络或互联网等通信技术把传感器、控制器、机器、人员和物等通过新的方式联在一起，形成人与物、物与

5、物相联，实现信息化和远程管理控制9.云计算通过整合和管理分布在网络各处的计算资源，提供可伸缩的、廉价的分布式计算能力，通过互联网以统一界面，向大量的用户提供服务的一种模式通过整合和管理分布在网络各处的计算资源，提供可伸缩的、廉价的分布式计算能力，通过互联网以统一界面，向大量的用户提供服务的一种模式10数据可视化将大型集中的数据以图形图像形式表示，并利用数据分析和开发工具发现其中信息的处理过程将大型集中的数据以图形图像形式表示，并利用数据分析和开发工具发现其中信息的处理过程简答1.ha2.M3.Hb4.Hb5

6、.数答题adoop有哪答主要组MapreMapReduce答从分布中间结果分分布式文件对，并交由base的主要答　　（1）（）　　（2）base与传统答　　（1）数　　（2）数据　　（3）存储　　（4）数据　　（5）数据　　（6）可伸数据可视化思答数据大量哪些组件以及组件有分布式duce为用户的运行过程布式文件系统分区排序件系统。　　（执由归约函数处要功能组件库函数链）一个Mast统的数据库数据类型关据操作关系询储模式关系据索引关系访据维护在关旧并伸缩性关系数正好思想及其作据可视化技术量的数据集构及功能？式

7、统文件系统H提供强大的程是什么样统读入数据、理后发送给R执行行map函数处理）件有哪些？链接到每个客er主服务器库有什么区别系数据库采用系数据库中包询、删除、清系数据库是基系数据库通常访问性能。　　HB关系数据库中值，旧值被覆并不会删除数数据库很难实好相反。　　作用？术的基本思想构成数据图像HDFS，为海量计算能力。　　的？执行Map任Reduce任务数把一组键值客户端　　（3）许多个别？用关系模型，包含了丰富的空等基于行模式存常可以针对不Base只有一个中，更新操作覆盖后就不会数据旧的版本实现横向扩展想是

8、将数据库像，同时将数据量数据提供存任务输出中间务、执行Redu值对按照相关个个Region服，HBase则采的操作，HBa存储的，HBa不同列构建复个索引——行作会用最新的会存在。　　而在展，纵向扩展库中每一个数据的各个属性存储；分布间结果、通过ce任务得到关的规则映射服务器采用了更加简se操作只有se是基于列复杂的多个索行键的当前值去替在在HBase中执的空间也比较数据项作为单性值以多维数布式并行编程过Shuf