mapreduce测试题备课讲稿.docx

《mapreduce测试题备课讲稿.docx》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、…………………………………………………………最新精品资料推荐……………………………………………………Mapreduce测试题1、描述下hdfs数据读写的流程。（10）2、描述下wordcount程序中k-v的转换过程，并标出所属阶段数据输入：hadoopwelcomejavawelcome（10）3、combine出现在哪个过程，举例说明什么情况下可以使用combiner，什么情况下不可以。（10）4、mapreduce的输出文件个数由什么决定。（10）5、哪个程序负责HDFS数据存储，默认情况下数

2、据有几个备份。（10）6、通常集群的最主要瓶颈（程序优化的主要瓶颈），给出mapreduce优化的方法至少两种。（10）7、hadoop配置机架感知的下面哪项正确（10）a)如果一个机架出问题，不会影响数据读写b)写入数据的时候会写到不同机架的DataNode中c)MapReduce会根据机架获取离自己比较近的网络数据…………………………………………………………最新精品资料推荐……………………………………………………3…………………………………………………………最新精品资料推荐……………………………

3、………………………8、上千万或上亿数据（有重复），找出其中最大的前N个数据。(N<1000,内存放的下)写出设计思路。（15）9、给定a、b两个文件，各存放50亿个url，每个url各占64字节，内存限制是4G，让你找出a、b文件共同的url？（15）写出设计思路。动词不定式选择题练习(一)1.Heseems___theoldlady.A.knowingB.tobeknowingC.toknowD.tobeknown2.Tom___whentheyspokeillofhim.A.happenedto

4、bepassedB.happenedtobepassingbyC.happenedpassingbyD.happenedtopassed3.Weallhope____scientists.A.becomeB.tobecomeC.becomingD.became4.Theboyrefused____forclimbingthetalltree.A.topayB.tobepaidC.beingpaidD.paying5.Ihappened____thearticlewhenheaskedmeabouti

5、t.A.havingreadB.tohavereadC.tobereadD.reading6.______withhimisagreatpleasure.A.TotalkB.TalkC.TalkedD.Totalking7.Itisnice_____yourvoice.A.tohearB.hearC.heardD.tobehearing8._____istostruggle.A.LivingB.LiveC.ToliveD.Tobelived9.Herwishis____adoctor.A.becom

6、ingB.becomeC.tobecomeD.beingcome10.Iwasjustabout____theofficewhenthephonerang.A.leavingB.leaveC.toleaveD.toleaving11.Ididn’t____ituntilyouhadexplainedhow.A.managetodoB.managedtodoC.managetohavedoneD.managedoing12.Hefounditimportant___thesituationallove

7、rtheworld.A.studyB.tostudyC.studiesD.tobestudied13.Atlasttheenemysoldiershadnochoicebut___theirguns.A.tolaydownB.liedownC.layingdownD.laydown14.YesterdayIdidnothingbut___TV.A.watchB.watchedC.towatchD.watching15.Ithadnoeffectexcept___himangry.A.makeB.ma

8、kingC.tomakeD.made16.Bobdidnothingexcept____tennis.A.playB.toplayC.playingD.played17.I’mconsidering___hisletter.A.toanswerB.howansweringC.tobeansweringD.howtoanswer…………………………………………………………最新精品资料推荐……………………………………………………3………………………………………………………