基于hadoop平台的作业调度算法优化研究

《基于hadoop平台的作业调度算法优化研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、■Ｉ．ｔ．＾Ｉ．：．心．．．广’’ＶＶ．．‘；＇’－■－＾；／．：＇Ｉ■。＊＇－＂■？■■：：：：ＶＶ：；，＇一＇＇．＇＇韦＇．ｙ＾■！，；，＇Ｃ古：／．’■―■＞＇Ｖ．．Ｊ：６单．．‘■？＾．＇，Ｖ，专业顽壬樂位论支辑筵碁去恥ｄｏｏｐ平台的作业调度算法优化研究．贊：．＇．．＇．＇Ｊｂｂ紙ｈｅｄｉｌｉｉｎ香ｌｏｒｉｔｈｍｂａｓｅｄ０扣丹ａｄｏｏｌａｔｆｏｒｍＡｇｐＰＯｔｉｍｉｚａｔｉｏＲｅｓｅ

2、ａｒｃｈｐ口‘？‘ｒ？－．：知－．，‘〇＇＇■．．打ＶＳ－：＇．＾．．＇八节．；，ｖ＇■＾＂．：；．ｒ■一、■■■■＇ｉｉ－；’、、；’一、１，Ｖ！ｉｊｕ＇Ｉ；／＇＇拼＇知人‘：护＇＇＾－？■■．，．ｖＵｖＨ：Ａ－．＇ＩＶ－，．、Ｖｒ＇．’、－■‘，一－．＂＇．■？许Ｖ‘、■：－一ｖ…＞＾ｆｖ曜緋ｌｉｂｒＨ华北电力大学硕±学位论文原创性声明？－－本人郑重卢明：此处所提交的硕＞：学位论文《基于Ｈａ

3、ｄｏｏｐｆ台的作业调—指导下，在华北电力大学攻读硕全学位期闽度算法优化研究》，是木人在导师独立进巧研究：Ｋ作所取得的成果。掘本人所知’论文中除己化明部分外不包含。对本文的硏究工作做出显要贡献的个人和集他人己发衷或撰写过的研究成果１＾明确方式注明。本产明的法伴结巧将完全由本人承扭。体，均己在文中曰期：年３片巧Ｈ作者签名：７川华北支满电力大学硕±学位论研文使用授权书《基于Ｈａｄｏｏｐ平台的作业调度算法优化巧》系本人在华北化力大学巧－读硕＋学位期间在导师指导下完成的硕丄学位论义。本论文的研巧成巧归华北它单位的名义发表。本人亢全了巧牛电力大

4、学所有，本论义的硏究内容不得其，同意学校保凿并向幽家巧关部华北化力大学关甲保巧、使用学位论文的规定论文的全部或部分内口或机构送交论义的起印件和电许子论版本，巧蔥学校将学位巧编入巧关数据库进巧检索，允文被當阅和借阅。本人授权华北化力大学，可Ｌ义采Ｈ］影印、缩印或扫搁等赁丄制袖予段保存、可Ｌ处公布论文的全部或部分内容。本学位论义Ｍ于（请化应方框内Ｗ：马保密□，在年解密后适Ｗ本按权Ｉ不保密＾贫Ｈ期：１１年３月＾円作者签名：Ｘ之〇ｋ导师蘇日期：灿年勺月Ｉ川泉与国内图书分类号：TP399学校代码：10079国际图书分类号：004.9密级：公开

5、专业硕士学位论文基于Hadoop平台的作业调度算法优化研究硕士研究生：吴涛导师：孟建良教授申请学位：工程硕士专业领域：计算机技术培养方式：全日制所在学院：控制与计算机工程学院答辩日期：2016年3月授予学位单位：华北电力大学ClassifiedIndex:TP399U.D.C:004.9ThesisfortheMasterDegreeJobSchedulingAlgorithmbasedonHadoopPlatformOptimizationResearchCandidate：TaoWuSupervisor：Prof.JianLiangMengSchool：SchoolofCo

6、ntrolandComputerEngineeringDateofDefence：March,2016Degree-Conferring-Institution：NorthChinaElectricPowerUniversity摘要近年来，云计算技术随着计算机的高速发展，在学术上的研究及在工业上的应用发展也越来越多，由此，大量的云计算系统被投入到实际应用中。在云计算系统中，普遍是基于Hadoop平台来开发和调试程序。Hadoop是开放式的源代码框架，这个框架是一个在集群上运行大型数据库处理应用程序。并行处理是Hadoop表现最为突出的技术，对于开发者来说这些处理是相对透明的，开

7、发者可以直接进行开发程序，而不需要考虑并行计算的问题，平台会自动进行并行化处理。但是，Hadoop平台出现的时间比较晚，它还是一个相对较新的平台框架，需要进一步研究。本论文研究的重点是作业调度技术，这项技术是Hadoop平台的核心技术之一。作业调度技术的研究对象主要包括两个方面：一是作业如何按照正确顺序执行；二是资源怎样合理分配和有效控制。这两个方面的好坏直接影响平台的整体性能和资源的利用率。本文通过阅读大量相关文献资料并分析现有算法，发现均存在着一些不足之处。所以，提高Hadoop平台的性