电力用电信息采集系统中的mapreduce作业性能优化研究

《电力用电信息采集系统中的mapreduce作业性能优化研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、－ｖ？－？＾，，＇？■＇．ｉ■？■＇ｔ－．．．；ｉ：，卢分类号！ＴＰ３１１单位代码：１０４２２密级：２０；３ｉ３３６３：学号ＳＨＡＮＤＯＮＧＵＮＩＶＥＲＳＩＴＹ硕±学位论文ＴｈｅｓｉｓｆｏｒＭａｓｔｅｒＤｅｇｒｅｅ（专业学位）ＭａＲｅｄｕｃｅ论文题目：电为用电信息采集系统中钓ｐ作姐性能优化热究；ｅＪＰｅｒｆｏｎｒｔｉｍｉｚａｔｉｏｎＲｅｓｅａｒｃｈＯｎＭａｐｄｕｃｅｏｂ，ｉ？ｎｃｅＯｐ‘扣Ｅｌｔｃ化ｋＰｏｗｅｒＣｆｖＷｃｃｔｉｏｎＳｙｓｔｃｍ作者姓名矜开会

2、培养单位软件学院，专业名称热件工租指导教师史玉巧副教授合作导师：一＇．ｆ．．．．２Ｃ１６年４月２０日分类号！１０４２２：ＴＰ３１１单位代码密级：２０１３１３３６３：学号ＳＨＡＮＤＯＮＧＵＮＩＶＥＲＳＩＴＹ硕±学位论文ＴｈｅｓｉｓｆｏｒＭａｓｔｅｒＤｅｒｅｅｇ（专业学位）论文题目：电力用电信息采集系统中的ＭａｐＲｅｄｕｃｅ作业性能优化研究ＲｅｓｅａｒｃｈＯｎＭａｒｅｄｕｃｅＪｏｂＰｅｒ化ｒｍａｎｃｅＯｐｔｉｍｉｚａｔｉｏｎｐＩｎＥｌｅｃｔｒｉｃＰｏｗｅｒＣｏ

3、ｌｌｅｃｔｉｏｎＳｓ化ｍｙ作者姓名张开会培养单位软件学院专业名称软件工程指导教师史玉良副教授合作导师２０１６年４月２０日原创性声巧本人郑重声明：所呈交的学位论文，是本人在导师的指导下，独立进行研巧所取得的成果。除文中已经注明引用的内容外，本论文不包含任何其他个人或集体己经发表或撰写过的科研成果。对本文的研ｉ究作出重要贡献的个人和集体？明确方式标明。本声明，均已在文中ｉ＾的法律责任由本人承担。论文作者签名－３－２０：日期：２０１６关于学位论文使用授权的声明本人同意学校保留或向国家有关部口或机构送交

4、论文的印刷件和电子版，允许论文被查阅和借阅；本人授权山东大学可将本学位论文的全部或部分内容编入有关数据库进行检索，可｛＾采用影印、缩巧或其他复制手段保存论文和汇编本学位论文。（保密论文在解密后应遵守此规定）良史论文作者签名－３－２０：导师篇名：日期：２０１６山东大学硕±学位论文目泉翁要１ＡＢＳＴＲＡＣＴｆｌ第１章绪论１１．１研究背景１１．２相关研究２１．２．１短作业３１．２．２落后任务４１．２．３具有时间约束的作业调度５１．３本文的主要工作５１．４本文的组织结

5、构６第２章ＭａｐＲｅｄｕｃｅ框架与任务性能模型７２．１３情７２．２负载感知的ＭａｐＲｅｄｕｃｅ框架８２．３任务性能模型１１２．４节点性能评估１２２．５实验１３２．５１４．１实验环境２．５．２任务性能模型的准确性１４２．５．３资源利用率１５２．６本章小结１７巧３巧基于资源的短作业优化巧３．１引言１８３．２Ｈａｄｏｏｐ任务运行过程１９３．３资源重用的短作业计算框架２０３．３．１短作业计算框架２１山东大学硕：ｔ：学位论文３．３．２短作业的任务执行过程２１３

6、２２．４资源重用的短作业优化实现３．４．１任务进程端也跳消息＂２２３二级．４．２任务调度器２３３．５实验与分析２６３．５．１作业完成时间２６３．５．２资源的利用率２９３２９．６本章小结巧４章基于推測的巧后任务优化３０４．１引言３０４３１．２落后任务识别４．２．１任务进度评估３１４３２．２．２落后任务识别模型４．３推测执行策略３３４３３．３．１落后任务处理策略４．３．２副本任务的调度％４．４实验３８４３．４．１落后任务识别模型的准确性８４．４．２作业运行时间

7、３９４．５本章小结４０第５章基于分治巧巧的时间约束作业调度４２５．１引胃４２５４３．２分治策略５．３任务调度计划４３５４４．３．１任务划分５．３．２任务矩阵４５５．４时间约束的作业调度算法４５５．４．１资源的公平性４５山东大学硕±学位论文５．４．２抢占策略４６５．４．３时间约束作业调度算法４８５．５实验４９５．５．１作业完成数５０５．５．２抢占次数５０５．６本章小结５１第６章总结与展望坑６．１总结５２６．２展望５２