基于强化学习的mto企业订单接受决策模型研究

《基于强化学习的mto企业订单接受决策模型研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、万方数据分类号UDC密级学位论文基于强化学习的MTO企业订单接受决策模型研究作者姓名：指导教师：申请学位级别：学科专业名称：论文提交日期：学位授予日期：评阅人：王宁宁樊治平教授王晓欢博士东北大学工商管理学院硕士学科类别：管理学管理科学与工程2014年6月6日论文答辩日期：2014年6月17日2014年7月答辩委员会主席：姜艳萍教授孙新波教授张青山教授东北大学2014年6月万方数据AThesisinManagementScienceandEngineeringResearchonReinforcementLearningbasedOrderAcceptanceModel

2、inMake--to--OrderEnterprisesByWangNingningSupervisor：ProfessorFanZhipingDoctorWangXiaohuanNortheasternUniversityJune2014万方数据独创性声明本人声明，所呈交的学位论文是在导师的指导下完成的。论文中取得的研究成果除加以标注和致谢的地方外，不包含其他人己经发表或撰写过的研究成果，也不包括本人为获得其他学位而使用过的材料。与我一同工作的同志对本研究所做的任何贡献均己在论文中作了明确的说明并表示谢意。学位论文作者签名：≥宁彳日期：川．么歹7学位论文版权使用授权

3、书本学位论文作者和指导教师完全了解东北大学有关保留、使用学位论文的规定：即学校有权保留并向国家有关部门或机构送交论文的复印件和磁盘，允许论文被查阅和借阅。本人同意东北大学可以将学位论文的全部或部分内容编入有关数据库进行检索、交流。作者和导师同意网上交流的时间为作者获得学位后：半年口一年口一年半口学位论文作者签名：j宁宇签字日期：碱6t77I两年陟／导师签名：发，钐歹媒懈少。6’7、万方数据东北大学硕士学位论文摘要基于强化学习的MTO企业订单接受决策模型研究摘要在竞争日益激烈的制造业环境下，为了快速地响应顾客的个性化需求，从而获得利润和取得市场竞争优势，越来越多的制造型

4、企业将面向订单生产(Make．to．Order,MTO)的生产模式应用到了现代化生产中。针对MTO企业订单接受决策过程中的不确定性，研究如何对订单的收益和其带来的一系列成本进行权衡，从而选择性的接受订单，以最大化MTO企业的长期利润这一问题具有很好的理论价值和实际应用价值，已经引起了企业界和学术界的广泛关注。从现有情况来看，针对不同订单及MTO企业的特征，许多学者提出了解决订单接受决策问题的模型和方法，可以给出较好的订单处理策略，但是已有研究大多假定市场需求是静态确定的，较少研究随机动态环境下的订单接受问题，并且较少将顾客等级、延期惩罚成本以及MTO企业生产能力限制等

5、因素进行综合考虑。此外，已有模型和方法难以针对复杂不确定的现实环境给予准确建模，且模型求解是NP．hard的，也较少针对MTO企业订单接受决策支持系统进行研究。可见，对于MTO企业订单接受决策问题仍需要做进一步深入的研究。已有研究成果表明，强化学习不需要对环境进行显示的建模，适合于解决随机动态环境下的复杂序贯决策问题；而多Agent技术与Web服务技术的结合，可以为订单接受决策支持系统的实现提供有效的机制和理想的解决方案。因此，基于强化学习的MTO企业订单接受决策及订单接受决策支持系统的设计与开发问题，是一个值得关注的、具有现实意义的研究课题。鉴于此，本文开展了相关研

6、究，主要完成的工作包括以下四个方面：(1)提炼了随机动态环境下，综合考虑有限订单特征及MTO企业生产能力限制等因素的订单接受问题。针对已有研究的不足，本文在综合考虑生产成本、延期惩罚成本以及拒绝成本等前提下，引入顾客等级这一要素，提炼出了更加符合现实需要的随机动态环境下的MTO企业订单接受问题。(2)给出了基于强化学习的MTO企业订单接受决策模型及求解方法。针对本文研究问题，结合强化学习的思想，构建了基于半马尔科夫决策过程的订单接受决策模型，并提出了基于SMART算法的订单接受决策模型求解方法。(3)通过仿真验证了基于强化学习的MTO企业订单接受模型及求解方法的可万方

7、数据东北大学硕士学位论文摘要靠性和有效性。首先，在三种不同情境下，验证了基于强化学习的订单接受策略表现均优于基于先来先服务(FCFS)的订单接受策略；其次，通过对是否考虑顾客等级的两种情境进行对比，验证了引入顾客等级这一要素的必要性和重要性。(4)通过将基于强化学习的MTO企业订单接受决策方法嵌入到多Agent系统中，设计和开发了MTO企业订单接受决策支持系统(OrderAcceptanceSupportDecisionSystem，OA_DSS)。本文基于多Agent技术与W．eb服务技术，在给出订单接受决策支持系统的详细设计及实现的关键技术的基础