知识化制造环境中基于双层Q学习的航空发动机自适应装配调度
来源:计算机集成制造系统杂志2014年第12期北京时间:
作者:汪浩祥,严洪森,汪峥
单位:1.东南大学自动化学院2.南京农业大学工学院3.东南大学复杂工程系统测量与控制教育部重点实验室
摘要:针对不确定生产环境下航空发动机装配的自适应调度问题,结合强化学习的实时性特点和知识化制造系统的自适应特征,提出用于解决航空发动机装配问题的双层Q学习方法。上层Q学习着眼于局部,学习合适的分派规则并将作业分配到并行机器,从而最小化设备空闲和平衡机器负荷;下层Q学习着眼于全局,学习最优的调度策略用来对分配到机器的工序进行调度,以最小化作业整体提前期。采用基于函数逼近的Q(λ)学习方法对值函数进行更新,通过合理地定义强化学习问题三大要素:动作、状态和回报函数,将航空发动机自适应装配调度问题转化为强化学习问题。仿真实验结果表明,通过在上下两层适时选取调度规则,采用双层Q学习方法比单层Q学习在总体上具有更好的优势,调度结果远优于单个规则,显示出了良好的自适应性能。
关键词:知识化制造,航空发动机,装配,自适应调度,Q学习
基金资助:国家自然科学基金重点资助项目(60934008);国家自然科学基金资助项目(71401076,71101072);东南大学优秀博士论文基金资助项目(YBJJ1215)。
2014年12期其他文献查阅:
基于矩阵的多功能产品概念方案求解方法
客户协同产品创新系统鲁棒性分析与优化
基于运动学与有向尺寸路径的工件定位误差自动分析算法
面向智能卫星的组件式任务规划建模与求解
基于改进随机路径图的分支线缆自动布局技术
基于最短路径快速算法的船舶管路自动敷设方法
考虑人因的单元设施布局优化设计方法
基于图论的装配尺寸链自动生成技术
基于混合蛙跳算法的复杂产品装配序列规划
知识化制造环境中基于双层Q学习的航空发动机自适应装配调度
单机多车情形生产与配送协同调度算法
不确定环境下混流装配线动态准时制物料配送系统
基于聚类分析的白车身零件工艺模板提取
以提高生产率的流水线转单元的变邻域搜索
基于B样条曲线建模预测复杂型面动态车削力
基于五轴运动优化的数控成形磨齿精密齿向修形
基于中轴变换的槽腔特征相似性评价方法
基于贝叶斯网络的切削加工表面粗糙度在线监测方法
基于动态知识网的制造系统自适应组织方法
化工系统海量数据的扩散映射和异常辨识
基于模糊贴近度的产业集群生命周期判定方法
集群企业本地网络对知识获取绩效的影响机理
基于增广拉格朗日协调的集群式供应链动态优化配置方法
考虑努力水平影响的服务供应链协调
基于BASS扩散需求的按订单组装模式生产库存模型
B2C模式下配送中心与末端节点的两阶段布局优化模型
基于粗糙小波神经网络的客户协同供应商选择过程研究
考虑外集卡的混堆集装箱码头多场桥调度
基于服务信誉评价的偏好分析与推荐模型
基于Multi-Agent的制造资源云服务化封装方法及适配器研究
基于模糊粗糙集的二维延伸性汽车产品保证成本数据挖掘