基于多线程并行强化学习的建筑节能方法

来源：计算机工程与应用杂志2019年第15期北京时间：

作者：陈建平，康怡怡，胡龄爻，陆悠，吴宏杰，傅启明

单位：1.苏州科技大学 电子与信息工程学院，江苏 苏州 215009；2.苏州科技大学 江苏省建筑智慧节能重点实验室，江苏 苏州 215009；3.苏州科技大学 苏州市移动网络技术与应用重点实验室，江苏 苏州 215009

摘要：提出一种基于并行强化学习的建筑节能方法，该方法结合多线程技术和经验回放方法提出一个多线程并行强化学习算法框架，其新颖点在于：在经验回放过程中引入自模拟度量方法，通过计算样本之间的距离，选取低相似度的样本构造多样样本池，Agent的学习过程从多样样本池中选取样本学习，可有效避免浪费学习资源。实验包括在仿真房间模型上与Q-Learning算法的对比实验和与经典PID控制方法的对比实验。实验结果表明，所提出的并行算法有更快的学习速率和收敛速度，能更快地求解出最优策略，并拥有更高的运行效率。

关键词：强化学习,并行强化学习,经验回放,多线程技术,建筑节能