智能科学与技术学报 ›› 2020, Vol. 2 ›› Issue (4): 348-353.doi: 10.11959/j.issn.2096-6652.202037

• 专刊:深度强化学习 • 上一篇    下一篇

基于深度强化学习的智能暖气温度控制系统

李涛1,2, 魏庆来1,2   

  1. 1 中国科学院自动化研究所复杂系统管理与控制国家重点实验室,北京 100190
    2 中国科学院大学,北京 100049
  • 修回日期:2020-11-30 出版日期:2020-12-15 发布日期:2020-12-01
  • 作者简介:李涛(1996- ),男,中国科学院自动化研究所复杂系统管理与控制国家重点实验室博士生,主要研究方向为深度强化学习、自适应动态规划、最优控制。
    魏庆来(1979-),男,博士,中国科学院自动化研究所研究员,复杂系统管理与控制国家重点实验室副主任,中国科学院大学岗位教授,青岛智能产业技术研究院智能技术创新中心主任,主要研究方向为自学习控制、平行控制、自适应动态规划、智能控制、最优控制及其工业应用。
  • 基金资助:
    国家自然科学基金资助项目(61722312);国家自然科学基金资助项目(62073321)

Intelligent heating temperature control system based on deep reinforcement learning

Tao LI1,2, Qinglai WEI1,2   

  1. 1 The State Key Laboratory for Management and Control of Complex Systems, Institute of Automation, Chinese Academy of Science, Beijing 100190, China
    2 University of Chinese Academy of Sciences, Beijing 100049, China
  • Revised:2020-11-30 Online:2020-12-15 Published:2020-12-01
  • Supported by:
    The National Natural Science Foundation of China(61722312);The National Natural Science Foundation of China(62073321)

摘要:

研究如何通过暖气设备自适应地调节室温,提升室内环境的舒适度,具有非常重要的意义。因此,提出了基于双深度Q网络方法的智能暖气温度控制系统,根据人的表情信息控制暖气设备的阀门开度,实时调整室温。首先,介绍针对原始输入状态的预处理算法。然后,设计通过双深度Q网络方法学习控制暖气设备阀门开度的最佳策略。最后,通过仿真结果验证提出的方法的有效性。

关键词: 深度强化学习, 暖气设备, 温度控制, 疲劳检测, 图像处理

Abstract:

It is of great significance to study how to adjust the room temperature adaptively through heating equipment to improve the comfort of the indoor environment.Therefore, a double deep Q network method was developed to control the valve opening of heating equipment to adjust the indoor temperature in real time via human expressions.Firstly, the preprocessing algorithm for the original input state was introduced.Secondly, a double deep Q network method was designed to learn the optimal control policy of the valve opening of heating equipment.Finally, simulation results were given to illustrate the effectiveness of the method proposed.

Key words: deep reinforcement learning, heating equipment, temperature control, fatigue detection, image processing

中图分类号: 

No Suggested Reading articles found!