基于深度强化学习的泛在电力物联网综合能源系统的自动发电控制

被引:19
|
作者
席磊 [1 ]
余璐 [1 ]
张弦 [2 ]
胡伟 [3 ]
机构
[1] 三峡大学电气与新能源学院
[2] 桂林电子科技大学电子工程与自动化学院
[3] 清华大学电机工程与应用电子技术系
关键词
泛在电力物联网; 综合能源系统; 深度强化学习; 自动发电控制;
D O I
暂无
中图分类号
TM73 [电力系统的调度、管理、通信]; TP18 [人工智能理论]; TK01 [能源];
学科分类号
080702 ; 080802 ; 081104 ; 0812 ; 0835 ; 1405 ;
摘要
包含超大规模分布式能源、负荷以及冷热电联产的泛在电力物联网的综合能源系统是未来发展趋势.由于泛在物联将给电网带来强的随机扰动问题,传统的自动发电控制(automatic generation control, AGC)方法已无法满足如此大规模复杂综合能源系统的频率稳定.机器学习是解决复杂能源系统AGC强随机扰动的一种有效方法.然而这种超大规模的泛在物联将给AGC求解带来维数灾问题.本文针对DDQN-AD(double deep Q networkaction discovery)算法中经验缓存机制构建问题,提出了一种基于比例优先级采样机制的深度强化学习算法PRDDQN-AD(prioritized replay DDQN-AD),以解决机器学习中多维状态-动作对的维数灾问题,进而解决泛在电力物联网综合能源系统模式下的随机扰动问题.对源网荷储协同的两区域综合能源系统模型和集成了大量源、网、荷、储及冷热电联产的多区域泛在电力物联网综合能源系统模型进行仿真.结果表明,与改进前的DDQNAD算法相比, PRDDQN-AD能够提升训练样本的质量,具有良好的学习效率和泛化性能,能够解决维数灾问题;与其他智能算法相比,其收敛速度和控制性能均有明显提升,可获得区域最优协同控制.
引用
收藏
页码:221 / 234
页数:14
相关论文
共 23 条
  • [1] 基于探索感知思维深度强化学习的自动发电控制
    席磊
    余璐
    付一木
    黄悦华
    陈曦
    康守亚
    [J]. 中国电机工程学报, 2019, 39 (14) : 4150 - 4162
  • [2] 基于多智能体迁移强化学习算法的电力系统最优碳–能复合流求解
    陈艺璇
    张孝顺
    郭乐欣
    余涛
    [J]. 高电压技术, 2019, 45 (03) : 863 - 872
  • [3] 燃煤耦合生物质气化发电技术研究
    胡鹏龙
    于强
    周昊
    马孝纯
    崔成云
    祝令昆
    季鹏
    舒振杨
    [J]. 锅炉制造, 2018, (06) : 32 - 36
  • [4] 风光互补发电系统的分级递阶分布式预测控制
    孔小兵
    刘向杰
    韩梅
    [J]. 中国科学:信息科学, 2018, 48 (10) : 1316 - 1332
  • [5] 基于具有动作自寻优能力的深度强化学习的智能发电控制
    席磊
    陈建峰
    黄悦华
    薛田良
    张涛
    张赟宁
    [J]. 中国科学:信息科学, 2018, 48 (10) : 1430 - 1449
  • [6] 预测优化PID方法在含风电电力系统AGC中的应用
    赵熙临
    林震宇
    付波
    何莉
    徐光辉
    [J]. 电力系统及其自动化学报, 2019, 31 (03) : 16 - 22
  • [7] 基于具有时间隧道思想的多智能体强化学习的智能发电控制方法
    席磊
    陈建峰
    黄悦华
    徐艳春
    张赟宁
    [J]. 中国科学:技术科学, 2018, 48 (04) : 441 - 456
  • [8] 能源互联网多能分布式优化研究挑战与展望
    殷爽睿
    艾芊
    曾顺奇
    吴琼
    郝然
    江迪
    [J]. 电网技术, 2018, 42 (05) : 1359 - 1369
  • [9] 分布式能源网络系统总体架构
    朱晓军
    朱建华
    朱振旗
    李红霞
    甘中学
    [J]. 科学通报, 2017, (32) : 3659 - 3671
  • [10] 基于分布式模型预测控制的包含大规模风电集群互联系统超前频率控制策略
    孙舶皓
    汤涌
    仲悟之
    叶林
    李智
    蓝海波
    [J]. 中国电机工程学报, 2017, 37 (21) : 6291 - 6302