基于多代理Double DQN算法模拟发电侧竞价行为

来源 :电网技术 | 被引量 : 0次 | 上传用户:jick85726
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
强化学习已经成为研究发电侧竞价策略的重要方法,而Q-Learning算法的Q-table维度问题是限制其应用在发电侧竞价策略的主要原因,为此文章采用智能多代理Double DQN (double deep q-learning network,DDQN)算法进行研究.DDQN算法采用神经网络估计值函数与选择动作策略,解决了Q-Learning会因为状态序列的增加导致计算量庞大甚至无法求解的问题.此外,文章根据日前市场发电商报价方式设计了报价策略并作为DDQN的动作空间,将发电商中标电量与负荷需求作为DDQN的状态序列,在tensorflow环境中模拟竞价过程.实验结果表明,使用DDQN算法模拟发电商竞价行为是可行的,并且参与竞价的发电商都达到了纳什均衡点.
其他文献
针对近年来国内外大停电事故频发问题,如何发挥储能提升电网安全性的潜力,在输储规划阶段考虑多重故障带来的影响值得关注.为解决线路攻击造成的最恶劣故障情况下输电网扩展
为解决竞争性市场环境下如何有序协调综合能源系统各主体日前出清问题,提出一种三主体交互迭代的联合竞价出清策略.首先介绍参与竟价出清的构成主体以及各自的职能和作用.其
电池储能系统(battery energy storage system,BESS)在电力系统中应用愈加广泛.BESS在实际运行工况中存在差异性,导致电池组寿命衰减速度不一.为了延缓电池组寿命衰减、提高B
“5·30”玩的就是心跳“五一”长假里,外地来的几个老同学聚在一起,大家讨论的中心话题就是炒股,有的同学投入10万元,已经盈利20万元了,有的同学买基金也有一倍多的收益。
区域柔性负荷可综合体现各类柔性负荷的响应特性,是未来主动参与新能源消纳的重要主体.文章首先以不同类型柔性负荷的响应模型为基础,建立区域柔性负荷的确定性响应模型;其次
  简要介绍了数字化变电站的概念及其技术支持.IEC61850实现了变电站内不同厂家二次设备间的信息共享和互操作,为数字化变电站提供了极好的通信平台;电子式互感器可以用数字
针对用户级综合能源系统(integrated energy system,IES)规模小、负荷波动大、能量耦合复杂的特点,提出一种考虑多能时空耦合的超短期负荷预测方法.首先,结合K-means聚类方法
  集控站在无人值班变电站安全稳定运行中有重要的作用,在实际应用中应对其遥控操作的安全性仔细考虑。本文通过对集控站误操作事故以及当前防误闭锁现状的分析,对当前无专用
新疆地处“丝道”要冲,自古即为东西交通和文化荟萃的地方。在历史上,这里民族迁徙频繁,疆域时有伸缩,因此造成地城称谓上的复杂化和多样化:或异地同名,或一地多名,或前后冲
粮票作为计划经济时代的一种购粮凭证,现早已停止了发行和流通,但目前,我国的粮票收藏正渐入佳境,与邮票、钱币、烟标、火花并称为“五大收藏品”。那么,究竟哪些粮票具有较