An Optimal Control Scheme for a Class of Discrete-time Nonlinear Systems with Time Delays Using Adaptive Dynamic Programming 被引量：17

1

作者 WEI Qing-Lai ZHANG Hua-Guang +1 位作者 LIU De-Rong ZHAO Yan 《自动化学报》 EI CSCD 北大核心 2010年第1期121-129,共9页

关键词 非线性系统 最优控制 控制变量 动态规划

在线阅读 下载PDF 职称材料

多车型回程车辆调度问题的ADP算法研究

2

作者 吴万国 李林林 孙良旭 《计算机应用研究》 CSCD 北大核心 2013年第7期1991-1994,共4页

采用近似动态规划(ADP)方法对钢铁物流运输过程中的车辆调度问题进行了分析,设计了车辆和运输货物的状态向量空间、动作向量空间等,充分考虑运输成本和能力约束,建立状态转移函数、目标函数,并对近似动态规划算法进行改进。在基于决策... 采用近似动态规划(ADP)方法对钢铁物流运输过程中的车辆调度问题进行了分析,设计了车辆和运输货物的状态向量空间、动作向量空间等,充分考虑运输成本和能力约束,建立状态转移函数、目标函数,并对近似动态规划算法进行改进。在基于决策后状态的ADP算法的基础上,采用Boltzmann探索策略对所有的状态空间进行遍历,避免局部最优和低效问题。通过对比实验,比较Q学习算法、基于决策后状态的ADP算法以及采用Boltzmann探索策略的ADP算法的实验结果,证明了采用Boltzmann探索策略的ADP算法具有更快的收敛速度,执行效率更高。 展开更多

关键词 近似动态规划 车辆调度 Q学习 探索策略

在线阅读 下载PDF 职称材料

近似动态规划在电力系统优化运行中的应用综述 被引量：4

3

作者 朱建全 朱文凯 +3 位作者 刘海欣 陈嘉俊 曾恺 刘明波 《电力系统自动化》 EI CSCD 北大核心 2024年第22期1-21,共21页

高比例可再生能源的接入和日益扩大的系统规模给电力系统优化运行带来了巨大挑战。近似动态规划(ADP)能够有效处理维数灾问题,在求解复杂系统动态优化问题上具备强大优势,近年来成为运筹学领域的一大研究热点。文中对ADP及其在电力优化... 高比例可再生能源的接入和日益扩大的系统规模给电力系统优化运行带来了巨大挑战。近似动态规划(ADP)能够有效处理维数灾问题,在求解复杂系统动态优化问题上具备强大优势,近年来成为运筹学领域的一大研究热点。文中对ADP及其在电力优化运行中的应用进行了综述。首先,阐述了ADP的基本思想、主要特点及其近似策略。其次,介绍了不同类型的ADP在电力系统优化运行中的应用现状。最后,讨论了当前ADP在理论和应用中的不足,并对其未来发展方向作了进一步的展望。 展开更多

关键词 近似动态规划 近似策略 电力系统 优化运行

在线阅读 下载PDF 职称材料

基于数据的自学习优化控制:研究进展与展望 被引量：23

4

作者 刘德荣 李宏亮 王鼎 《自动化学报》 EI CSCD 北大核心 2013年第11期1858-1870,共13页

自适应动态规划(Adaptive dynamic programming,ADP)方法可以解决传统动态规划中的"维数灾"问题,已经成为控制理论和计算智能领域最新的研究热点.ADP方法采用函数近似结构来估计系统性能指标函数,然后依据最优性原理来获得近... 自适应动态规划(Adaptive dynamic programming,ADP)方法可以解决传统动态规划中的"维数灾"问题,已经成为控制理论和计算智能领域最新的研究热点.ADP方法采用函数近似结构来估计系统性能指标函数,然后依据最优性原理来获得近优的控制策略.ADP是一种具有学习和优化能力的智能控制方法,在求解复杂非线性系统的最优控制问题中具有极大的潜力.本文对ADP的理论研究、算法实现、相关应用等方面进行了全面的梳理,涵盖了最新的研究进展,并对ADP的未来发展趋势进行了分析和展望. 展开更多

关键词 自适应动态规划 近似动态规划 强化学习 神经网络 智能控制

在线阅读 下载PDF 职称材料

微电网多目标随机动态优化调度算法 被引量：23

5

作者 王雅平 林舜江 +2 位作者 杨智斌 孙兴鲁 刘明波 《电工技术学报》 EI CSCD 北大核心 2018年第10期2196-2207,共12页

针对含风光发电和储能电池的微电网多目标随机动态优化调度问题,建立以微电源总运行费用和系统总网损为目标函数,同时以多个蓄电池剩余电量的和作为资源存储量的微电网多目标随机型存储模型。模型中采用交流潮流模型准确描述配电线路的... 针对含风光发电和储能电池的微电网多目标随机动态优化调度问题,建立以微电源总运行费用和系统总网损为目标函数,同时以多个蓄电池剩余电量的和作为资源存储量的微电网多目标随机型存储模型。模型中采用交流潮流模型准确描述配电线路的传输功率安全约束,并考虑了各种分布式电源的电压无功特性。结合自适应加权和法(AWS)和近似动态规划法(ADP)求解多目标随机动态优化调度问题,先采用AWS法将多目标随机动态优化模型转化为一系列单目标随机动态优化模型,再采用ADP的近似值函数迭代算法实现对单目标随机动态优化模型的逐时段递推解耦求解,并通过对AWS法中分割段新增Pareto点对应权值的调整以得到均匀分布的Pareto前沿。通过某一实际微电网的算例仿真,证明了所提出模型与算法的正确性和有效性。 展开更多

关键词 微电网调度 随机优化 多目标优化 近似动态规划 自适应加权和法

在线阅读 下载PDF 职称材料

随机动态经济调度问题的存储器建模及近似动态规划算法 被引量：18

6

作者 简淦杨 刘明波 林舜江 《中国电机工程学报》 EI CSCD 北大核心 2014年第25期4333-4340,共8页

将含有风电场和抽水蓄能电站的电力系统随机动态经济调度问题描述为随机型存储器问题,以考虑风电场出力所具有的随机性。该模型含数学期望的计算,且实际问题状态空间、决策空间都是高维的,难以对其准确求解。因此,采用近似动态规划算法... 将含有风电场和抽水蓄能电站的电力系统随机动态经济调度问题描述为随机型存储器问题,以考虑风电场出力所具有的随机性。该模型含数学期望的计算,且实际问题状态空间、决策空间都是高维的,难以对其准确求解。因此,采用近似动态规划算法将值函数近似表示成分段线性函数的逼近形式,从而将随机存储器问题转化为一系列多阶段线性规划问题。通过扫描误差场景并相应求解所对应的线性规划问题,可实现对值函数进行训练,逐次修正各分段斜率值,直至值函数收敛后,再用来对预测场景下的线性规划问题进行求解,即得动态经济调度结果。该算法避免了求解准确解时面临的"维数灾"问题,具有较快的计算速度。以含风电场和抽水蓄能电站的小型测试系统和某省级实际电力系统为例,验证了所提模型与算法的可行性与有效性。 展开更多

关键词 风电场 抽水蓄能电站 随机动态经济调度 存储器模型 近似动态规划法

在线阅读 下载PDF 职称材料

基于广义模糊双曲模型的自适应动态规划最优控制设计 被引量：12

7

作者 张吉烈 张化光 +1 位作者 罗艳红 梁洪晶 《自动化学报》 EI CSCD 北大核心 2013年第2期142-149,共8页

为连续非线性系统提出了一种有效的最优控制设计方法.广义模糊双曲模型(Generalized fuzzy hyperbolic model,GFHM)首次作为逼近器用来估计HJB(Hamilton-Jacobi-Bellman)方程的解(值函数,即它是状态与代价函数之间的映射),然后,利用该... 为连续非线性系统提出了一种有效的最优控制设计方法.广义模糊双曲模型(Generalized fuzzy hyperbolic model,GFHM)首次作为逼近器用来估计HJB(Hamilton-Jacobi-Bellman)方程的解(值函数,即它是状态与代价函数之间的映射),然后,利用该近似解获得最优控制.本文方法只需要一个GFHM估计值函数.首先,阐述了对于连线非线性系统最优控制的设计过程;然后,证明了逼近误差是一致最终有界的(Uniformly ultimately bounded,UUB);最后,一个数值例子验证了本文方法的有效性.另一个例子通过与神经网络自适应动态规划的方法作比较,演示了本文方法的优点. 展开更多

关键词 广义模糊双曲模型 最优控制 自适应动态规划 近似最优 自适应控制

在线阅读 下载PDF 职称材料

汉江上游梯级水电站水库优化运行研究 被引量：3

8

作者 孙晓懿 黄强 +2 位作者 康田 高凡 郝鹏 《西安理工大学学报》 CAS 北大核心 2011年第3期311-316,共6页

根据汉江上游石泉、喜河、安康梯级水电站水库群的特点和任务,分别以梯级水电站发电量最大和发电效益最大为目标函数建立优化模型,将逐次逼近动态规划法(DPSA)与逐步优化算法(POA)相结合求解模型,获得梯级水电站长系列优化运行结果。结... 根据汉江上游石泉、喜河、安康梯级水电站水库群的特点和任务,分别以梯级水电站发电量最大和发电效益最大为目标函数建立优化模型,将逐次逼近动态规划法(DPSA)与逐步优化算法(POA)相结合求解模型,获得梯级水电站长系列优化运行结果。结果表明,梯级水电站水库群优化运行能够充分发挥水库的补偿作用,相比梯级水库群常规调度和单一水库优化运行获得更大的效益;与发电量最大模型相比,发电效益最大模型增加了梯级水电站的发电效益和枯水期出力,调整了水电站的负荷分配,减少了水电站弃水,提高了水资源利用率。研究成果为汉江上游梯级水电站的优化运行提供了理论依据和技术支持。 展开更多

关键词 汉江上游梯级水电站 梯级发电效益最大 梯级发电量最大 逐次逼近动态规划法 逐步优化算法

在线阅读 下载PDF 职称材料

基于功能度量法的概率优化设计的收敛控制 被引量：3

9

作者 易平 杨迪雄 《力学学报》 EI CSCD 北大核心 2008年第1期128-134,共7页

概率结构优化设计(PSDO)中概率约束的评定可以采用最近提出的、被认为更高效、稳定的功能度量法(PMA).改进均值(AMV)迭代格式经常在PMA中使用,但它对一些非线性功能函数或非正态随机变量,搜索最小功能目标点时可能陷入周期振荡或混沌解... 概率结构优化设计(PSDO)中概率约束的评定可以采用最近提出的、被认为更高效、稳定的功能度量法(PMA).改进均值(AMV)迭代格式经常在PMA中使用,但它对一些非线性功能函数或非正态随机变量,搜索最小功能目标点时可能陷入周期振荡或混沌解,从而使PSDO的两层次算法或序列近似规划算法优化计算失败.利用混沌反馈控制的稳定转换法对功能度量法的AMV迭代格式实施了收敛控制,使嵌入周期和混沌轨道的不稳定不动点稳定化,获得稳定收敛解,从而使概率约束的评定能正常进行;再由两层次算法或序列近似规划算法进行结构优化设计.算例结果表明了稳定转换法实施收敛控制的有效性,以及序列近似规划算法相对高效的优点. 展开更多

关键词 概率结构优化设计 功能度量法 AMV迭代格式 序列近似规划 混沌动力学 稳定转换法

在线阅读 下载PDF 职称材料

连续型动态规划的新算法研究 被引量：2

10

作者 张鹏 《运筹学学报》 CSCD 北大核心 2012年第1期97-105,共9页

提出了求解一维连续型动态规划问题的自创算法——离散近似迭代法,并结合双收敛方法求解多维连续型动态规划问题.该算法的基本思路为:在给定其它状态向量序列的基础上,每次对一个状态变量序列进行离散近似迭代,并找出该状态变量的最优序... 提出了求解一维连续型动态规划问题的自创算法——离散近似迭代法,并结合双收敛方法求解多维连续型动态规划问题.该算法的基本思路为:在给定其它状态向量序列的基础上,每次对一个状态变量序列进行离散近似迭代,并找出该状态变量的最优序列,直到所有状态向量序列都检查完.当模型为非凸非凹动态规划时,证明了该算法的收敛性.当模型为凸动态规划时,证明了该算法的线性收敛性.最后,以一个具体算例验证了该模型和算法的有效性. 展开更多

关键词 动态规划问题 多维 离散近似迭代方法 双收敛法

在线阅读 下载PDF 职称材料

基于非线性多输入多输出近似动态规划的发动机缸平衡智能调节算法

11

作者 黄志坚 熊雪梅 +3 位作者 张赞 李宇栋 陈文涛 张琴 《上海海事大学学报》 北大核心 2017年第4期88-92,共5页

为解决发动机缸平衡控制问题,将标准近似动态规划(approximate dynamic programming,ADP)扩展为多输入多输出形式,给出其控制算法,并证明其收敛性。仿真结果显示,该方法能在一定范围内智能地调节各缸喷油量,用于补偿由多种不确定因素导... 为解决发动机缸平衡控制问题,将标准近似动态规划(approximate dynamic programming,ADP)扩展为多输入多输出形式,给出其控制算法,并证明其收敛性。仿真结果显示,该方法能在一定范围内智能地调节各缸喷油量,用于补偿由多种不确定因素导致的各缸转速差异,从而自适应地提高缸平衡效果。该方法只需基于实时转速,不必检测和区分各缸间的转速差异,具有非线性系统的智能优化特点。该方法能直接处理各缸间的非线性多输入多输出耦合关系。 展开更多

关键词 近似动态规划 多输入多输出(MIM0) 非线性系统 自适应性 缸平衡 怠速

在线阅读 下载PDF 职称材料

梯级泵站叶片全调节日优化运行研究 被引量：1

12

作者 张宇虹 方国华 +1 位作者 闻昕 田雨 《水资源与水工程学报》 CSCD 2017年第6期123-128,共6页

梯级泵站群优化运行是具有非线性、多阶段、多维度特征的复杂科学问题,为解决梯级泵站运行效率较低、耗能较高等问题,开展梯级泵站叶片全调节日优化运行研究,运用动态规划逐次渐近法对单级泵站多机组叶片全调节进行优化计算,采用逆序查... 梯级泵站群优化运行是具有非线性、多阶段、多维度特征的复杂科学问题,为解决梯级泵站运行效率较低、耗能较高等问题,开展梯级泵站叶片全调节日优化运行研究,运用动态规划逐次渐近法对单级泵站多机组叶片全调节进行优化计算,采用逆序查表法对梯级泵站日优化运行问题进行求解,最后对南水北调来水调入密云水库梯级泵站工程优化展开实例研究,考虑峰谷电价的影响,梯级泵站日提水总量为176.36×10~4m^3,泵站效率为43.27%,优化后梯级泵站日运行费用减少23.77%,优化效果明显。 展开更多

关键词 梯级泵站 日优化运行 动态规划逐次渐近法 逆序查表法 叶片全调节

在线阅读 下载PDF 职称材料