控制理论与应用

作者：熊春萍,马倩

单位：南京理工大学自动化学院,南京理工大学自动化学院

关键词：异构多智能体系统; 最优输出调节; 策略迭代; 无模型算法; 强化学习

基金：国家自然科学基金项目(62173183), 湖北省科技计划项目(2022BBA026), 咸宁市科技计划项目(2021JBZXM02)资助.

本文研究了异构多智能体系统的最优输出调节问题.通信网络拓扑含有向生成树.首先,设计了外部系统状态补偿器和状态反馈控制器,应用图论和Lyapunov稳定性理论证明了所设计的补偿器和控制器可以解决一般输出调节问题.然后,通过最小化预定义的成本方程,解决最优输出调节问题.结合最优控制理论和强化学习技术,提出了两种求解最优控制器的算法,即基于模型的策略迭代算法和无模型off-policy算法.利用无模型算法获取最优控制器的过程既不需要求解输出调节方程也不需要使用系统动态信息.最后,通过数值仿真验证了本文所提出的算法的有效性.

来源：2025年第3期

《控制理论与应用》期刊编辑部

查看控制理论与应用杂志2025年第3期