国内刊号:44-1240/TP
国际刊号:1000-8152
发布日期:
作者:陈滔,王立杰,刘洋,徐丽莉,于海生
单位:青岛大学自动化学院,青岛大学自动化学院,青岛科技大学自动化与电子工程学院,北京师范大学文理学院
关键词:宽度学习系统;Dropout;高斯过程;贝叶斯近似;拉格朗日乘子;回归分析
基金:国家自然科学基金项目(62103214,62373208,62273189), 中国博士后科学基金项目(2021M700077,2023T160348),山东省青年泰山学者项目 (tsqnz20221133, tsqn202306218), 山东省自然科学基金项目(ZR2024QF026, ZR2024YQ032)资助.
宽度学习系统(BLS)及其改进算法均普遍存在一个问题,即随着实际场景中数据复杂性的逐步增强,网络结构变得极其复杂,进一步导致计算资源的消耗也大幅度增加.针对此问题,本文提出了一种带有Dropout算法的贝叶斯近似宽度学习系统(Dropout-BABLS).首先,利用Dropout算法对宽度学习系统的隐藏层节点随机进行丢弃.其次, 通过结合高斯回归过程和贝叶斯理论近似Dropout对输出结果的损失函数以确定Dropout-BABLS的目标函数,进一步采用增广拉格朗日乘子法对目标函数的输出权重进行优化求解.最后,通过UCI机器学习知识库的10组回归数据集和自建的6组时间序列数据集对算法进行分析评估.结果表明,本文所提出的Dropout-BABLS算法能保证相应的输出精度,并减少25%~50%的训练时间.
来源:2025年第8期
《控制理论与应用》期刊编辑部