自2022年12月OpenAI发布ChatGPT以来,以通用人工智能(artificial general intelligence,AGI)为代表的人工智能技术变革进入了加速发展的快车道。机器学习作为通用人工智能的核心技术,能否帮助人们解决“线性+非线性”“单参数+多参数”...
详细信息
自2022年12月OpenAI发布ChatGPT以来,以通用人工智能(artificial general intelligence,AGI)为代表的人工智能技术变革进入了加速发展的快车道。机器学习作为通用人工智能的核心技术,能否帮助人们解决“线性+非线性”“单参数+多参数”“离散+连续”“定性+定量”“局部+全局”等复杂问题。这已是考验机器学习的关键。机器学习该如何发展?正如北京大学数学科学学院鄂维南院士所说:“机器学习已开创应用数学新机遇。”因此,利用“数学方法+机器学习”模式进行交叉研究是研究机器学习的发展新方向。
强化学习是人工智能领域中的一个研究热点。在求解强化学习问题时,传统的最小二乘法作为一类特殊的函数逼近学习方法,具有收敛速度快、充分利用样本数据的优势。通过对最小二乘时序差分算法(Least-Squares Temporal Difference,LSTD)的研究与分析,并以该方法为基础提出了双权重最小二乘Sarsa算法(Double Weights With Least Squares Sarsa,DWLS-Sarsa)。DWLS-Sarsa算法将两权重通过一定方式进行关联得到目标权重,并利用Sarsa方法对时序差分误差进行控制。在算法训练过程中,两权重会因为更新样本的不同而产生不同的值,保证了算法可以有效地进行探索;两权重也会因为样本数据的分布而逐渐缩小之间的差距直到收敛至同一最优值,确保了算法的收敛性能。最后将DWLS-Sarsa算法与其他强化学习算法进行实验对比,结果表明DWLS-Sarsa算法具有较优的学习性能与鲁棒性,可以有效地处理局部最优问题并提高算法收敛时的表现效果。
暂无评论