arXiv · Statistics Machine Learning· Nicolas Hoischen, Petar Bevanda, Max Beier, Stefan Sosnowski, Boris Houska, Sandra Hirche·· 3 hr agoAI score19
无穷小算子世界模型：离线强化学习的有限样本保证
Infinitesimal Operator World Models: Finite-Sample Guarantees for Offline Reinforcement Learning
AI brief
论文提出一种基于算子理论的无穷小算子世界模型，将离线强化学习与 Hamilton-Jacobi-Bellman 方程相连，用受控扩散过程的无穷小生成元在再生核希尔伯特空间中表示世界模型。研究在生成元近似误差足够小时证明值函数的全局收敛性，并给出与系统平滑性、稳定性直接挂钩的显式有限样本保证。理论与概念验证结果表明，算子方法有望用于连续时间最优控制下的离线强化学习。
Source: arXiv · Statistics Machine Learning · arxiv.org