arXiv · Statistics Machine Learning· Mingyi Li, Taira Tsuchiya·· 4 hr agoAI score19
对抗性 MDP 策略优化中 horizon gap 的弥合
Closing the Horizon Gap in Policy Optimization for Adversarial MDPs
AI brief
研究针对带对抗损失与 bandit feedback 的在线 episodic tabular MDP 策略优化，用 regularized Q-functions 联合控制所有 state-action pair 的局部更新稳定性，弥合了与 occupancy-measure 算法相差 horizon H 的 regret 差距。
Source: arXiv · Statistics Machine Learning · arxiv.org