跳到正文
原文
arXiv · Machine Learning· Yuantao Deng, Jinnuo Liu, Kaizhen Tan, Yuchen Liu·· 7 小时前AI 评分25

早期学习如何塑造持续学习中表征变化的后续方向

Early Learning Shapes Later Directions Of Representation Change In Continual Learning

AI 导读

summary_zh: 研究发现神经网络在持续学习过程中,早期表征变化会形成一个低维子空间(scaffold),并在后续任务中被重复使用。这种复用具有历史依赖性:不同早期任务经历的网络会偏好各自诱导出的子空间。

来源:arXiv · Machine Learning · arxiv.org