arXiv · Audio and Speech· Yuan Xie, Jiaqi Song, Guang Qiu, Xianliang Wang, Ming Lei, Jie Gao, Jie Wu·· 3 hr agoAI score27
重思 LLM-based ASR 中的熵分配：理解语音编码器与 LLM 的动态关系
Rethinking Entropy Allocation in LLM-based ASR: Understanding the Dynamics between Speech Encoders and LLMs
AI brief
研究从熵分配视角重审 LLM-based ASR，提出三个指标刻画不同训练范式如何在语音编码器与 LLM 之间分配熵降低，并给出基于能力边界意识的多阶段训练策略。
Source: arXiv · Audio and Speech · arxiv.org