arXiv · Audio and Speech· Mohan Shi, Zilai Wang, Natarajan Balaji Shankar, Kaiyuan Zhang, Eray Eren, Abeer Alwan·· 2 小时前AI 评分27
EAVA:用适配器唤醒编码器,实现 Speech-LLM 的有效领域自适应微调
Encoder Awakening via Adapters: Effective Domain-Adaptive Fine-tuning of Speech-LLMs
AI 导读
论文提出 Encoder Awakening via Adapters(EAVA),一种面向 Speech-LLM 语音识别(ASR)的领域自适应微调方法,先在编码器各层插入轻量适配器单独训练,再对全模型结合 LLM 上的 LoRA 进行联合微调。
来源:arXiv · Audio and Speech · arxiv.org