arXiv · Computation and Language· Shunsuke Mitsumori, Tomoya Mizumoto, Yusuke Fujita·· 4 hr agoAI score18
用合成伪方言增强构建方言鲁棒的语音语言模型
Dialect-Robust Speech Language Models with Synthetic Pseudo-Dialect Augmentation
AI brief
论文提出用标准语言 TTS 转换 LLM 生成的方言文本合成伪方言语音，无需任何真实方言语音，并在训练中加入中间标准文本预测作语义归一化。在日、德、汉语方言的方言到英语语音翻译评测中，伪方言增强将日语从 25.38 提升到 26.24、德语从 31.57 提升到 32.47，中间标准文本预测进一步把日语推到 28.26、中文从 11.67 提升到 16.37。
Source: arXiv · Computation and Language · arxiv.org