基于Whisper的印地语时间戳语音转写论文
Get the story
2026年10月8日,arXiv Audio and Speech栏目发布一篇一手论文,提出使用Whisper进行带时间戳的印地语语音转写。论文采用基于CTC的方法,在Whisper编码器输出上直接训练低复杂度字符级CTC头,为印地语生成词级时间戳。实验显示,该方法效果接近外部CTC模型,并优于基于交叉注意力分数的方案。论文还利用CTC头输出检测并缓解对话语音中的模型幻觉,并以简单的token长度准则改善短片段转写质量。该论文已提交ICASSP 2027,目前未见后续评审或接收结果报道。
Generated from reports · updated 3 hr ago
Timeline
Follow the coverage from different angles.
- arXiv · Audio and Speech使用 Whisper 进行带时间戳的印地语语音转写
论文提出一种基于 CTC 的方法,在 Whisper 编码器输出上直接训练低复杂度字符级 CTC 头,为印地语生成词级时间戳。实验显示其效果接近外部 CTC 模型、优于基于交叉注意力分数的方案;还利用 CTC 头输出检测并缓解对话语音中的模型幻觉,用简单的 token 长度准则改善短片段转写质量。论文已提交 ICASSP 2027。
Heat trend
Current heat 9·Comparable peak 10(Oct 8)·Comparable change over 24 hours –
The trend compares only the same participants observed continuously; its range may be smaller than the current heat count. Move or click on the chart to inspect hourly heat; use the left and right arrow keys to switch.