Indic-CLAP：跨语言蒸馏扩展CLAP至九种印度语言
Get the story
研究者提出 Indic-CLAP，一个将 CLAP 扩展到九种印度语言的多语言文本-音频模型，覆盖超过十亿使用者。该方法沿用 CLAP 的双编码器结构，仅通过蒸馏训练 Indic 文本编码器，音频编码器保持冻结，并使用机器翻译的 AudioCaps 字幕进行训练。评估显示 Indic-CLAP 编码器继承了 CLAP 教师的跨模态对齐能力，在跨模态检索和零样本分类任务上得到验证。该成果发表于 arXiv 的 Audio and Speech 类别，为一手研究报道。
Generated from reports · updated 3 hr ago
Timeline
Follow the coverage from different angles.
- arXiv · Audio and SpeechIndic-CLAP：通过跨语言蒸馏实现印度语言的文本-音频理解
研究者提出 Indic-CLAP，一个将 CLAP 扩展到九种印度语言的多语言文本-音频模型，覆盖超过十亿使用者。该方法利用 CLAP 的双编码器结构，仅通过蒸馏训练 Indic 文本编码器，音频编码器保持冻结，并使用机器翻译的 AudioCaps 字幕。评估显示 Indic-CLAP 编码器继承了 CLAP 教师的跨模态对齐能力，在跨模态检索和零样本分类任务上得到验证。
Heat trend
Current heat 9·Comparable peak 10（Oct 8）·Comparable change over 24 hours –
The trend compares only the same participants observed continuously; its range may be smaller than the current heat count. Move or click on the chart to inspect hourly heat; use the left and right arrow keys to switch.