Skip to content
Hot eventLive

COMET 跨文字系统偏差诊断与校正研究

1 reports1 sources3 hr ago updated

Get the story

AI overview

该研究聚焦 COMET 在多语言机器翻译评测中的跨文字系统可比性问题。2026年10月7日，arXiv（Computation and Language，一手）发布报告，在 IndicMT Eval 上检验 COMET 分数的脚本不变性，发现脚本身份可解释 native-script COMET 方差的 22.9%，且五种语言与标注者的一致性全部下降，表明分词器引发的文字偏差会影响评测结果。

Generated from reports · updated 3 hr ago

LatestOct 7
arXiv 报告：脚本身份解释 22.9% 方差，五种语言与标注者一致性全部下降。

Timeline

Follow the coverage from different angles.

Oct 7, 2026
  1. arXiv · Computation and Language
    COMET 跨文字系统可比性研究：Indic MT 评测中分词器引发的文字偏差诊断与校正

    研究在 IndicMT Eval 上检验 COMET 分数的脚本不变性，发现脚本身份解释 native-script COMET 方差的 22.9%，且五种语言与标注者的一致性全部下降。

Heat trend

Current heat 9·Comparable peak 10（Oct 7）·Comparable change over 24 hours –

02.557.510Oct7Oct7Oct7Oct7

The trend compares only the same participants observed continuously; its range may be smaller than the current heat count. Move or click on the chart to inspect hourly heat; use the left and right arrow keys to switch.