arXiv · Computation and Language· G. L. John Salvin (Indian Institute of Technology Palakkad), Swapnil Hingmire (Indian Institute of Technology Palakkad)·· 3 小时前AI 评分38
COMET 跨文字系统可比性研究:Indic MT 评测中分词器引发的文字偏差诊断与校正
Making COMET Comparable Across Scripts: Diagnosis and Correction of Tokeniser-Induced Script Bias in Indic MT Evaluation
AI 导读
研究在 IndicMT Eval 上检验 COMET 分数的脚本不变性,发现脚本身份解释 native-script COMET 方差的 22.9%,且五种语言与标注者的一致性全部下降。
来源:arXiv · Computation and Language · arxiv.org