跳到正文
原文
arXiv · Computation and Language· G. L. John Salvin (Indian Institute of Technology Palakkad), Swapnil Hingmire (Indian Institute of Technology Palakkad)·· 3 小时前AI 评分38

COMET 跨文字系统可比性研究:Indic MT 评测中分词器引发的文字偏差诊断与校正

Making COMET Comparable Across Scripts: Diagnosis and Correction of Tokeniser-Induced Script Bias in Indic MT Evaluation

AI 导读

研究在 IndicMT Eval 上检验 COMET 分数的脚本不变性,发现脚本身份解释 native-script COMET 方差的 22.9%,且五种语言与标注者的一致性全部下降。

来源:arXiv · Computation and Language · arxiv.org