跳到正文
原文
arXiv · Computation and Language· Noureddine Khaous (LLF - UMR7110, UPCit\'e), Guillaume Wisniewski (LLF - UMR7110, UPCit\'e)·· 2 小时前AI 评分26

更好的度量救不了你:比较什么胜过如何比较

A Better Metric Will Not Save You: What You Compare Beats How You Compare It

AI 导读

论文指出,RSA、CKA、Procrustes 等表征相似性度量无法触及条件集合的选取,而该集合由输入筛选与分组方式在度量矩阵生成前决定。在元音声学组织已知、覆盖十五种语言与二十七种表征的实验中,固定类别数时更换比较类别使两组表征差距变化超过被测效应的两倍,改变类别数量则毫无影响;模型排名在这些选择下可识别,跨语言排名则不可识别。

来源:arXiv · Computation and Language · arxiv.org