LLM在伪词加工中缺乏人类的亚词敏感性

1. 12:00
   arXiv · Computation and Language

   伪词探测：LLM 几乎不具备支配人类伪词处理的亚词敏感性

   一项针对五个 LLM 的意大利语双选伪词实验显示，当真实词选项提供词汇熟悉度线索时，LLM 与人类判断更一致；在纯伪词条件下则大幅低于字符 n-gram 模型 fastText。驱动人类—fastText 一致性的亚词余弦相似度线索并未稳定迁移到人类—LLM 对齐，推理 token 消耗与人类加工难度也无稳定关联；作者将分词与训练数据覆盖列为候选解释。

Current heat 9·Comparable peak 10（Oct 7）·Comparable change over 24 hours –

The trend compares only the same participants observed continuously; its range may be smaller than the current heat count. Move or click on the chart to inspect hourly heat; use the left and right arrow keys to switch.