arXiv · Computation and Language· Yichen Wang, Tenghao Huang, Vishakh Padmakumar, Mina Lee·· 4 hr agoAI score40
通过长尾表现评估 LLM 创造力
Evaluating LLM Creativity through Long-Tail Performance
AI brief
研究提出用参考输入-输出分布长尾中的任务特定表现来形式化 LLM 创造力，基于新颖性-质量乘积框架，在 15 个基准和 26 个开放权重模型上以预训练数据 n-gram 缺失作为新颖性代理进行实证。
Source: arXiv · Computation and Language · arxiv.org