arXiv · Computation and Language· Yichen Wang, Tenghao Huang, Vishakh Padmakumar, Mina Lee·· 3 小时前AI 评分40
通过长尾表现评估 LLM 创造力
Evaluating LLM Creativity through Long-Tail Performance
AI 导读
研究提出用参考输入-输出分布长尾中的任务特定表现来形式化 LLM 创造力,基于新颖性-质量乘积框架,在 15 个基准和 26 个开放权重模型上以预训练数据 n-gram 缺失作为新颖性代理进行实证。
来源:arXiv · Computation and Language · arxiv.org