跳到正文
原文
arXiv · Machine Learning Theory· Wenqi Li, Bin Liu, Mindi Ruan, Chuanbo Hu, Minglei Yin, Xin Li·· 3 小时前AI 评分39

Conditional Accuracy Profiles:在不同部署条件下诊断 LLM 评判器

Conditional Accuracy Profiles: Diagnosing LLM Judges across Deployment Conditions

AI 导读

研究提出 Conditional Accuracy Profiling(CAP),一种事后诊断框架,将成对 LLM 评判器的准确率分解为内容敏感性、鲁棒性与理由质量三大类共八个条件。

来源:arXiv · Machine Learning Theory · arxiv.org