arXiv · Machine Learning Theory· Wenqi Li, Bin Liu, Mindi Ruan, Chuanbo Hu, Minglei Yin, Xin Li·· 4 hr agoAI score39
Conditional Accuracy Profiles：在不同部署条件下诊断 LLM 评判器
Conditional Accuracy Profiles: Diagnosing LLM Judges across Deployment Conditions
AI brief
研究提出 Conditional Accuracy Profiling（CAP），一种事后诊断框架，将成对 LLM 评判器的准确率分解为内容敏感性、鲁棒性与理由质量三大类共八个条件。
Source: arXiv · Machine Learning Theory · arxiv.org