arXiv · Computation and Language· Arkajyoti Chakraborty, Aryan Tayal, Ishika Agarwal, Tanner Sorensen, Justin Chiu, Alessandro Di Bari, Neha Gupta, Andreas Stolcke·· 3 小时前AI 评分35
ToolRACER:面向智能体训练与评测的鲁棒对话仿真资源
ToolRACER: A Robust Agentic Conversation Emulation Resource for Agent Training and Evaluation
AI 导读
ToolRACER 是一个合成数据生成管线,协调用户、助手与工具仿真模型生成并校验多轮交互。基于它构建的 ToolRACERBench 覆盖 6 个领域、55 种 persona,产出 5.6K 条对话轨迹,约 66% 含易失败场景并注入对抗行为。在 τ²-bench 与 ACEBench 上评估显示,混合领域内数据可提升小语言模型的端到端智能体准确率。
来源:arXiv · Computation and Language · arxiv.org