arXiv · Artificial Intelligence· Timothy Kassis·· 3 hr agoSelectedAI score62
Scientific Agents：职业专属系统提示在科学任务上的评估
Scientific Agents: Evaluating Profession-Specific System Prompts on Scientific Tasks
AI brief
论文发布开源数据集 Scientific Agents，包含 503 套职业专属 this http URL profiles，并用 Gemini 3.8 Flash 在 Pi agent harness 中评估。
Why it matters
论文通过 503 套职业提示对比 Gemini 3.8 Flash，揭示专业提示在多数基准上未提升准确率却显著增加成本。
Source: arXiv · Artificial Intelligence · arxiv.org