跳到正文
原文
arXiv · Computation and Language· Yihan Li, Hanyi Zhang, Xiaoxi Jiang, Man Guo·· 3 小时前AI 评分36

Goldsmith:基于 Gold Loss 引导的定义优化与智能体标注框架

Goldsmith: Gold-Loss-Guided Definition Optimization with an Agentic Annotation Harness

AI 导读

Goldsmith 是一个智能体流水线,将少量专家标注的 gold set 转化为可复用的结构化标注定义,并把该定义作为可训练的文本对象进行优化。候选定义在相同 gold 样本上运行,以可执行的结构化损失打分,LLM 编辑器仅在被测损失下降时接受文本梯度式修订。

来源:arXiv · Computation and Language · arxiv.org