跳到正文
热点事件持续更新

论文测LLM州政策问答跨州替代错误

1 篇报道1 个报道来源2 小时前 更新

先了解这件事

AI 综述

该研究针对 LLM 回答美国州政策题时的错误类型提出测量问题:模型答错究竟是幻觉,还是返回了另一州的真实值。研究采用固定题干、仅变换司法辖区的最小集设计,覆盖美国 50 州与哥伦比亚特区共 51 个辖区,并选取三项 Medicaid 收入资格数值作为检验对象,以识别跨司法辖区的替换现象。论文发布于 arXiv Computation and Language,属一手研究报道。目前报道仅给出研究设计与覆盖范围,未公布具体错误率、涉及模型或替换结果等数据。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月8日
  1. arXiv · Computation and Language
    LLM 州政策回忆中的跨司法辖区替换测量

    研究以固定题干、仅变换司法辖区的最小集设计,覆盖美国 50 州与哥伦比亚特区共 51 个辖区及三项 Medicaid 收入资格数值,检验 LLM 答错州政策题时是模型幻觉还是返回了另一州的真实值。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。