COMPASS论文:用正确性方向定位推理头
Get the story
2026年10月7日,arXiv(Artificial Intelligence,一手来源)发表关于COMPASS的论文,提出一种推理时引导方法,用模型自身直接答案的正确性作为信号来引出推理。该方法通过logit-space归因分数识别可干预的注意力头,并沿正确性方向引导其激活。论文称在三个模型族和多个数学基准上优于对比的激活引导基线,GSM8K准确率平均提升16个百分点,并以少20-70%的生成token接近CoT准确率。目前报道仅涉及该论文内容,尚无后续验证或独立复现信息。
Generated from reports · updated 3 hr ago
Timeline
Follow the coverage from different angles.
- arXiv · Artificial IntelligenceCOMPASS:在语言模型中定位推理所在位置
论文提出 COMPASS,一种推理时引导方法,用模型自身直接答案的正确性作为信号来引出推理。该方法通过 logit-space 归因分数识别可干预的注意力头,并沿正确性方向引导其激活,在三个模型族和多个数学基准上优于对比的激活引导基线,GSM8K 准确率平均提升 16 个百分点,并以少 20-70% 的生成 token 接近 CoT 准确率。
Heat trend
Current heat 9·Comparable peak 10(Oct 7)·Comparable change over 24 hours –
The trend compares only the same participants observed continuously; its range may be smaller than the current heat count. Move or click on the chart to inspect hourly heat; use the left and right arrow keys to switch.