arXiv · Computation and Language· Aarav Singh, Animesh Pathak, Navyansh Singh·· 16 小时前AI 评分25
ZebraMap 罕见病诊断中的回溯引导式推理蒸馏
Hindsight-Guided Rationale Distillation for Rare Disease Diagnosis
AI 导读
研究在 ZebraMap 上用 8B 教师模型生成链式推理并蒸馏微调 1.5B 学生模型，教师生成时可见真实诊断标签。过滤后的 StudentF 相对教师取得统计显著的准确率优势（p < 0.001），未过滤学生则未显著超越教师（p = 0.129），增益来自污染过滤而非回溯蒸馏本身。
来源：arXiv · Computation and Language · arxiv.org