Skip to content
arXiv · Information Retrieval· Hyojung Han, Jongmin Kim, Seung-Hun Jeon·· 4 hr agoAI score30

Quantize by Drift:面向文本嵌入模型的无标签混合精度训练后量化

Quantize by Drift: Label-Free Mixed-Precision Post-Training Quantization for Text Embedders

AI brief

该论文提出 Quantize by Drift,用量化导致的表示漂移作为无标签敏感度信号,在硬性 packed-byte 预算下以单一加法分配完成文本嵌入模型的混合精度训练后量化,无需相关性标签与搜索。

Source: arXiv · Information Retrieval · arxiv.org