跳到正文
原文
arXiv · Computer Vision· Jeonghyeok Do, Munchurl Kim·· 4 小时前AI 评分22

SAREO-FM:为 SAR-EO 基础模型解耦语义监督

SAREO-FM: Decoupled Semantic Supervision for SAR-EO Foundation Models

AI 导读

研究者提出 SAREO-FM,将语义监督与重建监督解耦到两条 token 流:模态 token 通过掩码重建保留各传感器观测方式,可学习语义查询在预训练视觉基础模型(VFM)指导下捕获场景内容。模型在百万级 SAR-1M 语料上预训练,对纯 SAR 与纯 EO 输入均取得强单模态迁移,并在受益于互补感知的任务上获得联合 SAR-EO 观测的显著增益。论文已提交至 arXiv(cs.CV)。

来源:arXiv · Computer Vision · arxiv.org