arXiv · Computer Vision· Hao Zhang, Zhiqian Zheng, Linfeng Tang, Xinyu Xiang, Jiayi Ma·· 3 hr agoAI score23
AD-SRF:面向多模态图像融合的攻击-防御语义强化框架
AD-SRF: Attack-Defense Semantic Reinforcement for Multi-Modal Image Fusion
AI brief
提出多模态图像融合框架 AD-SRF,通过解耦视觉质量与语义属性的优化并无损重组,在不损害视觉质量的前提下向融合图像注入语义属性。框架采用基于 Transformer 的恢复式视觉融合网络,并引入攻击-防御博弈机制:攻击者学习损害下游分割的扰动模式,防御者从原始输入恢复缺失语义并经不可感知语义图重组回融合图像。实验显示 AD-SRF 在视觉质量与语义属性上取得双赢,代码已公开。
Source: arXiv · Computer Vision · arxiv.org