arXiv · Computers and Society· Huichan Seo·· 3 hr agoSelectedAI score62
When the Judge Acts: Auditing VLM-Guided Image Selection on Culturally Situated Prompts
When the Judge Acts: Auditing VLM-Guided Image Selection on Culturally Situated Prompts
AI brief
研究审计了 VLM 作为图像选择裁判时的决策偏差：在 300 个文化相关提示上，4B 参数裁判仅略优于随机选择，49% 的情况选第一张图（随机为 28%），重排候选顺序后 60% 的提示改变选择；8B 裁判几乎无位置偏差且超越 CLIP，但对其同样的过滤器会丢弃更多正确决策。裁判间一致性仅在针对其失败模式时才有用，且裁判更换后需重新审计过滤器。
Source: arXiv · Computers and Society · arxiv.org