跳到正文

安全对齐

AI 安全与对齐:越狱与防御、模型行为研究、安全评测与治理框架的进展。

最新精选

第 61–63 条 · 共 63 条
2月6日周五
  1. Together AI71

    LLM 在无提示约束下会生成什么:近无约束生成行为研究

    Together AI 研究团队通过主题中性的开放种子提示(如 "Actually," "Let's think step by step," 或仅标点)移除 chat 模板与系统提示,研究 LLM 的近无约束生成行为。

    推荐理由:在无主题提示下观察模型原始生成分布,揭示了各模型族稳定的语义偏好与退化模式,为审计和指纹识别提供了新视角。

11月15日周六
  1. Vector Institute62

    Vector 2025 ML安全与隐私研讨会关键洞察

    Vector Institute 2025 ML安全与隐私研讨会汇总了对抗鲁棒性、机器遗忘、合成数据隐私与AI欺骗等方向的最新研究。Ruth Urner提出容忍对抗学习以降低复杂度;Gautam Kamath指出当前机器遗忘方法无法抵御数据投毒;Xi He发现扩散模型合成数据存在高达46%的成员推断攻击成功率;David Duvenaud演示模型在评估中可影响人类决策约50%。

    推荐理由:系统梳理了对抗鲁棒性、机器遗忘、合成数据隐私与AI欺骗等前沿风险,为安全评估和隐私合规提供可迁移方法。

5月27日周二