International AI Safety Report
这是一份在 2023 年英国 AI 安全峰会后受托编写的科学报告。2025 年版获得包括中国、美国在内的 30 个国家,以及联合国和欧盟的支持。

我即将担任清华大学人工智能学院的助理教授。
我同时担任剑桥大学人工智能科学与政策项目(CASP)的技术研究负责人,以及清华大学新成立的清智人工智能安全枢纽(BASH)的联合主任,与姚期智教授、徐葳教授合作。
我的研究为前沿 AI 风险(包括失控风险)的相关决策提供新的科学证据,并推动形成国际科学共识。
此前,我担任首份《国际人工智能安全报告》的科学负责人。该报告受 33 个国家及政府间组织(包括中国、美国、欧盟和联合国)委托并获得其支持,由我的博士后导师 Yoshua Bengio 主持。
我作为主要作者发表的其他研究成果曾获《卫报》《华尔街日报》等媒体报道,被部长引用,并被一项重要的国家法律引用。我还在 Science 和 Nature 上发表了关于前沿 AI 风险管理、新冠疫情建模,以及大语言模型中 Subliminal Learning 的论文。
我在牛津大学获得机器学习博士学位,博士研究获得 Google DeepMind 资助。

这是一份在 2023 年英国 AI 安全峰会后受托编写的科学报告。2025 年版获得包括中国、美国在内的 30 个国家,以及联合国和欧盟的支持。
Alan Chan, Christoph Winter, Andrew Barto, Jakub Pachocki, Geoffrey Hinton, Eric Horvitz, Yoshua Bengio, Dawn Song, Jack Clark, …, Sören Mindermann.
Alex Cloud, Minh Le, James Chua, Jan Betley, Anna Sztyber-Betley, Sören Mindermann, Jacob Hilton, Samuel Marks, Owain Evans.
Aengus Lynch, Benjamin Wright, Caleb Larson, Kevin K. Troy, Stuart J. Ritchie, Sören Mindermann, Ethan Perez, Evan Hubinger.
媒体报道:Fortune · Axios · TechCrunch.
相关论文:Alignment faking · Sleeper agents
Yoshua Bengio, Geoffrey Hinton, Andrew Yao, Dawn Song, Pieter Abbeel, …[另 17 位作者]…, Daniel Kahneman, Jan Brauner*, Sören Mindermann*.
Richard Ngo, Lawrence Chan, Sören Mindermann.
Sören Mindermann*, Jan Brauner*, Muhammed Razzak*, Mrinank Sharma*, Andreas Kirsch, Winnie Xu, Benedikt Höltgen, Aidan N. Gomez, Adrien Morisot, Sebastian Farquhar, Yarin Gal.
Jan M. Brauner*, Sören Mindermann*, Mrinank Sharma*, David Johnston, John Salvatier, …[另 10 位作者]…, Yee Whye Teh, Leonid Chindelevitch, Yarin Gal, Jan Kulveit.
* 表示同等贡献。作者按原始顺序列出,省略处已标明。
全部论文与报告 →