拿了菲尔兹奖还预警 AI 会导致人类灭绝
数学界的最高奖项菲尔兹奖得主 Jacob Tsimerman 离开多伦多大学去 OpenAI 做 AI 安全研究这件事挺有意思的。最戏剧的地方在于,这位顶级数学家在之前的论文里专门分析过 AI 可能导致人类灭绝的各种场景,并且强烈主张得在安全研究上投入更多资源。
这种“一边预警危机,一边入职危机源头”的操作在顶尖学术圈其实很常见,但也侧面说明了现在的 AI 安全研究已经从纯粹的理论探讨转向了工程实操。对于一个数学家来说,AI 的不可解释性和潜在的失控风险可能在逻辑推演上是非常直观的,而 OpenAI 这种拥有最强算力资源的地方,反而是验证这些风险、寻找数学解法的最佳战场。
如果从技术路径来看,像 Tsimerman 这种量级的数学家加入,大概率是为了给大模型的对齐(Alignment)寻找更严谨的数学证明,而不是简单的提示词工程。目前的 AI 安全很多时候靠的是经验主义的微调,如果能引入更硬核的数学框架来界定安全边界,或许能真正解决模型在极端情况下的不可预测性。
当然,一个人进去能不能改变一家商业公司的优先级还两说,但至少说明 OpenAI 在试图用最顶级的数学大脑来给自己的模型“上锁”。比起那些泛泛而谈的安全口号,这种实打实的学术迁移更有看点。
事件追踪 · 相关报道
把 AI 实验室的权力推到和政府相当的程度
30分钟前
直接让 ChatGPT 模仿某个具体作家的文风现在开始变难了
16小时前
OpenAI 居然因为安全问题给 Astra 踩刹车了
23小时前
OpenAI 竟然用黑客在讨论区商量怎么攻击的聊天记录来训练模型
1天前
OpenAI 把 Hugging Face 给“打”宕机了
1天前
OpenAI 那个没屏幕的音箱要卖 300 刀,真有人买吗
1天前
