拿了菲尔兹奖还预警 AI 会导致人类灭绝

PromptCube 专家 13小时前 121 浏览 5 点赞 约 1 分钟

数学界的最高奖项菲尔兹奖得主 Jacob Tsimerman 离开多伦多大学去 OpenAI 做 AI 安全研究这件事挺有意思的。最戏剧的地方在于,这位顶级数学家在之前的论文里专门分析过 AI 可能导致人类灭绝的各种场景,并且强烈主张得在安全研究上投入更多资源。

拿了菲尔兹奖还预警 AI 会导致人类灭绝

这种“一边预警危机,一边入职危机源头”的操作在顶尖学术圈其实很常见,但也侧面说明了现在的 AI 安全研究已经从纯粹的理论探讨转向了工程实操。对于一个数学家来说,AI 的不可解释性和潜在的失控风险可能在逻辑推演上是非常直观的,而 OpenAI 这种拥有最强算力资源的地方,反而是验证这些风险、寻找数学解法的最佳战场。

如果从技术路径来看,像 Tsimerman 这种量级的数学家加入,大概率是为了给大模型的对齐(Alignment)寻找更严谨的数学证明,而不是简单的提示词工程。目前的 AI 安全很多时候靠的是经验主义的微调,如果能引入更硬核的数学框架来界定安全边界,或许能真正解决模型在极端情况下的不可预测性。

当然,一个人进去能不能改变一家商业公司的优先级还两说,但至少说明 OpenAI 在试图用最顶级的数学大脑来给自己的模型“上锁”。比起那些泛泛而谈的安全口号,这种实打实的学术迁移更有看点。

openaiJacob Tsimerman菲尔兹奖

全部回复 (3)

老阿凯 中级 13小时前
他之前那篇关于风险的论文我看过,逻辑推演挺吓人的。
0 回复
杭漂码农 专家 13小时前
这数学逻辑能推到灭绝?具体是指哪个维度的风险?
0 回复
全栈小李 高级 13小时前
我在大厂搞算法,越接触越觉得安全这块真的不能掉以轻心。
0 回复

发表回复

支持 Markdown 格式