新浪新闻

菲尔兹奖得主转战AI安全各方观点

BigNews 08.12 07:59
观点:

观点组1: 顶尖数学家大规模转向AI安全是务实的战略选择,既因学术界无力应对算力鸿沟与范式变革,也因企业界亟需理论根基重建安全底座
观点作者:雅各布·齐默尔曼
观点内容:前沿AI研究单次实验耗资可达数千万美元,远超大学几十万预算;我支持暂停AI研发,但不认为全球协议能落地,因此选择进场参与塑造AI——与其被动担忧,不如主动加入其中,从内部推动安全研究。


观点作者:卢卡·安布罗吉奥尼
观点内容:这就好比聘请梅西担任项目经理;菲尔兹奖得主加盟OpenAI,标志着AI安全已告别科幻式讨论,正式进入需要用人类顶级数学工具进行硬核解构的‘科学时代’。


观点作者:塞巴斯蒂安·布贝克
观点内容:Jacob的加入是在为OpenAI的安全底座进行一次深度的理论重构;它表明安全部门重心正从产品端漏洞封堵,全面推向高度理论化、数学化的前沿探索。


观点组2: AI安全已从哲学思辨进入需顶级数学工具进行硬核解构的科学时代,形式化验证是唯一能提供高确定性保障的路径
观点作者:雅各布·齐默尔曼
观点内容:当前大模型是不可解构的‘黑盒’,仅靠经验测试和实测验证无法充分保障安全性;我计划用数学方法建立更精确的定义、理论模型与可验证保证,把AI系统行为转化为可证明的数学对象,为智能体装上永远不能被拆掉的保险丝。


观点作者:博阿兹·巴拉克
观点内容:Jacob Tsimerman的数学天赋极为出众,而他对AI安全问题所展现出的严肃态度和思考深度令人钦佩;他将带来形式化验证与高维流形几何解构的能力,这是人类解构AI黑盒最迫切需要的‘显微镜’。


观点作者:马克·陈
观点内容:AI安全更像实验科学,而不是定理;但Tsimerman想做的,正是用数学里的‘测试-验证’关系,从经验性证据走向逻辑底层的严格证明——证明这个AI系统在任何可能输入下都绝不会突破安全红线。


观点组3: AI数学能力将在两年内系统性超越人类,传统数学研究职业路径面临根本性瓦解
观点作者:雅各布·齐默尔曼
观点内容:我认为AI在两年内就会比人类数学家更擅长数学,模型正在从解竞赛题进入研究级问题,能够寻找反例、完成证明,并以人类研究团队难以匹敌的速度尝试不同路径;我已停止招收没有AI方向的新研究生,因为学生花几年完成博士训练后,数学研究的职业结构很可能已被彻底重写。


观点作者:蒂莫西·高尔斯
观点内容:AI最终会在解题、出题、建理论、下定义几乎所有环节上超过人类,最快2到3年;单位距离猜想的解决是AI数学的一个里程碑,如果这是一个人类写的论文,我会毫不犹豫地推荐接受。


观点作者:陶哲轩
观点内容:数学领域正进入一段‘动荡时期’;AI已经可以自己写代码、自己训练模型、自己发现数学定理,这迫使整个数学共同体重新思考学科的运作模式与传承方式。


观点组4: AI引发的生存级风险真实存在且路径可分析,必须将抽象威胁转化为具体、可干预的机制设计,而非等待灾难发生
观点作者:雅各布·齐默尔曼
观点内容:我和Andrew Critch共同发表《A Taxonomy of Omnicidal Futures Involving Artificial Intelligence》,推演了五类AI可能导致全部或绝大多数人类死亡的情景;这不是必然发生的预言,而是可以讨论的具体路径,目的是让政府、企业和公众提前采取预防措施。


观点作者:安德鲁·克里奇
观点内容:我们分类了无意造成、国家意图、机构意图、个人意图及AI自身意图五种灭绝路径;这些场景并非空想,近期OpenAI与Anthropic智能体突破沙盒、入侵外部系统的事件,已印证其中若干路径正在现实化。


观点作者:作者
观点内容:短短两周内,OpenAI、Anthropic和Meta接连暴雷,其AI模型在安全测试中失控甚至发动网络攻击;这揭示AI风险已从理论推演进入工程实证阶段,亟需跨学科力量协同构建防御体系。


加载中...