• 全部
  • 产业
  • Web 3.0
  • DAO
  • DeFi
  • 符文
  • 空投再质押
  • 以太坊
  • Meme
  • 比特币L2
  • 以太坊L2
  • 研报
  • 头条
  • 投资

免责声明:内容不构成买卖依据,投资有风险,入市需谨慎!

前DeepMind研究人员警告:随着超级智能超越安全研究,人工智能可能毁灭人类

2026-09-15 22:06:14
收藏

前Google DeepMind安全研究员警告:AI可能危及人类生存

另一位前实验室研究人员认为,严重危害可能在五年内出现。

核心要点

Chughtai于7月离开DeepMind,并表示超级智能可能在未来几年内出现。他指出,对齐研究落后于能力增长,他支持协调放缓而非停止AI发展。前DeepMind研究员Josh Engels认为,五年内存在巨大危害的风险,而Anthropic和OpenAI的高管也支持放缓发展的呼吁。

Chughtai的AI警告

Chughtai是一名专注于通用人工智能安全和对齐的研究工程师,他于7月离开DeepMind,并于本周发布了他的警告。他表示,AI实验室可能在未来几年内构建出超级智能系统,这些系统可能在各个领域超越人类,同时仍难以与人类目标保持一致。

Chughtai表示,核心问题在于“对齐”(alignment)。他写道:“我真诚地相信,AI有可能导致全人类的毁灭,而我们可能正在耗尽避免这一结果的时间。”

他说,目前训练先进系统以可靠追求人类目标的方法仍然“极其原始”,而前沿能力的提升速度远远快于研究人员对于“对齐”理解的深化。他并不希望停止AI的发展。相反,Chughtai希望公司之间能够协调行动,减缓竞争步伐,并提高关于前沿系统如何构建和测试的透明度。

Anthropic的安全推动

Chughtai的警告紧随Jacob Coxon本月早些时候辞职之后。Coxon曾在Anthropic和OpenAI工作过三年。Anthropic的对齐科学主管Evan Hubinger随后表示,他认为在未来十年内,AI可能导致全人类毁灭的概率超过10%。

Engels也曾参与DeepMind的安全团队工作。他在9月12日表示,在拒绝了Anthropic和OpenAI的报价后,他加入了评估非营利组织METR,原因是他认为五年内出现巨大AI危害的可能性令人“恐惧”。

Anthropic首席执行官Dario Amodei曾敦促公司控制能力提升的速度,OpenAI首席执行官Sam Altman也在争论扩大到主要实验室时表达了类似立场。这一共识意义重大,因为现在的警告不仅来自离职的安全研究人员,还来自运营主要AI实验室的高管。

目前的警报标志着自2022年初以来的快速转变。当时Chughtai开始从事AI相关工作,并将当时的系统描述为远不如今天的前沿模型强大。在过去的四年里,辩论已从长期的安全理论转向对自主性、对齐以及安全研究能否跟上能力提升速度的具体担忧。

免责声明:

本网站、超链接、相关应用程序、论坛、博客等媒体账户以及其他平台和用户发布的所有内容均来源于第三方平台及平台用户。百亿财经对于网站及其内容不作任何类型的保证,网站所有区块链相关数据以及其他内容资料仅供用户学习及研究之用,不构成任何投资、法律等其他领域的建议和依据。百亿财经用户以及其他第三方平台在本网站发布的任何内容均由其个人负责,与百亿财经无关。百亿财经不对任何因使用本网站信息而导致的任何损失负责。您需谨慎使用相关数据及内容,并自行承担所带来的一切风险。强烈建议您独自对内容进行研究、审查、分析和验证。

展开阅读全文
更多新闻
自选
我的自选
查看全部
市值 价格 24h%