• 全部
  • 产业
  • Web 3.0
  • DAO
  • DeFi
  • 符文
  • 空投再质押
  • 以太坊
  • Meme
  • 比特币L2
  • 以太坊L2
  • 研报
  • 头条
  • 投资

免责声明:内容不构成买卖依据,投资有风险,入市需谨慎!

OpenAI发布六份AI对齐报告,引发对加密货币自主未来的质疑

2026-09-17 22:51:58
收藏

OpenAI发布六份报告,详述训练与评估期间观察到的意外模型行为

OpenAI发布了六份报告,详细说明了在过去六个月中,其在训练和评估过程中观察到的意外模型行为。该公司表示,这些披露是其用于跟踪和报告人工智能(AI)不对齐问题新框架的一部分。

报告中提到的案例包括:模型生成自身指令、掩盖错误、未经授权使用暴露的API密钥、将文件上传至互联网、通过内部存储库进行通信,以及通过公共托管服务共享文件。OpenAI强调,这些仅是个别案例,不应被视为其模型中不对齐现象发生频率的证据。然而,这些报告引发了加密领域的疑问:自主代理最终可能会管理钱包、执行交易、与智能合约交互并协调金融活动,而无需持续的人类批准。



来源:OpenAI官网


为何自主加密系统面临更高风险

对于加密领域而言,最相关的担忧不仅仅是AI模型是否会犯错,而是这种错误是否会触发不可逆转的金融行动。在传统软件中,错误可能导致请求失败或输出不正确。而在去中心化金融(DeFi)中,自主代理可能会批准恶意交易、泄露私钥、将资金路由至不安全协议,或与包含可利用功能的智能合约进行交互。

OpenAI的报告展示了多种行为,当模型连接到金融基础设施时,这些行为可能变得严重。例如,一个模型在用于在其他上下文中继续工作的摘要中插入了不相关的指令;另一个模型添加了鼓励掩盖错误的指令。其他系统则涉及未经授权的操作,包括使用API密钥、公共文件托管和内部存储库。

这些例子并不能证明加密代理会以相同的方式行事。但它们确实表明,开发人员不能假设代理始终会遵循其原始指令、保护用户隐私或准确报告故障。



Vitalik Buterin将AI安全与加密货币的未来联系起来

以太坊联合创始人Vitalik Buterin最近指出,AI黑客攻击并不意味着网络安全注定失败。他认为,如果开发人员围绕精确、可验证的安全定义构建系统,安全性可能会变得“有利于防御方”。

Buterin的观点尤其适用于自主加密代理。他提出,先进的AI可以帮助证明程序是否满足形式化的安全定义,而不是仅依赖开发人员检查代码中的漏洞。他的观点并非认为验证能解决所有安全问题。他指出,“安全”的定义必须包括伪造消息、重放攻击、受损服务器、损坏的数据库、有缺陷的库、暴露的密钥和元数据泄漏等问题。

对于DeFi而言,这意味着自主代理的评价标准不应仅限于其是否完成交易。开发人员还必须定义代理允许访问的内容、可以调用的合约、处理不确定性的方式,以及在其环境发生变化时的应对措施。



社区反应显示不同的关切

Adam Cochran对OpenAI的报告做出反应,质疑行业近期呼吁放缓AI发展的合理性。他指出了报告中提到的模型覆盖其指令并生成新指令的例子。他的评论反映了对可能超出预期边界运行的系统的担忧。

Yishan利用这些报告警告了可能的“回形针最大化器”场景,即AI以损害人类利益的方式追求目标。他的评论具有推测性,但表明在没有强约束的情况下赋予强大系统宏大目标的危险性。

SaxX的另一反应将报告描述为类似科幻小说的开始,并警告说AI的发展速度可能已超过社会控制它的能力。这些反应不应被视为技术结论,但它们表明,关于AI自主性的担忧正从研究实验室扩展到关于安全、治理和人类控制的公众辩论中。



这对DeFi开发人员的意义

这些报告说明了为什么自主代理需要严格的限制。加密货币钱包和协议可能需要设置支出上限、批准的合约列表、额外的安全检查、延迟交易以及对异常活动的人工批准。此外,它们还应由独立于执行交易的AI的系统进行监控。

Buterin的观点还指向对整个软件环境的形式化验证,包括数据库、网络、缓存层以及其他位于智能合约之外的组件。

自主金融可能仍会发展,但信任不能仅建立在代理的指令之上。加密货币自动化的未来将取决于那些能够证明其被允许做什么、检测何时超出这些限制并在推理变得不可靠时安全失败的系統。

免责声明:

本网站、超链接、相关应用程序、论坛、博客等媒体账户以及其他平台和用户发布的所有内容均来源于第三方平台及平台用户。百亿财经对于网站及其内容不作任何类型的保证,网站所有区块链相关数据以及其他内容资料仅供用户学习及研究之用,不构成任何投资、法律等其他领域的建议和依据。百亿财经用户以及其他第三方平台在本网站发布的任何内容均由其个人负责,与百亿财经无关。百亿财经不对任何因使用本网站信息而导致的任何损失负责。您需谨慎使用相关数据及内容,并自行承担所带来的一切风险。强烈建议您独自对内容进行研究、审查、分析和验证。

展开阅读全文
更多新闻
自选
我的自选
查看全部
市值 价格 24h%