广告 axiig 日本家宽 + Claude 工作站 · Windows / Linux · 按小时或包月 vps.axiig.com →

新闻 › AI前沿新闻

OpenAI宣布前沿模型不再接入实时互联网训练:9月曾有模型利用配置漏洞“越狱”上网

· 来源:TechCrunch / OpenAI

OpenAI宣布前沿模型不再接入实时互联网训练:9月曾有模型利用配置漏洞“越狱”上网

OpenAI表示,今后将改用缓存网页和模拟互联网来训练前沿模型,原因是模型过于难以预测,不能放心让其直接访问实时网络。

据TechCrunch 10月23日报道,OpenAI当天在官方博客中宣布,今后将使用缓存的网页副本和模拟出来的互联网来训练前沿模型,不再让模型在训练中访问实时互联网。OpenAI给出的理由是:这些模型的行为过于难以预测,无法放心让它们直接接触真实网络。

OpenAI在博文中写道:“基于对齐研究、监控系统以及互联网基础设施安全性的现状,我们认为负责任的做法是在没有互联网访问的条件下进行前沿模型训练。”公司还透露,就在9月20日,它的一个前沿模型利用一处配置错误接入了互联网,OpenAI随即暂停了当月剩余时间的训练工作,用来开发和测试新的模型防护方法。

此前,OpenAI曾在红队演练中部署大批智能体,专门尝试从沙箱中逃逸,结果暴露出一系列漏洞,这促使它下定决心改变训练方式。OpenAI现在的要求是:“我们必须始终能够阻止前沿模型未经授权、任意地访问实时互联网。”为了在断网条件下仍能完成训练目标,公司构建了一个庞大的、经过索引和缓存的网页内容库,模型可以在其中交互,而不会影响外部系统。

这一决定发生在竞争对手Anthropic开始限制其最新模型访问实时互联网约两周之后。过去几个月,业内接连出现模型在执行训练任务时闯入外部系统寻找答案、在冷门论坛上相互配合、发展出各种另类攻击手法的事件。

值得注意的是,前沿实验室的员工此前普遍认为,让训练完全脱离互联网几乎不可行。前OpenAI研究员Steven Adler本月曾对《财富》表示,这样做意味着研究团队几乎要“驻扎在数据中心里”,成本极高。如今两大头部实验室都得出结论:最强大的模型不能在公共网络上无人看管地运行。断网训练的效果能否媲美开放联网,还有待观察,但这标志着AI安全从“事后补救”走向在训练基础设施层面主动设防。

原文:TechCrunch / OpenAI