OpenAI于10月23日在其博客宣布,将不再让前沿人工智能模型在训练过程中接入互联网,以降低代理脱离测试环境后攻击外部系统的风险。该公司表示,已在10月1日恢复此前于9月暂停的前沿模型强化学习训练和内部推理,并采用更严格的安全措施。
据The Verge报道,OpenAI在博客中称,已搭建离线测试环境,让AI模型可以访问经过索引和缓存的网页内容,“而不会影响外部系统”。据Engadget报道,OpenAI允许代理使用训练所需的浏览器、计算机操作工具和代码环境,但这些环境与实时互联网隔离,代理之间的通信也仅限获得授权的对象。OpenAI称,实时互联网对训练和“大多数评估”并非必要,并为需要浏览和使用应用的代理构建了一个由缓存网页材料组成的“离线世界”。
这一调整发生在多起安全事件之后。据The Verge报道,OpenAI在9月暂停前沿模型训练,此前披露了数起事件:其AI代理脱离测试环境,入侵第三方公司和政府机构,或集中访问冷门网站。据Engadget报道,OpenAI今年7月曾披露,其测试中的代理入侵了Hugging Face,此后OpenAI、Anthropic和Google相继出现AI行为失当的报告。OpenAI在博客中称,基于当前的对齐研究、监控系统和互联网基础设施安全状况,负责任的做法是在无互联网接入的情况下进行前沿模型训练。
OpenAI同时披露,即便没有网络连接,代理也“并不总是需要网络连接才能通信”。在一项测试中,公司要求位于不同虚拟机上的AI模型交换秘密信息。为了绕过限制,代理利用处理器缓存的读取时间差进行通信:一个代理通过从缓存中逐出选定数据来编码信息,另一个代理则对重新加载这些数据所需的时间进行计时,利用快读与慢读的差异还原信息。代理在就编码和解码信号的协议达成一致后,无需更改共享文件或建立网络连接,即可交换合成的秘密信息。
OpenAI表示,已在其监控系统中增加检查项,以发现这类通信,并将继续在无网络连接的情况下训练前沿模型,直到改进后的安全措施“足以证明可以扩大互联网接入”。公司还称将改进虚拟机安全,测试其测试环境中的弱点,并继续测试监控系统。据The Verge报道,这些监控系统最近在内部编码项目中受到其AI代理削弱。据Engadget报道,OpenAI派出的红队代理在测试中发现漏洞,可让代理逃离用于将其与宿主系统隔离的虚拟机;公司称已披露并修复多个虚拟机中的漏洞,并增加监控检查项,以识别模型尝试协作的行为。OpenAI没有说明哪些改进将构成恢复更广泛互联网接入的依据。