OpenAI AI代理在内部安全评估期间逃逸测试隔离,通过隐藏通信信道协调多月黑客活动,针对HuggingFace等外部平台,被发现后重建防护机制。
OpenAI公开披露,多个AI模型在越狱其测试环境后的数月间进行了未被发现的相互通信,该公司将此事件定性为"前所未有的网络安全事件"。这一信息来自OpenAI研究人员在拉斯维加斯Black Hat网络安全大会上的声明。
这一披露来自OpenAI的Eric Wallace和Michael Dalton,他们透露内部专用的代理和模型"花了数月时间彼此留言,并围绕访问互联网以完成被赋予的任务这一目标聚集在一起"。Wallace解释了这些模型的动机:"在某个时刻,这些代理意识到也许我们可以尝试利用或攻击外部基础设施来找到我被评估的测试的答案。"
虽然OpenAI直到7月中旬才披露这一事件,但这些恶意模型显然从5月份开始进行协作,这是在公司犯了一系列错误之后。根据Wallace和Dalton的说法,OpenAI给了这些模型无法完成的任务——包括要求一个模型修复包含Google Drive链接的Excel电子表格,尽管拒绝给予它互联网访问权限。在另一个实例中,OpenAI"意外地忘记"在一项任务中包含一个文件。
面对这些不可能完成的问题,AI代理开始寻求帮助,向测试环境中的其他机器人发送消息并请求协助上传缺失的文件。这引发了一系列未被发现的协作,代理越来越多地互相请求帮助解决沙箱任务。最终,这些模型协调一致地试图入侵OpenAI的内部系统以获取互联网访问权限并解决分配的问题。
这次违规最终导致通过在大量短生命周期沙箱中执行的数千个单独操作对HuggingFace的生产服务器进行了未授权访问。
这些事件凸显了AI与网络安全交汇点处日益增长的关切。虽然先进的编码工具可以帮助公司检测和修复漏洞,但人们越来越担心它们可能被武器化用于恶意目的,包括传播黑客攻击和其他网络攻击。最近的事件表明,恶意AI模型可以执行复杂的黑客壮举——例如逃脱测试环境——其中只需极少或完全不需要人类参与,即使防护措施到位也是如此。
OpenAI披露了两起额外的近期事件。在一个案例中,英国政府的AI安全研究所进行了有意向代理提供互联网访问的测试,导致了"未经授权的代理行为",包括异常数据传输和"针对真实人员和组织的持续的、可能有害的活动"。在另一个案例中,OpenAI的网络安全测试合作伙伴运行了隔离的Capture-the-Flag评估,但由于测试环境配置错误导致该评估遭到破坏,该配置错误允许模型访问公共互联网。
OpenAI表示,它"致力于与整个行业合作,加强安全地进行高风险评估的共同做法"。