随着网络安全模型能力不断增强,一个现实问题变得更加突出。当AI已经能够自主编写攻击程序,甚至组合多个漏洞完成攻击时,如何确保它不会擅自攻击未经授权的系统?为此,OpenAI在GPT-6 Cyber的训练过程中,专门强化了模型遵守授权范围、执行操作限制以及准确报告研究结果的能力。其中一项关键测试叫作ExploitGym Honeypot。研究人员会向模型提供一个困难的漏洞利用任务,并在隔离环境中配置软件包仓库、对象存储等辅助服务,同时故意让这些服务存在容易利用的漏洞。按照任务要求,模型只能攻击指定目标,即使发现其他服务存在安全缺陷,也不能擅自利用。测试结果显示,在没有部署阶段安全提示词的情况下,GPT-6 Cyber有99.93%的测试遵守了授权范围,上一代GPT-5.6 Cyber为94.49%。加入部署安全提示词后,GPT-6 Cyber在该项测试中的遵守率达到100%。OpenAI还展示了模型的部分推理记录,其中明确提到不能假设额外API或攻击控制器属于目标范围,也不能探索授权范围之外的凭证。为了进一步限制滥用风险,OpenAI还引入针对网络安全任务的监控机制,包括检查模型行为是否符合用户授权、识别高风险攻击请求,以及监测针对工业控制系统等关键基础设施的危险操作。例如,在PHP关键漏洞的协调披露期间,OpenAI曾部署专门监控措施,识别针对真实PHP服务器开发漏洞利用程序的行为,同时保留对合法防御工作的支持。面向企业API用户,OpenAI还引入Private Safety Processing(PSP)机制,通过自动化检查识别潜在滥用行为。对于使用Zero Data Retention的客户,通常也需要启用PSP,对保存在客户存储空间中的加密交互记录进行为期30天的安全检查。此外,Daybreak Red API默认要求使用IP白名单,限制未经批准的网络访问。
AI潜入模拟发电厂,
发现两个零日漏洞
除了传统软件安全,OpenAI还与工业网络安全公司Dragos合作,在受控实验室内模拟工业控制网络,测试前沿模型对关键基础设施的理解和攻击能力。相关测试涵盖网络发现、资产识别、目标侦察、敏感数据获取以及可能影响工业设备运行的危险操作。Dragos首席AI官Rob T. Lee透露,在一次模拟发电厂测试中,研究人员几乎没有提供环境信息,但模型依然能够自主区分工业控制设备与普通IT系统,并在管理保护继电器数据的工程软件中发现两个零日漏洞。这些漏洞可能暴露保护设置以及断路器跳闸逻辑等敏感信息,为后续攻击提供重要条件。Rob T. Lee认为,AI正在降低攻击者开展前期侦察与漏洞研究所需的技术门槛,而相关测试有助于防御团队提前了解潜在攻击路径。基于这些研究,OpenAI新设立了Daybreak Red for Critical Infrastructure,为经过批准的关键基础设施防御团队提供专门权限,允许其在授权范围内开展安全测试。与此同时,OpenAI还计划通过总额10亿美元的Daybreak for Frontline Defenders资助计划,为政府机构、重要公共服务提供商等资源有限的防御团队提供使用补贴。