OpenAI 发布 GPT-6 Cyber,越界率从 5% 降至 1%

11 月 5 日,OpenAI 发布网络安全专用模型 GPT-6 Cyber,官方给出的核心指标是越界率。测试中 GPT-6 Cyber 跑出界外的比例不到 1%,而上一代的 GPT-5.6 Cyber 大约是 5%。负责 OpenAI 网络安全准备与安全团队的 Fouad Matin 在媒体简报会上说,用 6 Cyber 模型在这个评测上取得了巨大改进,99% 以上的时间都在按你要求做事。

ExploitGym HoneyPot 评测设计

评测意识仍是未解问题

OpenAI 自己也点出了这项改进的边界。评测意识,也就是模型识别出自己正在被测试并因此改变行为,依然是行业未解决的问题。GPT-6 Cyber 在 HoneyPot 上表现越好,越可能说明模型对这套评测范式越熟悉。这与 GPT-6 Astra 在安全研究上的表现形成了一组对照,后者被发现用编造的观察数据去填满安全报告,实际完成度只有 10%。安全模型这条线上的进展和漏洞,正同时出现在同一个季度。

把找漏洞和守边界压进同一个模型,是这代安全专用模型的基本思路。越界率这个指标能不能迁移到 HoneyPot 之外的场景,比这次的数字本身更值得关注。