Anthropic 推 AI 安全法案:50 人死亡或 10 亿美元损失即可叫停模型发布

10 月 20 日 Politico 报道,Anthropic 正在向国会推销一份由自己起草的 AI 安全法案草案,希望政府考虑采纳。草案最核心的部分,是设定了几种一旦出现就可能阻止模型发布的场景。

50 人和 10 亿美元

草案把这类情形定义为可预见的迫近风险:超过 50 人面临死亡风险,或者可能造成超过 10 亿美元财产损失。风险本身必须源于生物武器的创建或释放、模型规避开发者控制,或者一次网络攻击。这两个指标与加州参议院第 53 号法案的定义接近,该法案近期已经通过并生效,同样把上述情形定性为灾难性风险。

谁来判定灾难性

草案认为模型潜在灾难的判定可以通过独立评估者完成,这些评估者需要在美国商务部注册,并且可能由 AI 实验室自己付费。实验室出钱、实验室的模型被评估、评估结论还能直接阻断发布,这条链路上的利益结构正是外界争议的焦点。草案还给出与加州法案一致的门槛定义,等于把两家头部实验室的诉求写进了同一套语言。

主动立法还是被动防守

Anthropic 一贯主张前沿模型的安全评估需要制度化出口,该实验室向美国国会递交 AI 监管法案的版本此前已在站内梳理过。这次把 50 人和 10 亿美元写进具体门槛,意味着行业头部公司正试图把安全讨论的节奏掌握在自己手里。