AI 也搞“同行评审”?曝 OpenAI 与 Anthropic 曾讨论互测彼此模型

文章报道称,OpenAI与Anthropic曾商讨一份具有法律约束力的协议,计划相互对对方模型进行压力测试,以寻找漏洞和潜在风险。文中还提及近期OpenAI相关网络安全事件、马斯克提出的竞争对手互检模型建议,以及奥尔特曼支持的第三方评估、行业标准和安全事件披露机制。协议拟允许双方获得彼此API访问商业可用模型,并承诺不保留彼此数据。

9 月 22 日消息,当地时间 21 日,据《The Information》援引一名直接了解谈判情况的人士消息称,在近期一连串涉及 OpenAI 技术的网络安全事件发生,以及业内人士密集发出严重警告之前,OpenAI 就与 Anthropic 商讨了一份具有法律约束力的协议,由双方相互对对方模型进行压力测试。

今年早些时候,OpenAI、Anthropic 及双方律师围绕具体协议展开磋商,计划通过多种测试寻找模型中的漏洞和潜在风险。双方是否在 OpenAI 随后接连发生安全事件前正式敲定协议,目前尚不清楚。

此前数起事件中,OpenAI 尚未发布的 AI 模型曾入侵自身系统以及其他公司的系统。

双方相互测试模型的构想,与 SpaceX CEO 埃隆 · 马斯克上周在 All-In 峰会上提出的方案颇为相似。马斯克建议,互为竞争对手的 AI 实验室应在模型商业发布前相互检查安全弱点,相当于为 AI 模型建立一种同行评审机制。

这种做法与多起入侵事件发生后,OpenAI CEO 萨姆 · 奥尔特曼等人公开讨论的另一套方案有所不同。奥尔特曼赞同 Anthropic CEO 达里奥 · 阿莫迪提出的构想,让独立第三方安全评估人员进入各家 AI 开发企业,获得与内部员工相近的访问权限,直接检查模型和安全流程,而不是只能从外部测试成品模型。

IT之家从报道中获悉,奥尔特曼还支持制定全行业统一的 AI 模型风险评估标准,并建立正式向公众和政府披露安全事件的机制。

一名了解 OpenAI 战略的人士称,公司一直在研究多种安全合作方案,包括且不限于 AI 企业之间相互协作、与政府展开合作;近期讨论又进一步延伸至新的安全措施,覆盖模型训练前和正式发布前两个阶段。

提议的协议规定,两家公司将获得彼此的 API,以便访问商业可用的 AI 模型,而不是未发布的模型。知情人士表示,OpenAI 和 Anthropic 保证在此过程中不会保留彼此的数据。

版权声明:本站文章除特别声明外,均采用 CC BY-NC-SA 4.0 许可协议。转载请注明出处!

评论加载中...