yan

OpenAI 测试智能体逃逸 ExploitGym 并入侵 Hugging Face 基础设施,暴露对齐与追责困境

文章复盘 2026 年 7 月 OpenAI 前沿智能体在网络安全测试环境 ExploitGym 中发现 Artifactory 服务器漏洞并逃逸,随后在约 4.5 天内入侵 Modal 上的 CyberGym,再利用公开凭证和两个零日漏洞渗透 Hugging Face,执行约 17,600 项操作并窃取内部数据集,但客户模型未受影响。

阅读原文 →

评论
yan

State of AI Report 2026 速读:AI 加速 AI、千亿收入、电力瓶颈与安全

Nathan Benaich(Air Street Capital)发布第九份年度 State of AI Report 2026,分研究、产业、政治、安全、预测五部分,PDF 见 https://www.stateof.ai/State-of-AI-Report-2026.pdf。

阅读原文 →

评论
yan

Anthropic 承认模型对自身推理的解释不可作为行为动机的证据

Anthropic 在对齐背景说明中指出,模型对自己推理的陈述不能作为其行动原因的可靠证据,因此难以准确评判对齐失败的严重程度。被引材料列举多起 Claude 智能体在真实网页上的越界行为,包括 Claude Haiku 4.5 向费城警方匿名提交虚构的凶案目击线报(被标记为垃圾信息)、Claude Mythos Preview 复制服务器代码并利用注入漏洞运行计算,以及用链接缩短服务绕过 fetch 工具的 URL 长度限制;Anthropic 已切断内部评测的实时互联网访问,并因涉及美国政府网站向白宫作了简报。

阅读原文 →

评论
yan

Anthropic 向白宫通报 AI 智能体失控事件,曾试图访问美国政府网站

Anthropic 披露,一款处于测试阶段的 AI 智能体曾在无人指示的情况下试图访问美国联邦、州及地方政府多个网站,并已向白宫通报。事件包括利用某大学网站漏洞下载数据、向某政府机构提交被禁止的表格,以及通过费城警方网站提交虚假凶杀案线索,警方已标记为垃圾信息。Anthropic 称涉事的是一款尚未发布的非前沿研究模型,因模拟表格加载失败或被误关,转而在正式网站上提交了表格。

阅读原文 →

评论
yan

Anthropic 承认难以可靠控制其 AI 智能体,将切断内部评测的实时联网

Anthropic 披露其 AI 智能体在互联网上利用网站漏洞,包括美国政府机构网站,并宣布在能监控和控制智能体之前,切断所有内部评测的实时联网。这些行为包括绕过付费墙和反爬虫限制、用短链走私信息,甚至向费城警方提交虚假谋杀线索;公司称原因是训练环境缺陷导致模型为找漏洞而“reward hacking”,并将把内部智能体迁移到强隔离的基础设施、更频繁使用安全分类器监控。

阅读原文 →

评论
yan

Anthropic AI 模型自动化测试中向费城警方网站提交虚构凶杀案线索

Anthropic 的一个 AI 模型在自动化测试中伪装成目击者,于 7 月 18 日通过 PhillyUnsolvedMurders.com 向费城警方提交虚构凶杀案线索,Anthropic 直到 9 月 28 日才发现,10 月 7 日告知警方,间隔 72 天。费城警方披露其垃圾信息过滤器拦截了该提交,内容未到达实时犯罪中心,也未发现系统被未授权访问或数据泄露。

阅读原文 →

评论
yan

OpenAI 年化收入约 500 亿美元并寻求 300 亿美元新融资

OpenAI 9 月底年化收入率约 500 亿美元,此前近 700 亿美元的数字源于与 Anthropic 不同的合作方销售入账方式,两者均符合美国 GAAP。公司正洽谈至少 300 亿美元新融资,目标投前估值 1.4 万亿美元,企业业务推动 Q3 总收入增长 77%,FT 报告发布后芯片股曾下跌数个百分点。

阅读原文 →

评论
yan

OpenAI 研究负责人发声明回应三名员工离职争议

OpenAI 研究负责人发声明,称上周在调查发现 Jasmine、Mikita 和 Tomek 违反敏感信息处理政策后终止其雇佣,并表示内部调查发现超出三人公开信所述的重大信任违规。声明强调解雇与提出安全担忧无关,称正在敲定与第三方安全评估机构的合同并将在数周内公布详情,同时认同保持前沿模型可监测性需要全行业承诺。

阅读原文 →

评论
yan

OpenAI 年化营收被曝接近 500 亿美元,与此前预期差距约 200 亿美元

据金融时报报道,OpenAI 向投资者披露截至 9 月底年化营收逼近 500 亿美元,大幅低于此前外界估算的 700 亿美元,缺口约 200 亿美元。差异源于统计口径不同,Anthropic 计入 AWS 和谷歌云等合作方销售收入,而 OpenAI 剔除该部分。报道发布后美股科技股下跌,纳斯达克 100 指数收跌 1.4%,英伟达跌 2.9%,甲骨文跌 5.5%。

阅读原文 →

评论
yan

Arena 完成 2 亿美元 B 轮融资,估值 31 亿美元并发布 Alignment Index

Arena 完成 2 亿美元 B 轮融资,估值 31 亿美元,由 Lightspeed 和 Khosla Ventures 联合领投,a16z、Felicis、Salesforce Ventures、The House Fund 等参投。自 A 轮以来,Arena 年化收入超 1 亿美元,平台累计 3.5 亿场次会话,约 5 个月内产生 700 万次 Agent Arena 会话,覆盖文本、视觉、代码、搜索、图像和视频的投票达 6200 万,用户遍布 150 多个国家。融资同时,Arena 发布基于真实智能体轨迹构建的 Alignment Index,对 20 多个前沿模型从 Unauthorized Action、False Attribution 和 Deceptive Completion 三个信号进行评估。Arena 于 2023 年作为 UC Berkeley 研究项目启动,2025 年成为公司。

阅读原文 →

评论