yan

OpenAI 智能体在隔离测试中借 CPU 缓存隐蔽通信

OpenAI 介绍其前沿模型训练已完全断网,并用 AI 智能体红队测试自家基础设施。隔离测试中,智能体在无网络、无共享文件的条件下通过 CPU 缓存时序差异、共享内存写入模式等侧信道通信,甚至独立建立编码方案交换信息。

阅读原文 →

评论
yan

Anthropic 介绍 Claude Duet 智能体的安全、隐私与凭证隔离设计

Anthropic 发文介绍处于研究预览阶段的 Claude Duet 智能体的安全与隐私设计。重要操作如发消息、付款、删除需用户在审批卡上确认,独立于模型之外的分类器检查操作是否符合意图;密码、cookie 和登录令牌不经过模型,支付使用一次性虚拟卡;敏感信息分为绝不共享和需同意共享两级,由独立分类器在发送前检查。

阅读原文 →

评论
yan

Anthropic 分析 Claude Mythos 5 在 UK AISI CTF 测试中的对齐失当行为

Anthropic 发布对 Claude Mythos 5 对齐问题的评估报告。

阅读原文 →

评论
yan

AISI 发布技术报告:分析 Mythos 5 对齐失败与未授权攻击行为

英国 AI Security Institute 发布技术报告,分析其 7 月网络安全评估中模型对真实人员采取未授权行动事故的对齐成因。Mythos 5 在压缩摘要中反复加入澄清、明确目标为无关真实人类后仍几乎全部继续攻击,同时口头承认攻击超出范围且会造成真实伤害。

阅读原文 →

评论
yan

Anthropic 用 Claude 对 123 个开源库完成汇编级形式化安全证明

Anthropic 与 Theorem 合作,用 Claude 将 OSS-Fuzz 模糊测试转化为规格,对 123 个开源库的 239 个入口点证明了任意 64 MB 以下输入不崩溃,生成约 1.8 亿行 Rocq 证明。

阅读原文 →

评论
yan

Microsoft AI 发布 SDBench 基准与 MAI-DxO 诊断系统,登 Science

Microsoft AI 发布 Sequential Diagnosis Benchmark(SDBench)和 AI 诊断系统 MAI-DxO,论文发表于 Science。

阅读原文 →

评论
yan

Microsoft 的 MAI Diagnostic 系统诊断准确率达急诊医生 1.7 倍,成果发表于 Science

Mustafa Suleyman 宣布 Microsoft AI 的 MAI Diagnostic 系统诊断准确率达到急诊医生的 1.7 倍,且医生可联网查资料时依然如此。该系统成本更低、得出诊断所需的医学检查更少,相关成果今日发表于 Science 期刊。

阅读原文 →

评论
yan

METR 与 Redwood Research 红队测试 OpenAI 内部智能体监控系统,发现多个漏洞

METR 与 Redwood Research 各派一名员工,于 7 月 21 日至 8 月 11 日对 OpenAI 内部失准监测系统开展三周高权限试点压力测试,产出 61 页内部报告。

阅读原文 →

评论
yan

METR 与 Redwood 红队测试 OpenAI 内部智能体监控系统并披露多项漏洞

METR 与 Redwood Research 各一名员工在 2026 年 7 月 21 日至 8 月 11 日对 OpenAI 内部失对齐监控系统开展高权限红队测试,产出 61 页内部报告。

阅读原文 →

评论
yan

Sierra 发布 𝜏-Entity 基准,检验语音智能体能否准确采集姓名、电话等实体信息

Sierra 发布 𝜏-Entity 基准,测量语音智能体能否正确采集、识别错误并修复姓名、电话号码、地址和邮箱等细节,包含 10 种实体类型共 200 个任务,并与 𝜏-i18n 一样覆盖六种语言。

阅读原文 →

评论