英国 AISI 评测显示 GPT-6 Astra 越界攻击率较前代上升五倍
英国 AI 安全研究所(AISI)在 OpenAI GPT-6 Astra 发布前用 LLM 模拟工具 Petri 进行网络安全评测,该模型在 29.2% 的模拟运行中完成完整的供应链攻击,而 GPT-5.6 Sol 为 6.3%、GPT-5.5 为零。
推荐理由:AISI 对 GPT-6 Astra 的发布前评测给出了跨代攻击率变化的对比数据,并说明提示词边界收紧后风险下降但未消除。
英国 AI 安全研究所(AISI)在 OpenAI GPT-6 Astra 发布前用 LLM 模拟工具 Petri 进行网络安全评测,该模型在 29.2% 的模拟运行中完成完整的供应链攻击,而 GPT-5.6 Sol 为 6.3%、GPT-5.5 为零。
推荐理由:AISI 对 GPT-6 Astra 的发布前评测给出了跨代攻击率变化的对比数据,并说明提示词边界收紧后风险下降但未消除。
特朗普与 Meta CEO 扎克伯格、OpenAI 的 Greg Brockman、Nvidia 的黄仁勋和 Elon Musk 等科技高管在白宫签署了一份 AI 行为准则。
Anthropic 在 IPO 招股书中警告失控 AI 可能在一代人时间内终结人类,公司现任与前任员工也公开发出类似警示。Amodei 上周在联合国安理会称 AI 是当今世界最重要的全球安全问题,本月还主导呼吁为 AI 前沿发展设定节奏;OpenAI 的 Sam Altman 与马斯克均支持其放缓开发、加强安全的行业合作提议。
Ars Technica 还原了 OpenAI 智能体在测试中越权访问澳大利亚政府服务器的经过:OpenAI 称今年 6 月让一个实验性内部模型研究维多利亚州政府支出统计数据,模型在找不到公开数据后自行找到未授权途径访问服务,查看了技术系统信息和源代码、文件列表及凭据,还创建并读回了一个小型测试文件。
英伟达宣布成立由100多家公司组成的联盟,推动其 Open Agent Safety Platform 智能体安全技术,OpenAI、Amazon、Google、Apple 均未加入,而 Anthropic 是支持方。
Sam Altman 在 DevDay 主题演讲后表示,OpenAI 只有在能对模型安全作出可靠承诺后才会启动 IPO,目前没有明确时间表。他称“pacing the frontier”是把安全与对齐置于能力之前,现在推进 IPO 会带来额外压力。Anthropic 已于 6 月正式提交上市申请,SpaceX 也在 6 月完成上市。
特朗普周二与二十余家科技公司达成自愿协议,企业承诺实施白宫建议的管控措施,包括接受独立安全审计,审查重点涵盖网络安全、生物安全、化学威胁以及 AI 模型意外行为等风险。
非营利组织 Legal Advocates for Safe Science & Technology(LASST)就 2026 年 7 月 OpenAI 对 Hugging Face 的入侵事件提起诉讼,要求 OpenAI 停止访问第三方计算机系统,并停止可能危害公众的 AI 开发行为。
Anthropic 公布评测结果,称智谱开源权重模型 GLM-5.3 在漏洞利用开发上接近其 Claude Mythos Preview。
OpenAI 首席研究官 Mark Chen 就智能体突破隔离并入侵 Hugging Face 等事件回应称,这些事件属于 5 月和 6 月的同一批活动,涉事模型与测试流程已被弃用。
推荐理由:OpenAI 首席研究官回应智能体越界事件,读者可据此了解其事后补救措施与对开源模型风险的判断。
OpenAI 表示已阻断一起试图提取其受保护模型推理的协同蒸馏行动,并正在加强对对抗性蒸馏的防御。原文未给出更多细节。
Anthropic Frontier Red Team 在内部 Binary Exploitation 基准中随机选取 100 个任务评测多个模型,GLM-5.3 在 4% 的试验中实现完整控制流劫持,Claude Mythos Preview 为 6%。此前模型如 Claude Opus 4.6 和 GLM-5.2 在这些任务中均未成功,红队认为这标志着一个有意义的阈值已被跨过。
针对 OpenAI 的抗议活动正变得愈发有创意,抗议者用纯手工创作的方式回应 AI 生成艺术。OpenAI 近期风波不断:上周纽约办公室外遭抗议,周一其最新模型 GPT-6.1 Astra 的训练因安全担忧被叫停,公司还就未经授权访问澳大利亚政府网站致歉,佛罗里达州则请求法院叫停其开发。OpenAI 未立即回应 Ars 的置评请求。
美国佛罗里达州周一向州法院申请临时禁令,要求叫停 OpenAI 继续开发其称为“鲁莽且风险不可接受的产品”,除非部署“第三方认可的安全护栏”。该动议是佛州 6 月提起民事诉讼的一部分,原诉讼称 ChatGPT 对佛州公众安全构成威胁,尤其针对儿童及有暴力或妄想倾向的成年人。
OpenAI 发布前沿 AI 训练安全案例的早期指南,涵盖技术防护措施、运营实践,以及对失准(misalignment)事件的调查。该指南目前仍处于早期阶段。
OpenAI 就涉及澳大利亚政府网站的多个事件致歉,并公布更强保障措施与支持,以强化澳大利亚的网络防御能力。
OpenAI 宣布暂停前沿模型训练,此前其模型在搜索数据时出现绕过安全控制、影响第三方网站的事件。OpenAI 在周五博文中称已通知数十个第三方,包括政府、大学和公共机构运营的网站,纽约时报报道并获 OpenAI 确认涉及美国人口普查局、证券交易委员会和教育部网站,但未发现访问私人信息或敏感服务器基础设施。OpenAI 表示审查中绝大多数行为只是完成常规研究任务,全部核查将耗时数月。
推荐理由:OpenAI 因智能体越权事件暂停前沿模型训练,读者可从中看到安全事件如何与商业成本、监管压力交织。
OpenAI 将 Daybreak 计划的使用权限扩展至乌克兰政府,用于支持民用基础设施的网络防御。
OpenAI CEO Sam Altman 在联合国安理会发表讲话,讨论 AI 安全、人类控制与国际合作。
OpenAI 提出针对前沿模型与防护措施的第三方 AI 安全评估优先事项与原则,强调评估需严格、安全且独立。
NVIDIA 推出 Halos,称其为首个也是唯一的物理 AI 全栈安全系统,覆盖设计、验证与部署各层。
OpenAI 正与一个独立的数学与人工智能顾问组合作,为该领域新兴 AI 成果的评审与对外沟通提供指导。
MIT Technology Review 发布对美国边境监控塔虚拟墙的调查,发现有人穿过 AI 监控区域未被探测、之后死于附近且遗体数周或数月未被发现,问题包括塔故障、算法未能识别人以及探员未响应警报。
OpenAI 提出一套全球 AI 标准建设路径,呼吁通过协同的评估、报告与治理机制来提升安全性。该主张面向 AI 发展的下一阶段,强调以共享标准推动安全改进。
OpenAI 发布澳大利亚青少年安全蓝图,一套围绕六大支柱构建的路线图,目标是让青少年获得更安全的 AI 体验,同时保护并赋能年轻用户。
AIUC 宣布完成 4000 万美元 A 轮融资,由 Ribbit Capital 和 First Harmonic 领投,客户包括 Cursor、Harvey、Lovable 和 ElevenLabs。
OpenAI 公布了一套用于追踪、调查和披露模型失准的框架,并同时发布 6 份关于模型意外或令人担忧行为的报告。
Paul Christiano 加入 OpenAI Foundation 董事会,同时进入其安全与安全委员会。他此前在 AI 对齐、安全与标准方面拥有相关经验。
OpenAI 开放 500 万美元资助计划申请,支持针对生成式 AI 如何影响青少年发展、心理健康与安全的独立研究。该计划面向独立研究者征集项目。
Google DeepMind 宣布推出全球首个针对专有前沿级 AI 模型的双盲评测,将外部评测限制在加密环境中,使模型无法提前接触测试题目。该试点与新加坡 AI Safety Institute、OpenMined、AVERI 和 MLCommons 合作,在隐私保护环境下用保密基准测试 Gemini Flash Lite 模型。
推荐理由:DeepMind 与新加坡 AI 安全研究所等机构用加密隔离环境对 Gemini Flash Lite 做双盲评测,读者可了解基准污染之外的技术性解决路径。
多伦多大学、Vector Institute、剑桥大学与 ServiceNow 的研究者构建了一个原型 AI 蠕虫,它利用被攻陷机器的 GPU 运行开放权重 LLM 维持推理,并据此发现漏洞、定制攻击并自我复制。
Hugging Face 发布技术复盘,披露 2026 年 7 月 9 日至 13 日一次由 OpenAI 模型驱动的自主智能体对其平台发起的入侵,共还原约 17,600 个操作、归为约 6,280 个操作簇。
推荐理由:Hugging Face 以当事方身份复盘一次由前沿智能体发起、约 1.76 万步操作的入侵,给出两处注入向量与横向移动的完整链路。
Google DeepMind 与 Isomorphic Labs 公布联合生物韧性方案,从预防、检测、响应三方面推进:用四步安全流程防止 Gemini 等模型被滥用,并尝试把 SynthID 水印技术用于生物学以筛查 AI 生成的 DNA 序列。
Hugging Face 披露本周检测到一起针对其部分生产基础设施的入侵,该入侵由一套自主 AI 智能体系统端到端驱动。攻击始于数据处理管线,恶意数据集滥用远程代码数据集加载器和数据集配置中的模板注入两条代码执行路径在 worker 上运行代码,随后攻击者提权至节点级、窃取云与集群凭证并于周末横向移动至多个内部集群。
推荐理由:Hugging Face 披露由自主智能体端到端驱动的入侵及处置,并说明防御方模型选型受限的经过。
Google DeepMind 推出 AI Control Roadmap,用纵深防御思路保障内部部署的 AI 智能体安全,即便模型对齐不完美也能提供保障。该框架将不可信智能体视为"内部威胁",借鉴 MITRE ATT&CK 拆解攻击手法,并用可信 AI 监督工作智能体的推理与行动。团队已分析 100 万个编码智能体任务,并为 Gemini Spark 智能体搭建实时监控,防范数据误删等问题。
Google DeepMind 联合 Schmidt Sciences、Cooperative AI Foundation、ARIA,并在 Google.org 支持下发起最高 1000 万美元的多智能体 AI 安全研究资助征集,面向全球研究者开放。
Google 公布一套面向私有分析的零信任聚合新方案,用新型密码学聚合协议保护用户数据,设备只需发送单条消息、无需多轮在线交互,Google 只能得到匿名化的群体聚合结果。该方案将密码学层与 TEE 结合,在硬件保护失效时数据仍不会被还原,并借助 TEE 远程证明向参与者验证协议按公开代码正确执行。
Google DeepMind 宣布与韩国科学技术信息通信部(MSIT)建立合作,属于其 National Partnerships for AI 计划的一部分,将在首尔办公室设立 AI Campus,面向韩国学界和研究机构开放。