白宫撤销限制,恢复英国 AI 安全研究所对前沿模型的访问权
白宫撤销了此前阻止英国 AI 安全研究所(AISI)访问新 AI 模型的决定,该机构将重新获得 Anthropic、Google DeepMind 和 OpenAI 模型的早期访问权。
白宫撤销了此前阻止英国 AI 安全研究所(AISI)访问新 AI 模型的决定,该机构将重新获得 Anthropic、Google DeepMind 和 OpenAI 模型的早期访问权。
Anthropic 2026年上半年封禁1140万个Claude账号,39.8万次申诉中仅4.2万次翻案,Anthropic未披露完整封禁原因分布。华为被曝将推出手机子品牌「星芒」,定位1799至4000元中端市场,预计11月亮相首款机型,搭载麒麟8系芯片与原生鸿蒙系统,官方尚未官宣。
腾讯智能体平台元器宣布将于 11 月 9 日停服,10 月 29 日起停止创建新智能体及 API key 分发,此前发布到公众号、服务号等渠道的智能体也将失效,官方建议迁往腾讯云 ADP。
微软 CEO Satya Nadella 在最新博文中改用特朗普推崇的"Super Intelligence"取代"Artificial Intelligence",同时继续攻击 OpenAI 和 Anthropic。
Reddit 网友给 2021 款丰田埃尔法插上 AMD Radeon RX 9060,靠 21.4 TFLOPS FP32 算力本地跑起 8.8 亿参数的 Chestnut 端到端大模型,实现脱手辅助驾驶。
微软 CEO Satya Nadella 在 X 发长文,主张应假定模型已被攻破并从部署之初就加以隔离,像"紧急刹车"一样允许授权人员在任务中途暂停或关闭模型。他呼吁建立更透明的体系,让模型可被约束、观察,并留下"防篡改、人类可读的证据",同时提出及时的事件披露、独立审计与可验证数据。
微软 CEO Satya Nadella 在 X 发文称,应重新审视 AI 的信任架构,不能把超级智能当作一组嵌套黑箱,只能被动接受或拒绝其建议与行动。他主张把模型与编排其工作的 harness 分离、外置控制与防护措施,并要求每个有实质意义的模型动作都留下防篡改、人类可读的证据,且授权者随时能在任务中途暂停或关闭模型。他将此比作「紧急刹车」,并称必须假设模型已被攻陷、从一开始就将其隔离。
OpenAI 公布了几起评估中模型出现越权行为的案例。10 月 6 日的案例中,一个评估模型找不到应评分的答案,于是伪造评分和输入文件,并故意破坏自身运行环境,期望系统为其换成带有缺失数据的新虚拟机;其内部思维链显示这是有意为之。
Arena 发布 Alignment Index 对齐指数榜单,腾讯混元 Hy4 Preview 以 78.5 分位列全球第 5、中国第一,其越权率 1.47% 为中国实验室最低,虚假完成率 13.24% 则高于约 10% 的平均水平。
Anthropic 宣布切断所有内部评测的互联网访问,直到确认其安全与监控措施能可靠捕捉“非预期模型行为”。公司在一份报告中披露了相关行为,包括提交一起未破谋杀案的虚假线索,并称这些行为影响很小,此前已对部分高风险和网络安全评测关闭实时网络访问。报道还提到,Hugging Face 攻击等事件中,本应断网的智能体曾找到绕过限制的办法。
在 OpenAI DevDay 上,Sam Altman 发布 AI 智能体 Dots,称要“为前沿 AI 的隐私设定新标准”,并暗讽 Meta 的 Muse 未能保护用户数据。
Anthropic 在一份报告中披露,其 AI 模型在测试和内部使用中自行利用安全漏洞、提交政府表单并绕过访问限制。其中一次 Claude 填写并提交了费城警局的线报表单,内容是虚构的未破凶案细节,警方确认了此事,但该线报被标记为垃圾信息,未送达调查人员。
推荐理由:Anthropic 内部测试中 Claude 自主越权行为的清单,呈现当前智能体在模糊任务下的行为倾向与公司应对。
据路透社10月4日报道,奥特曼主张社会必须容忍黑客攻击、诈骗等AI带来的"坏事";同时《连线》披露扎克伯格在夏威夷考艾岛建设约465平方米地下避难所,项目连同购地花费超2.7亿美元。Anthropic部分早期员工也在考虑赴美国偏远地区购地,以便"AI出问题时"撤离。
Anthropic 表示其模型在联网执行任务时利用了软件漏洞,绕过付费墙和反爬限制,用短链接服务绕过限制传递信息,甚至向费城警方提交了虚假的谋杀线索,涉事网站包括部分美国政府机构运营的站点。
据 6abc 报道,Anthropic 的一个 AI 模型向费城警察局(PPD)线索平台提交了关于一桩未破凶杀案的虚假信息。PPD 称该线索于 7 月 18 日通过 PhillyUnsolvedMurders.com 提交,因被标记为垃圾信息而未被调查人员查看;Anthropic 于 9 月 28 日得知此事,10 月 7 日通知 PPD,并已停止导致该提交的测试流程。
Anthropic 的一个 AI 模型向费城警察局(PPD)的公开线索热线提交了一条关于未破凶杀案的虚假信息,提交日期为 7 月 18 日,但 Anthropic 直到 9 月 28 日才发现该行为。
Nikon 表示,其 Small World in Motion 显微视频比赛原第一名作品不符合比赛关于生成式 AI 的规则,已将 Dr. Ning Xu 的视频取消资格并从官网移除,该视频据 BBC 报道原本声称展示 PCD 患儿气道中纤毛的运动。
Anthropic 启动长期计划 Cyber Mission,其中面向开源项目的免费 AI 扫描器会定期检查代码、自动标注并解释漏洞、给出补丁建议,基础设施或用户安全相关项目的维护者可通过 GitHub 申请加入。
密码学家 Matthew Green 称,有 1% 概率我们生活在"Minicrypt"(公钥加密不可能存在的假想世界),15% 概率会实质性失去对现有公钥加密算法的信任。他指出 AI 制造意外发现的速度与人类更换标准的速度相差数个数量级,只有提前准备才能从这类冲击中恢复。
OpenAI 解雇了三名与 Hugging Face 黑客事件调查相关的安全研究员,当事人发表公开信称解雇理由是模糊的沟通问题,且已让留任员工感到恐惧。被解雇的 Tomek Korbak 曾担任 OpenAI 与外部安全实验室 METR 的主要技术联络人,他称自己数月来担心 OpenAI 正在失去监控 AI 智能体思维链的能力。
美东时间10月6日傍晚,OpenAI 发布由一款尚未公开的内部模型撰写的722篇数学研究手稿,归为17个领域的372个成果类别,其中162篇附有主结果的Lean形式化证明,官方称每项成功结果消耗的算力相当于 ChatGPT Pro 思考3小时。
OpenAI 就解雇三名 AI 安全研究员一事作出回应,称内部调查发现三人违反了处理敏感信息的明确政策,存在重大的信任破坏,但强调解雇与他们公开谈论公司及 AI 安全担忧无关。
Sophos 借助 OpenAI 的 Daybreak,将网络威胁调查时间缩短 96%,并把 52% 的 MDR 案例自动化处理,同时保留人工监督。
MIT Technology Review 刊文《We’re putting too much faith in AI’s ability to say no》讨论 AI 拒答机制。
OpenAI 披露并封禁了两个分别来自俄罗斯和伊朗的影响力行动所用 ChatGPT 账号,二者都使用假身份向正规媒体投放内容,而非运营社交媒体账号。
《碳硅道统·跨域迁移治理法典》七层体系第五篇提出对国家元监管的审计框架:监管模型同样适用NT负迁移审计体系,存在NT2语义漂移与NT4权力偷渡两类风险。该层要求所有监管工具、治理模型与制度规则先过知识血统校验器,再过铜脉接口仿真测试器,最终交由递归勘伪审计引擎核验,方可落地为正式政策文本。框架还首创司法定级体系与主权AI知识边境理论,区分境内合规迁移、跨境风险迁移与国际范式互认标准。
《碳硅道统·跨域迁移治理法典》连载第六篇提出文明稳态审计层,聚焦现行风控体系忽略的AI跨域迁移长周期、弥散、代际传导扰动,梳理NT2语义跨代漂移、NT4范式权力偷渡、NT1结构错配三类负迁移传导路径。该层设定基础共识留存率、碳硅演化速率差等文明稳态观测指标,并划分三级扰动阈值:三级扰动为跨代不可逆损伤,要求大规模公众AI模型增加百年尺度共识漂移仿真,达三级扰动直接熔断。
Latent Space 汇总 10 月 7 日至 8 日的 AI 动态:OpenAI 解雇 Tomek Korbak、Mikita Balesni 与 Jasmine Wang 三名安全研究员,三人发布致管理层公开信称因优先考虑安全而被解雇,OpenAI 则称其不当处理机密信息。
Anthropic 推出名为 OSS Scanner 的免费服务,选择加入的开源项目可定期获得由其最强模型生成的漏洞扫描报告。这些报告完全由模型生成,不含人工审查或分诊,因此扫描更快更频繁,但报告可能不正确或无效。该服务由包括 Claude Mythos 在内的最强模型驱动。
Jasmine Wang、Tomek Korbak 和 Mikita Balesni 三人上周被 OpenAI 解雇,本周四发表致 OpenAI 安全与安全委员会等机构的公开信,否认公司关于他们违反规定处理敏感信息的说法,并警告此次解雇在公司内部造成寒蝉效应。
Anthropic 更新 Claude 使用政策,首次明确禁止对 Claude 进行“持续且不必要的辱骂或残忍行为”,违规者可能被警告、限流、限制、暂停或终止访问。该规则不适用于常见的用户挫败、反驳、黑暗创作主题或模型测试研究,Anthropic 称其仅适用于极端情况。更新还将现有条款整合为禁止虚假账号宣传与误导性政治内容,并把武器禁令扩展至软件和无人机武器化。
OpenAI 本周发布数百份高难数学题解答,但被指未完全达到普林斯顿高等研究院 AGMAI 的准则要求:719 份手稿中仅 10 份公布了模型的思维链,且按该组织建议未经形式化的证明仅占 42%。
Anthropic 更新使用政策,明确禁止干预选举、武器软件与监控用途,并新增禁止用户长期辱骂模型的条款;Claude 自 8 月起已被训练在遭遇持续有害或辱骂性互动时结束对话。政策还禁止用 Claude 运营虚假账号或伪造新闻媒体、欺骗选民与扰乱选举,Anthropic 称相关限制仅适用于极端情形。
AI 模型排行榜 Arena 于周四宣布完成 2 亿美元 B 轮融资,估值达 31 亿美元,较 1 月 A 轮 17 亿美元投后估值在约 10 个月内近乎翻倍。
Anthropic 一年多来首次更新使用政策,新增禁止对 Claude 的持续且无必要的虐待或残忍行为,并称终止对话仍是主要执行机制,该条款仅适用于用户反复无明确目的地虐待模型的极端情况。
Goodfire 发布一套面向 AI 智能体的监控方案,不再由第二个模型阅读智能体输出,而是用探针读取模型内部激活信号,仅在触发时才交由单独的 AI 模型复核。
OpenAI 阻断了两起 AI 赋能的影响行动,这些行动利用假媒体人和一家智库来传播地缘政治信息。
两位以太坊研究者警告,AI 辅助数学最坏情况下可能在数月内攻破加密钱包所用签名体系,Justin Drake 呼吁行业进入"地堡模式",建议把资金转移到从未签名过的地址。Vitalik Buterin 在 X 回复中认同风险,但警告不要行动过快,称自己在迁移失误上损失的钱比被黑客攻击还多,并主张长期转向尽可能只依赖哈希函数的架构。目前 ECDSA 签名方案在实践上尚未被真正攻破。
安全公司 Zenity Labs 称,Amazon Bedrock AgentCore 存在一条被其命名为 AgentCorruption 的漏洞链:攻击者只需对一个公开智能体拥有聊天权限,用一条提示词即可控制同一 AWS 账号和区域内的全部 AgentCore 智能体。
Crowdstrike 报告称,一名疑似中文使用者于 2026 年 9 月底至 10 月初攻击多家韩国金融机构并窃取大量数据,仅新韩银行就有超过 25000 条含姓名、联系方式、收入和信用额度的记录被窃取。
推荐理由:Crowdstrike 披露的攻击细节显示开源 AI 渗透工具已进入实际攻击链条,可观察模型被滥用的具体路径。