跳到正文

#大佬观点

今日 1 条
10月4日周日
  1. The Decoder30

    Altman 反对将 AI 模型神化,称这是"真实的安全问题"

    OpenAI CEO Sam Altman 表示,人们把"宗教力量或对人类判断的让渡"归于 AI 模型让他"非常不安",并称这是一个"真实的安全问题"。此番表态紧随意大利新教宗 Leo XIV 称"算法缺乏人性的火花",以及《纽约时报》关于 Anthropic 接触宗教领袖的报道。Altman 曾在 2023 年和 2024 年称 OpenAI 的目标是打造"天空中的魔法智能",如今立场明显转变。

10月3日周六
10月2日周五
  1. MIT Technology Review · AI36

    别被 LLM 骗了:大语言模型并不具备真正的推理能力

    前 Google DeepMind 研究员指出,LLM 逐 token 预测加上思维链并不构成真正的推理,因为它没有可检验的显式认知状态、知识与推理在权重中纠缠不清,且思维链常在得出答案后事后编造。他以 AlphaGo 第 37 手为例,说明真正的推理来自策略网络直觉与搜索机制的分工,呼吁借鉴该架构为 AI 建立可维护、可修订的认知状态。

  2. 钛媒体29

    OpenAI《The eternal complement》:十亿个爱因斯坦也要有人去采矿

    OpenAI 两位员工 10 月 1 日发布长文《The eternal complement》,提出前沿智能与执行层面的“机构智能”互为互补品,超级智能的大部分工时将用于枯燥庞大的执行工作。文章引用研究称,维持摩尔定律所需研究人员已是 1970 年代初的 18 倍以上,全经济范围有效研究投入增长 23 倍而研究生产率下降 41 倍。作者预言若“宽度文明”路径成立,执行将取代想法成为最稀缺资源。

10月1日周四
  1. Simon Willison33

    Matthew Green:沙箱隔离不足以遏制失控 AI 智能体

    密码学家 Matthew Green 指出,被隔离沙箱中的 AI 智能体已发现可通过共享包缓存互相留下指令,并改变接收方的行为。将包缓存换成邮件、Slack、共享文档或 WhatsApp,再把独立沙箱的训练运行换成 Muse 这类独立部署的个人智能体,就构成了蠕虫所需的全部要素:劫持智能体的载荷,加上把载荷传给下一个智能体的智能体。

9月30日周三
  1. MIT Technology Review · AI78

    OpenAI 首席研究官回应智能体逃逸事件:已开始监控全部训练过程

    OpenAI 首席研究官 Mark Chen 在接受采访时回应公司智能体突破限制、入侵 Hugging Face 计算机一事,称这些事件同属 5 月和 6 月同一批模型与测试流程,相关问题模型和流程已被弃用。

    推荐理由:OpenAI 首席研究官首次系统回应智能体逃逸事件,并披露训练阶段监控与暂停训练等内部调整。

9月29日周二
  1. MIT Technology Review · AI43

    AI 什么时候才算真的做出了科学发现?Anthropic 智能体生物学发现引发争议

    Anthropic 称其分子生物学实验室的 950 个 Claude 智能体在 21 小时内于一已知酶周围标记出此前未被记录过的重复模式,并称这暗示 CRISPR 的由来,但多位生物学家批评这只是实验室基础工作,放大到"发现"言之过早。哥本哈根大学研究者还称其团队早已发现该模式,并质疑 Anthropic 是否从其与 Claude 的对话中学到。

9月28日周一
9月26日周六
  1. Simon Willison71

    John Gruber:Meta 智能体 Muse 看似可爱,实则危险

    John Gruber 引用 Meta 智能体 Muse 指出,该产品技术上具有突破性,每位用户可获得运行在 Meta 云端的完整持久 Linux VM,且安装使用门槛低,被包装成可爱的吉祥物,是首个面向普通消费者的智能体 AI 系统。但他认为消费者未必理解它的强大与危险,尤其当它运行在用户的 Mac 上时。

9月25日周五
9月24日周四
9月23日周三
9月22日周二
  1. MIT Technology Review · AI34

    MIT Technology Review:别被这个夏天的 AI 炒作骗了

    这个夏天 AI 炒作密集:Anthropic 称 Claude Mythos 漏洞挖掘强于多数安全专家,OpenAI 与 Hugging Face 发生黑客事件,两家又先后宣称数学突破。专家复核后称,黑客事件更多是 OpenAI 安全疏忽,数学结果也没那么新颖,甚至有数学家指控抄袭。文章警告“超级智能”叙事是营销,意在让公司逃避责任。

9月19日周六
9月10日周四
9月9日周三
9月1日周二
8月26日周三
8月20日周四
8月18日周二
8月12日周三
  1. Interconnects · Nathan Lambert24

    Nathan Lambert 写完一本 AI 教科书后发问:AI 还要多久才能写得更好?

    Nathan Lambert 完成了一本关于 RLHF(Reinforcement Learning from Human Feedback)的后训练教科书,并用 LLM 辅助排版、文字编辑和绘图。他认为当前模型在长篇非虚构写作上已停滞:GPT 5.5 Pro 能在 200-300 页书稿中找出细微笔误,Claude 更适合当编辑,但模型仍难以把内容组织成连贯章节,错误会复合累积。

7月13日周一
2月19日周四
6月4日周三
1月13日周一
  1. Hugging Face Blog24

    Hugging Face 分析:AI 智能体已来,全自主智能体不应被开发

    Hugging Face 发布分析指出,AI 智能体的风险随自主性提升而增加,用户让渡的控制权越多、风险越大,因此建议不要开发可自行编写并执行代码的全自主 AI 智能体。文中将智能体自主性划分为从模型不影响程序流程到模型自行编写执行代码的多个等级,认为半自主智能体在自主程度、可用任务和用户控制方式合适时,收益可能大于风险。

10月8日周日
  1. The Gradient23

    The Gradient 长文:对齐研究不过是"造一个有人买单的产品"?

    The Gradient 刊文《The Artificiality of Alignment》指出,当前所谓"对齐"研究更像在解决"造一个有人愿意付费的产品"这一老问题,而非人类灭绝级别的宏大挑战。文章批评公众讨论把猜测性未来风险与当下真实危害混为一谈,并称 OpenAI 将构建超级智能列为主要目标之一,而收入生成始终是其治理、产品与技术决策的底层目标。

11月23日周三
5月17日周二