NVIDIA VSS Blueprint 3.3 发布:降低构建与运行视觉 AI 智能体的成本
NVIDIA 发布 Metropolis Blueprint for Video Search and Summarization(VSS)3.3,用于降低视觉 AI 智能体的构建与运行成本。该蓝图及其智能体技能将视频接入、流处理、事件检测、检索、摘要与上报整合为一套可维护的系统,面向生产级视频理解。
NVIDIA 发布 Metropolis Blueprint for Video Search and Summarization(VSS)3.3,用于降低视觉 AI 智能体的构建与运行成本。该蓝图及其智能体技能将视频接入、流处理、事件检测、检索、摘要与上报整合为一套可维护的系统,面向生产级视频理解。
Amazon Quick 的提示词工程决定了其 AI 功能响应的准确性与可靠性,官方发布两部分系列的第一部分,聚焦适用于所有 Quick 组件的通用原则与可复用框架。
Amazon Quick 各组件对提示词的解析方式不同,官方博客按组件给出提示词写法:Quick Research 需明确目标、受众与关注点,并自行拆解子问题;Quick Flows 要写清时间、数据源与输出格式,复杂逻辑用编号步骤,并可通过对话迭代调整。
针对 RAG 在数百份合同上做汇总统计会算错的问题,AWS 给出了一套合同智能平台架构:AI 提取智能体(Claude Sonnet 系列)从 PDF 中抽取 8 个关键字段并附置信度。
Condé Nast 与 AWS 生成式 AI 创新中心基于 Amazon Bedrock 和 Amazon OpenSearch Service 构建多模态视频检索方案,采用 TwelveLabs Marengo 嵌入模型联合编码画面、音频与字幕,将单次内容检索耗时从 250 分钟降至 2 分钟以内。该方案支持自然语言意图检索、以图搜视频、错别字容错和精确时间戳定位,覆盖其 14 万余条视频库。
NVIDIA 发布开源表格基础模型 Kumo Tabular,属于 NVIDIA Kumo Structured 模型系列,已在 Hugging Face 上线,参数规模 28M 到 215M,采用 OpenMDW-1.1 许可支持商用。
微软研究院发布 Quine,一个面向生物学复杂性的 AI 研究系统,由跨基因组、蛋白质、化学、RNA 与细胞状态、生物成像等模态联合训练的世界模型和连接模型、科学工具、文献与实验人员的 harness 组成。
推荐理由:微软研究院公开 Quine 的生物世界模型设计,并给出胰腺癌化合物筛选在湿实验中获验证的案例。
Hugging Face 发布论文 ProvenanceGuard,一种面向基于 MCP 的 LLM 智能体的来源感知事实性验证层,用于捕捉"跨来源混淆"——即某个说法在证据池中为真、却被归因到错误来源。
MIT 研究人员在《Philosophical Perspectives》发表论文,系统评估了算法单一化的主要反对意见,认为系统性排斥等论点要么不成立,要么不足以否定所有形式的单一化。他们用数学证明单一化会形成信息回声室、阻碍探索,但将多个招聘算法集成为单一"ensemble"可克服这一局限,有时表现不逊于多算法并存的 polyculture。
MIT 教授 Sherry Turkle 在新书《Artificial Intimacy: Who We Become When We Talk to Machines》中得出结论:聊天机器人提供的只是"假装共情",长期使用对人类发展与社会联结整体有害。
Microsoft Research Asia – Singapore 作为微软在东南亚的首个研究实验室已成立一年,团队规模扩大并深化了与新加坡高校、政府机构和产业的合作。
H 公司发布 Holo4 系列智能体模型,包含 27B dense 和 35B-A3B MoE 两个版本,并同步更新 Holotron4 Nano,权重已在 Hugging Face 提供 BF16、FP8、NVFP4 和 4-bit GGUF 格式。
推荐理由:可以了解一个通用计算机操作智能体如何在单一模型内统一 GUI、代码与 MCP 接口,以及它与闭源前沿模型的成本差距。
MIT 研究团队借助 AI 算法调整脂质纳米颗粒(LNP)周围的辅料配方,使 RNA 疫苗在室温下可稳定保存长达一年,或在 37 摄氏度(98 华氏度)下保存两个月。
推荐理由:MIT 团队用 AI 算法筛选辅料配方,把 RNA 疫苗从超低温冷链中解放出来,读者可看到小数据集算法如何加速生物实验设计。
NVIDIA 推出开放智能体安全平台,作为在芯片层面持续监控 AI 智能体的参考方案。该平台面向智能体 AI 带来的安全风险,定位为可参照的持续监控实现。
NVIDIA 推出 OpenShell,为 AI 智能体添加运行时控制能力,使其在被赋予目标后可编写代码、调用工具并持续工作。这类智能体需要访问工作区、计算资源、数据、凭证和外部服务,可支撑软件故障排查、实验运行等持续数天至数周的任务。
NVIDIA DSX MaxLPS 通过策略驱动的功率共享,在参与资源之间动态分配电力,让客户可部署更多 GPU。AI 工厂通常按所有 GPU 同时达到峰值功耗的极端情况预留电力,这部分保护性缓冲在正常运行时会闲置基础设施容量,而 MaxLPS 旨在把未使用的瓦数转化为可用算力,从而提升吞吐量与效率。
Hugging Face Hub 新增 RL Environments 筛选器,带 rl-environment 标签的数据集可直接在页面生成运行命令,无需新建仓库类型、注册表或注册。
MIT 本科生通过 PKG 中心 2026 年 Code.Tulsa 项目,在俄克拉荷马州塔尔萨为 Muscogee Nation 开发首个 PRAMS 孕产妇健康调查,并参与 AI、数据科学等技术项目。
GitHub Copilot app 的 canvas(画布)是一种可自定义界面,用户和智能体共享同一状态,可用看板、清单或仪表盘等形式承载工作流。在 agent 会话中输入 /create-canvas 技能并用自然语言描述工作流、用户可执行的操作和智能体可执行的操作,无需写代码或做设计,界面会在右侧面板生成。
MIT McGovern 研究所的 Daniel Low 与 Satra Ghosh 等人在《Journal of Psychopathology and Clinical Science》报告了一款文本语言处理工具,通过约 49 个自杀风险因子对应的词典搜索文本,来估计个体自杀风险。
在 GitHub Copilot 应用中,canvas 是运行于应用内的全栈小程序,可与 Copilot agent 双向通信,也能调用第三方 API 并在本地执行代码,例如用 Winget 界面管理本地包或直接操作 SQLite 数据库,无需每次都消耗 token 让 agent 代劳。基于 canvas 可以把研究、原型、实现等开发流程自动化,让自己按需退出循环,而不是被聊天输入框限制。
GitHub Security Lab 开源 Fuzzing Taskflow,这是一个基于 Taskflow Agent 框架的自主 fuzzing 流水线,面向 C/C++ 项目,只需指向一个 GitHub 仓库即可自动识别入口点、分析构建系统、编写 harness、运行 AFL++、读取覆盖率报告并改进 harness,还对每个崩溃做去重和漏洞报告。
推荐理由:作者公开了自主模糊测试流水线的分层架构与覆盖反馈闭环设计,适合关注 LLM Agent 落地工程细节的读者。
Google DeepMind 发布 Gemini 3.8 Live with Live Avatar,在原生实时对话模型上加入近实时视频生成,让企业智能体可以边听边看边说。
推荐理由:官方说明了实时视频形象与异步工具调用的组合方式,可据此判断企业客服等场景的交互形态变化。
NVIDIA 介绍面向生物基础模型的高效 MoE 训练方法,指出稠密 Transformer 中每个 token 都要过每一层,扩容会同时推高训练与推理算力;MoE 则用多个子网络(专家)替代,每个 token 只激活其中一小部分。
Liquid AI 为视觉语言模型 LFM2.5-VL-3B 发布实验性 DSpark 草稿模型 LFM2.5-VL-DSpark,通过投机解码在不改变输出质量的前提下实现最高 3.13 倍设备端解码加速、H100 上 2.66 倍,端到端分别最高 2.62 倍和 2.27 倍。
NVIDIA 联合 Google DeepMind、EMBL-EBI 等机构,通过 AlphaFold Database 公开 2800 多种病毒的蛋白复合物预测 3D 结构,供任何科学家免费使用。
推荐理由:NVIDIA 联合 Google DeepMind 等开放 2800 多种病毒的蛋白复合物预测结构,读者可了解数据集规模与可复用的推理流程。
Remedy Entertainment 的 CONTROL Resonant 首发即登陆 GeForce NOW,Ultimate 会员可以 GeForce RTX 5080 级云端性能串流,支持 DLSS 4、光线追踪和最高 5K HDR,无需 100GB 本地安装。
MIT Senseable City Lab 团队出版新书《How AI Sees the City: Urban Visual Intelligence》,系统梳理视觉 AI 用于城市研究的可能与隐患。
Meta 宣布把 Private Processing 机密计算基础设施扩展到 Meta AI 眼镜,让流式转录、上下文搜索和长期记忆等云端 AI 负载在机密虚拟机(CVM)中执行,Meta 自身也无法读取用户数据。
NVIDIA 发布 NV-Reason-CT Open,这是一款面向放射科医生链式推理(Chain-of-Thought)的 3D CT 视觉语言模型(VLM)。现有通用前沿模型在 3D 体数据成像上表现不佳,多数开源医疗 AI 模型也缺乏相应能力,而 CT 这类临床信息丰富、数据密集的模态长期未获充分覆盖。
即便每块 GPU、网络链路和 pod 都显示健康,512-GPU 训练任务仍可能性能不达标或直接失败,原因可能是单块 GPU 变慢、链路在负载下降级,或配置悄悄把流量导向更慢的路径。运维者往往要到任务跑了几小时后才会发现问题。
GitHub Copilot 应用重建了 pull request 视图,用一个含 2,200 个文件、超 100 万行改动、400 多条行内评审评论的开源 PR 验证其性能。代码行沿用"绘制前高度已知"的确定性虚拟化几何,评论等动态块则改为可预估、惰性测量并以文件与行号锚定的独立几何,避免滚动跳变。
微软研究院对移动操作机器人负载做了首次系统性测量,发现仅依赖机载 GPU 推理会限制机器人性能、电池寿命与可扩展性。
推荐理由:微软对机器人负载的首次系统性测量显示,把推理从机载 GPU 卸载到边缘或云端可在成功率、模型规模与续航上同时获益。
Google Private AI Compute 团队公布为 Private AI Compute 平台带来云端持久记忆的技术方案,通过硬件安全飞地、端到端加密通道和以设备派生密钥加密的每用户数据库,让跨设备 AI 记忆在服务端保持与端侧处理同等的隐私标准,此前该平台为无状态、任务结束即清除上下文。
推荐理由:Google 公开了云端持久记忆如何用安全飞地与设备端密钥实现跨设备隐私,可看架构取舍与验证方式。
NVIDIA 发布 SWE-Serve,用于评估推理服务软件改动——AI 编程智能体的补丁能通过测试,却可能在服务器加载真实模型并处理请求时失败。该基准由 SGLang 团队参与开发,包含 53 个任务,检查系统能否通过公开接口返回正确结果。
MIT 任命 David Siegel SM '86、PhD '91 为 2026-27 学年 Innovation Fellow,他将与 MIT Schwarzman College of Computing 合作,探索 AI 如何加速 MIT 及更广范围的科学发现。
Google DeepMind 推出 Gemini 3.8 Flash TTS 与 Gemini 3.8 Flash-Lite TTS 两款语音生成模型,前者面向角色设计与逐行表演指导,后者面向高并发、低成本配音场景。
推荐理由:两个 TTS 模型把语音生成从固定预设转向自然语言定制,并给出 Hume AI 基准成绩与开放入口,便于判断创作与规模化配音的能力边界。
NVIDIA 验证工程师 Sakeena Fiza 在数据中心系统实验室负责新产品量产前的硬件验证,她最早且最难忘的经历之一,是看到 NVIDIA Rubin GPU 首次在系统层面被识别并点亮。她和团队在客户之前发现问题,让系统从 tray 到 rack、cluster 再到客户 AI 工厂逐步走向可靠;单块板卡可能含数万个组件,一个机架接近 50 万个。
NVIDIA AI Day Singapore 于 9 月 22-23 日在新加坡举行,NVIDIA 与合作伙伴展示东南亚区域的 AI 进展。
MIT 支持者 Patricia 和 James Poitras 捐赠 1000 万美元,通过 McGovern 研究所 Poitras 精神疾病研究中心设立 50 个两年期奖学金,未来十年每年授予 5 个,首批 5 位研究员已公布,研究方向涵盖焦虑、恐惧记忆、肠脑轴、社交焦虑治疗与运动机制。