Google DeepMind 发布 Gemini 4 Argon 前沿模型
Google DeepMind 发布 Gemini 4 Argon,面向开发者、企业、科研人员和消费者开放,首发价每百万 input token 2 美元、output token 10 美元,缓存 input 降价 95%。
推荐理由:官方给出 Argon 的定价、1M token 窗口和多项落地案例,读者可据此判断其在长程编码与科研任务上的定位。
Google DeepMind 发布 Gemini 4 Argon,面向开发者、企业、科研人员和消费者开放,首发价每百万 input token 2 美元、output token 10 美元,缓存 input 降价 95%。
推荐理由:官方给出 Argon 的定价、1M token 窗口和多项落地案例,读者可据此判断其在长程编码与科研任务上的定位。
欧洲多地城市与 ABA Technology、Akila、K2K、Linker Vision、Milestone 等软件伙伴正基于 NVIDIA 加速计算构建物理 AI 智能体与数字孪生,用于城市运营和公共服务,方案依托 NVIDIA Cosmos、Nemotron 开放模型与 Metropolis VSS Blueprint,可识别交通拥堵、设备状况与安全隐患。
阿布扎比技术创新研究院(TII)发布 Falcon-ASR,这是一个 1.6B 参数的语音识别模型,重点支持阿联酋方言阿拉伯语,同时支持英语、法语、西班牙语和葡萄牙语,五种语言共用同一套权重。
Pollo AI 借助 GPT-5.6、GPT-6 Astra 和 GPT-Image-2.5,帮助创作者把创意转化为精细图像与电影级视频广告。
Google DeepMind 发布 EmbeddingGemma 2,把文本、图像、音频、视频统一映射到同一嵌入空间,基于 Gemma 4 架构,参数 740M,采用 Apache 2.0 许可,面向端侧推理。
推荐理由:官方给出参数量、模块化设计与存储压缩细节,读者可据此判断端侧多模态检索的落地成本。
MIT CSAIL 联合 Google 和东北大学推出 InstructMesh,把 3D 生成系统 TRELLIS 与 GPT-4 结合,用户可用自然语言点选并修改 AI 生成的 3D 模型后再打印。
Google DeepMind 宣布新前沿模型 Gemini 4 Argon,先通过 Fairwind Program 向受信任的网络防御者开放,随后逐步扩展至开发者、企业和消费者。
推荐理由:官方披露了 Gemini 4 Argon 的能力、基准与分阶段开放方式,读者可据此判断前沿模型在企业工作流和网络防御中的落地节奏。
Hugging Face 发布 Open TTS Leaderboard,用 WER/CER、RTFx、TTFA 和 WavLM 说话人相似度等客观指标评测开源多语言 TTS 与语音克隆模型,把评测周期从数周投票压缩到数小时。
Condé Nast 与 AWS 生成式 AI 创新中心基于 Amazon Bedrock 和 Amazon OpenSearch Service 构建多模态视频检索方案,采用 TwelveLabs Marengo 嵌入模型联合编码画面、音频与字幕,将单次内容检索耗时从 250 分钟降至 2 分钟以内。该方案支持自然语言意图检索、以图搜视频、错别字容错和精确时间戳定位,覆盖其 14 万余条视频库。
微软研究院发布 Quine,一个面向生物学复杂性的 AI 研究系统,由跨基因组、蛋白质、化学、RNA 与细胞状态、生物成像等模态联合训练的世界模型和连接模型、科学工具、文献与实验人员的 harness 组成。
推荐理由:微软研究院公开 Quine 的生物世界模型设计,并给出胰腺癌化合物筛选在湿实验中获验证的案例。
Google DeepMind 发布 Gemini 3.8 Live with Live Avatar,在原生实时对话模型上加入近实时视频生成,让企业智能体可以边听边看边说。
推荐理由:官方说明了实时视频形象与异步工具调用的组合方式,可据此判断企业客服等场景的交互形态变化。
Liquid AI 为视觉语言模型 LFM2.5-VL-3B 发布实验性 DSpark 草稿模型 LFM2.5-VL-DSpark,通过投机解码在不改变输出质量的前提下实现最高 3.13 倍设备端解码加速、H100 上 2.66 倍,端到端分别最高 2.62 倍和 2.27 倍。
MIT Senseable City Lab 团队出版新书《How AI Sees the City: Urban Visual Intelligence》,系统梳理视觉 AI 用于城市研究的可能与隐患。
NVIDIA 发布 NV-Reason-CT Open,这是一款面向放射科医生链式推理(Chain-of-Thought)的 3D CT 视觉语言模型(VLM)。现有通用前沿模型在 3D 体数据成像上表现不佳,多数开源医疗 AI 模型也缺乏相应能力,而 CT 这类临床信息丰富、数据密集的模态长期未获充分覆盖。
Google DeepMind 推出 Gemini 3.8 Flash TTS 与 Gemini 3.8 Flash-Lite TTS 两款语音生成模型,前者面向角色设计与逐行表演指导,后者面向高并发、低成本配音场景。
推荐理由:两个 TTS 模型把语音生成从固定预设转向自然语言定制,并给出 Hume AI 基准成绩与开放入口,便于判断创作与规模化配音的能力边界。
NVIDIA AI Day Singapore 于 9 月 22-23 日在新加坡举行,NVIDIA 与合作伙伴展示东南亚区域的 AI 进展。
AI 智能体工作流可用于为物理 AI 系统准备并验证数字孪生:智能体检查 3D 场景、在 OpenUSD 中编写仿真相关数据、添加物理属性、渲染预检视图,并对照 SimReady 要求验证结果。该流程覆盖从 Blender 场景到交付给 NVIDIA 的仿真就绪 OpenUSD 交接。
MIT 研究人员提出 HardFlow,让预训练生成模型在部署阶段满足安全、物理等不可妥协的硬约束,同时提升输出质量,无需重新训练。该方法把硬约束采样重构为轨迹优化问题,只在最终输出上强制约束,而非每个中间步骤。在机器人操作、迷宫导航和文本引导图像编辑实验中,HardFlow 实现完全约束满足,质量持续优于基线方法,计算时间与多数同类方法相当或更低。
NVIDIA 详解多模态推理优化技术 Encode-Prefill-Decode(EPD)解耦:将视觉编码阶段与 prefill、decode 阶段分离,在图像密集提示、短到中等长度输出以及量化 MoE 模型上收益最大。结合 NVIDIA Dynamo 使用,最多可实现 5 倍加速。
Google DeepMind 与 Google Research 发布 WeatherNext 3 全球天气模型,直接学习实时对地静止卫星观测数据,每小时输出一次预报,温度等关键地表变量分辨率达 5 公里,较上一代 WeatherNext 2 的 25 公里、6 小时更新提升约 5 倍。
推荐理由:官方披露了分辨率、更新频率与训练数据来源的变化,可对比上一代判断天气模型精度提升的路径。
Hugging Face 推出 NeoMME,包含 260M 和 800M 两个多语言多模态编码器,不用独立预训练视觉塔或因果语言模型,由单个双向 Transformer 同时处理文本 token 与原始图像 patch,并以掩码离散扩散目标从零训练。
Google DeepMind 在 Gemini 3.7 Flash、3.6 Flash 和 3.5 Flash-Lite 上推出智能体视频理解功能,通过动态检索帧、音频和转录文本,将 token 消耗降低最多 88%、分析成本降低最多 66%、准确率提升最多 7%。
推荐理由:Gemini 新功能给出 token 与成本下降幅度及启用方式,读者可据此评估长视频分析流程的改动空间。
NVIDIA Omniverse NuRec 用于跨车型平台扩展自动驾驶感知,解决同一套感知软件换到新车型后感知结果变化的问题。文章指出,传感器布局、标定、视场、遮挡、车身几何、时序与覆盖范围都会随车型改变,例如同一红绿灯可能出现在画面不同位置。
阿里发布 Qwen3.8-Flash-Next 的模型权重,作为即将推出的 Qwen4 架构的预览,供开发者实验和评估。该模型是多模态 MoE 模型,主模型 125B 参数,另有 51B N-gram 嵌入向量,每 token 激活 6B 参数,原生上下文窗口 262,144 token,可扩展至 1M token。
NVIDIA FLARE 可用于构建联邦多模态 AI 工作流,让视觉问答、图像描述与图文推理等视觉语言模型(VLM)任务在数据无法集中、原始记录分散于各机构的前提下完成协同训练。原文正文指出,现代 VLM 已能支持这些任务,而联邦学习提供了跨数据本地站点协调训练的途径。
Sentence Transformers v6.0 新增第四种模型类型 MultiVectorEncoder,用于 ColBERT 式晚交互检索,PyLate、Stanford-NLP ColBERT 以及 colpali-engine 视觉文档检索检查点均可通过同一套 API 加载。
推荐理由:原文给出多种 ColBERT 类检查点的统一加载方式,以及索引体积与检索收益之间的实测取舍,可据此决定是否替换现有稠密检索。
Hugging Face 的 OlmoEarth Studio 现支持计算并导出由开源 OlmoEarth 基础模型生成的地球观测嵌入向量,输出为 Cloud-Optimized GeoTIFF(COG),向量以 int8 存储、每维一个波段。
Microsoft Research 推出 MindTopo 基准,用于评测多模态大模型对连通性、封闭、顺序、分离与打结等拓扑关系的理解,同时考察静态识别与交互规划。当前模型在静态推理上明显强于交互规划,且均远低于人类水平,失败多发生在规划阶段而非感知阶段。图像与视频生成仅在有助保持结构约束时才有效。
Google DeepMind 发布多语种手语转文本模型 SL2T,并在 Pixel 11 的 Gboard 与 Live Transcribe 中以 ASL 转英文的听写功能首次进入消费产品,训练数据超 10 万小时、覆盖 50 多种手语。
推荐理由:官方给出了 SL2T 的数据规模、基准成绩和隐私处理方式,可据此判断手语翻译在消费端落地的可行边界。
NVIDIA 发布 JetPack 7.2.1,为 Jetson 平台加入智能体视频技能(Agentic Video Skills)和 T3000 仿真(T3000 Emulation)。JetPack 面向机器人与智能视频分析等场景,覆盖多摄像头采集、网络流解码、AI 推理与视频编码的完整数据路径。
微软研究院推出胸部 X 光 VLM 研究模型 CARE-X,用辅助监督头与 DAPO 强化学习在生成式与判别式任务间统一推理,并明确其尚未获监管批准、不可用于临床诊断。
Meta 发布多模态模型 Muse Glimmer,从 Muse 蒸馏到 30B 参数,采用 Apache 2.0 许可,面向本地智能体场景,可用于编码、文档分析和个人助理。
推荐理由:材料给出 30B 多模态模型在智能体与编码基准上的完整对比表和本地部署路径,可判断其端侧适用边界。
NVIDIA 推出 Alpamayo 2 Super,一个开放 340 亿参数的推理视觉模型,可在自动驾驶开发中统一生成轨迹、高层意图预测、场景理解与数据标注,替代此前各环节分立的模型。该模型支持在同一套表示上对比相关输出、排查模型行为,并复用至整个开发流程。
MIT 等机构的一项研究发现,可解释 AI 对皮肤疾病诊断的辅助效果取决于使用者的医学知识水平:非专家的诊断准确率虽有提升,但主要源于对模型的顺从,他们无论解释对错都会信任基于 LLM 的解释,且解释越模糊笼统越觉得有说服力;而临床医生不受错误 AI 解释干扰,只在仅给出模型预测、不带解释时表现最好。
Google DeepMind 发布面向机器人的具身推理模型 Gemini Robotics ER 2,作为高层“大脑”负责对话、理解物理世界并规划多步任务,再把电机执行交给底层 VLA 模型。
推荐理由:Gemini Robotics ER 2 给出了多机器人协作与视频进度追踪的能力细节和开发者接入方式。
NVIDIA 发布开源视觉语言模型 Ising Calibration 1.5,可解读量子处理器的诊断输出并判断其调优方式,实现基于 AI 的 QPU 自动校准。该版本增强了上下文学习能力,无需先前的训练样本即可分析陌生的诊断结果。
DharmaOCR 在专为葡萄牙语设计的 OCR 基准上得分 0.925,超过 Mistral OCR4 的 0.798 和 Unlimited-OCR 的 0.7587。
MIT 等机构研究人员开发出 GIFT(Geometric Inference Feedback Tuning)系统,教视觉语言模型自动把 2D 设计转换为可直接执行的 CAD 程序,精度更高且只用约 20% 的算力。
Thinking Machines Lab 在 Hugging Face 发布 Inkling 系列开源多模态大模型,Inkling 为 975B 总参数、41B 激活参数的 MoE 模型,原生接受图像、文本和音频输入,支持 1M 上下文。
推荐理由:首个约1T参数、1M上下文的开源原生多模态模型,附完整部署配置与基准对比可供参考。
Hugging Face 与 Cerebras 展示了基于 Gemma 4 的实时语音到语音管线,采用模块化的开源架构。流程为 Nvidia 的 Parakeet 做语音识别,Gemma 4 VLM 在 Cerebras 上推理,再由阿里 Qwen3TTS 做文本转语音。