Hugging Face 提出 ProvenanceGuard:面向 MCP 智能体的来源感知事实核查
Hugging Face 发布论文 ProvenanceGuard,一种面向基于 MCP 的 LLM 智能体的来源感知事实性验证层,用于捕捉"跨来源混淆"——即某个说法在证据池中为真、却被归因到错误来源。
Hugging Face 发布论文 ProvenanceGuard,一种面向基于 MCP 的 LLM 智能体的来源感知事实性验证层,用于捕捉"跨来源混淆"——即某个说法在证据池中为真、却被归因到错误来源。
IBM Research 与 UC Berkeley 合作,将 MAST(多智能体系统失效分类法)应用于 ITBench 的 SRE 场景,把原始执行轨迹转成结构化失效特征,共标注 310 条轨迹,覆盖 Gemini-3-Flash、Kimi-K2 和 GPT-OSS-120B 三类模型。
Hugging Face 推出 FilBench,一个覆盖 Tagalog、Filipino 和 Cebuano 三种菲律宾语言的评测套件,含文化知识、经典 NLP、阅读理解、生成四大类共 12 项任务,并基于 Lighteval 构建,已作为社区任务上线官方 Lighteval 仓库。
Hugging Face 推出 NPHardEval 排行榜,基于密歇根大学和罗格斯大学研究者开发的 NPHardEval 基准,通过计算复杂度类量化评估 LLM 推理能力。
Hugging Face 发布 Hallucinations Leaderboard,用 NQ Open、TriviaQA、TruthfulQA、XSum、CNN/DM、RACE、SQuADv2、FEVER 等基准评估 LLM 的幻觉表现,分数归一化到 [0,1]。