跳到正文

#Hugging Face

今日 2 条
7月16日周二
7月11日周四
7月10日周三
  1. Hugging Face Blog32

    Hugging Face 在 Dataset Hub 试验用 Presidio 自动检测 PII

    Hugging Face 正在 Dataset Hub 上试验一项新功能,使用开源 PII 检测工具 Presidio 生成报告,估算数据集中个人信息的存在情况。该功能面向两类数据集:PII-Masking-300k 这类标注型 PII 数据集,以及常达 TB 级、经网页爬取得到的预训练数据集。报告可帮助开发者在训练前决定是否进一步过滤数据,也便于数据集所有者验证自身的 PII 过滤流程。

7月9日周二
7月8日周一
  1. Hugging Face Blog25

    Hugging Face 为 Dataset Hub 推出四项数据集搜索新功能

    Hugging Face 为 Dataset Hub 的 Dataset Search 上线四项新功能:按模态(文本、图像、音频、表格等)、按行数规模、按存储格式(如 Parquet、WebDataset)以及按兼容库(如 Pandas、Dask、Datasets)筛选数据集。行数超过 5GB 的超大数据集将以首 5GB 内容估算总行数,四项筛选条件还可与语言、任务、许可证等已有过滤器组合使用。

7月1日周一
6月27日周四
6月25日周二
6月24日周一
  1. Hugging Face Blog24

    Hugging Face 通讯:为什么数据质量决定 AI 成败

    Hugging Face 发文探讨数据质量为何是 AI 开发的关键,提出高质量数据应具备相关性、完整性、时效性与偏见缓解等特征。文章以 Reddit 与 Google 的 RAG 搜索合作失准(如推荐"给披萨加胶水")为例,说明低质数据会拖累模型表现。作者主张将数据质量贯穿 AI 全生命周期,通过去重、内容过滤与人工反馈等策管流程提升模型稳健性、效率与公平性。

6月20日周四
6月19日周三
6月13日周四
6月12日周三
  1. Hugging Face Blog43

    Hugging Face TRL 推出 RLOO Trainer,把强化学习带回 RLHF

    Hugging Face 在 TRL 中推出 RLOO Trainer,一种作为 PPO 替代方案的在线 RLHF 训练算法。RLOO 显存占用比 PPO 少约 50-70%,1B 模型上速度是 PPO 的 2 倍,6.9B 模型上最高 3 倍,且只需加载策略、参考策略和奖励模型 3 份模型。其回复胜率(由 GPT4 评判)与 PPO 相当,并持续优于 DPO 等离线方法。

6月7日周五
6月6日周四
6月5日周三
6月4日周二
5月31日周五
  1. Hugging Face Blog48

    Hugging Face 披露 Spaces 平台密钥遭未授权访问,已撤销相关 HF token

    Hugging Face 检测到其 Spaces 平台遭未授权访问,涉及 Spaces secrets,怀疑部分密钥已被读取。作为补救,官方已撤销这些 secrets 中的若干 HF token 并邮件通知相关用户,同时引入 KMS、移除 org token,并建议用户改用细粒度访问 token。该事件已上报执法机构和数据保护机构,公司正联合外部网络安全取证专家调查。

5月29日周三
5月28日周二
  1. Hugging Face Blog50

    用 Sentence Transformers 训练和微调嵌入模型

    Hugging Face 发布博客,介绍如何用 Sentence Transformers 训练和微调嵌入模型,也可从零训练新模型。训练流程涵盖数据集、损失函数、训练参数、评估器和 Trainer 五个组件,数据可来自 HF Hub 或本地 CSV、JSON、Parquet、Arrow、SQL;数据集列顺序须与所选损失函数匹配,且 "label" 或 "score" 列用于提供标签。

5月24日周五
5月22日周三
5月21日周二
  1. Hugging Face Blog25

    Hugging Face Spaces 推出 Dev Mode,支持一键连接 VS Code 和 SSH

    Hugging Face 为 Spaces 推出 Dev Mode,可一键通过 VS Code 或 SSH 直连 Space,直接在 Space 内编辑代码,无需再用 git 推送本地改动。该功能目前处于 beta 阶段,仅面向 PRO 订阅用户开放,在 Space 设置中启用后会自动重启,改完代码点 Refresh 即可测试,满意后再 commit 和 merge 保存。

  2. Hugging Face Blog35

    Hugging Face 与 Dell 推出 Dell Enterprise Hub,本地训练部署开源模型

    Hugging Face 发布 Dell Enterprise Hub,可在 Dell 平台上本地训练和部署开源模型,把数周的工程工作缩短到几分钟。该 Hub 汇集 Llama 3、Mixtral、Gemma 等模型,用户凭 HF 账号即可访问并按许可证或模型规模筛选,选定 Dell 平台和 GPU 数量后粘贴脚本即可部署为 API endpoint,微调同样在本地完成。

5月16日周四
5月14日周二
5月13日周一
  1. Hugging Face Blog70

    Hugging Face 发布 Transformers Agents 2.0

    Hugging Face 发布 Transformers Agents 2.0,在原有 agent 类型外新增可基于历史观测迭代的 agent,并将代码与常用属性设计得清晰、模块化,同时加入 agent 分享功能。

    推荐理由:官方给出新 Agent 框架的模块设计与 GAIA 榜单实测,读者可据此比较不同 LLM 引擎的 agent 表现。

5月9日周四
5月5日周日