Hugging Face Storage 成为 SkyPilot 一级后端:零出站费跨云存储

Hugging Face 与 SkyPilot 联合宣布,Hugging Face Storage 正式成为 SkyPilot 的一级后端(store: hf)。开发者现在可以跨 20+ 云、Kubernetes 或本地集群运行 AI 任务,而模型和数据集通过 hf:// URL 直接挂载,无需拷贝、无需支付…

Hugging Face Storage 成为 SkyPilot 一级后端:零出站费跨云存储

一句话看懂:Hugging Face 与 SkyPilot 联合宣布,Hugging Face Storage 正式成为 SkyPilot 的一级后端(store: hf)。开发者现在可以跨 20+ 云、Kubernetes 或本地集群运行 AI 任务,而模型和数据集通过 hf:// URL 直接挂载,无需拷贝、无需支付跨云出站费用,训练和推理工作流变得更简洁、更省钱。

事件核心:发生了什么

2026 年 7 月 7 日,Hugging Face 与 SkyPilot 发布了这项集成。核心变化是:SkyPilot 的任务(训练、开发或推理)现在可以将 Hugging Face 上的 Bucket(可读写)或任意模型、数据集、Space 仓库(只读)作为本地文件挂载。开发者只需在 SkyPilot 配置文件中使用 hf:// URL 并设置已有的 HF_TOKEN,即可让任务在任意有 GPU 容量的集群上运行,数据按需读取,而不是先下载到云存储桶中。底层使用 FUSE 驱动 hf-mount 和 Xet 去重技术,只传输实际访问的数据块,首次读取保持本地磁盘缓存。

为什么重要

当前 AI 团队普遍面临“算力分布化”难题——GPU 容量分散在不同云厂商和节点上,而模型与数据集往往只存放在一个云的一个区域。传统做法需要在各云复制数据桶或承担高昂的跨云出站费用。Hugging Face Storage 承诺零出站费,让“数据挂载”替代“数据搬运”,从根本上解绑了存储位置与算力选择。这意味着团队可以更自由地利用手头所有 GPU(包括保留实例、按需实例、相邻云甚至本地集群),而不再为算力与存储不同云而支付隐性算力税。SkyPilot 作为调度器,支持 20+ 云、K8s 和 Slurm,此次集成让跨云资源池化与零成本数据访问形成闭环,是去中心化 AI 基础设施的重要一步。

对用户/开发者/创作者的影响

AI 开发者与训练团队:无需再为训练工作流准备多个云存储桶和密钥。模型和数据集依然管理在 Hub 上,训练脚本通过 hf:// 挂载后可直接在 AWS、GCP、Azure、Nebius、Lambda 等任意平台启动任务,降低运维复杂度。增量训练和检查点写入 xet-backed Bucket,节省存储成本。推理与服务部署:推理服务也无需提前拷贝模型,启动时挂载即可,适合多区域、多云的弹性部署。个人开发者和独立创作者:如果拥有 Hugging Face 账号和少量 GPU 资源(如单卡实例),可以更方便地在不同云之间迁移工作流,而不用烦恼数据搬家。唯一前提是任务环境须具备挂载能力(非特权容器已兼容)。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

值得关注的后续

1. 商业化与价格:Hugging Face Storage 目前承诺零出站费,但其存储和挂载服务未来是否有容量限制或付费层级,尚无更多披露。后续如果推出付费计划,需留意是否影响当前免费使用人群。
2. 竞品反应:类似跨云工作流工具(如 Dstack、Lambda 云原生方案)和对象存储供应商(如 Cloudflare R2、Backblaze)可能加速推出与 SkyPilot 的官方集成,以应对 Hugging Face 这一合作带来的生态优势。
3. 采用与生态扩大:目前集成仍依赖 FUSE 驱动的 hf-mount,对于需要高 IOPS 或低延迟数据加载的场景(如分布式训练大规模 checkpoint),其性能表现值得开发者实测和社区反馈。

来源:Hugging Face Blog

celebrityanime
celebrityanime
文章: 15506

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注