Hugging Face BlogFeb 12, 2025, 12:00 AM重要 75

From Chunks to Blocks: Accelerating Uploads and Downloads on the Hub

Hugging Face Hub 重構傳輸機制,從 sequential chunks 改為並行 blocks,大幅提升大檔案上傳與下載速度與穩定性。

Hugging Face 官方宣布重構其 `huggingface_hub` SDK 的傳輸架構。新架構從傳統的「分塊(Chunks)」改為「區塊(Blocks)」管理,支援並行傳輸、獨立區塊重試與更低的記憶體佔用。這項更新顯著提升了數 GB 甚至數百 GB 級模型(如 Safetensors)與數據集的上傳與下載速度,並增強了網路不穩定時的容錯能力。

想看英文原文 / 完整內容?

前往 Hugging Face Blog 原文 →

摘要由 AI 整理,以原文為準。