Hugging Face BlogJun 22, 2022, 12:00 AM
Convert Transformers to ONNX with Hugging Face Optimum
介紹如何使用 Hugging Face Optimum 工具輕鬆將 Transformers 模型轉換為 ONNX 格式,以大幅提升推理效能。
本文介紹 Hugging Face 推出的一站式硬體優化工具包 Optimum,展示如何將 Transformers 模型轉換為 ONNX 格式。透過簡單的 optimum-cli 命令行工具或 Python API,開發者即可完成轉換,並利用 ONNX Runtime 在各種硬體上實現顯著的推理加速與量化優化,解決過去手動轉換繁瑣且易出錯的痛點。
想看英文原文 / 完整內容?
前往 Hugging Face Blog 原文 →摘要由 AI 整理,以原文為準。