跳到正文
Hugging Face Blog·· 2024-09-20AI 评分44

用 Optimum-Intel 和 OpenVINO GenAI 优化并部署 Hugging Face Transformers 模型

Optimize and deploy with Optimum-Intel and OpenVINO GenAI

AI 导读

Hugging Face 介绍了用 Optimum-Intel 和 OpenVINO GenAI 优化并部署 Transformers 模型的完整流程,涵盖导出 OpenVINO IR、权重量化与 GenAI API 部署。

来源:Hugging Face Blog · huggingface.co