跳到正文
Hugging Face Blog·· 18 天前精选AI 评分70

Transformers 现在支持运行 llama.cpp quants

Transformers now runs llama.cpp quants

AI 导读

Hugging Face 的 Transformers 现在支持运行 GGUF 模型,允许用户使用适合笔记本电脑内存大小的检查点,通过熟悉的 Transformers API 进行生成。

推荐理由

原文给出了能力变化和开放入口,读者可以据此判断它会怎样改变现有工作流。

来源:Hugging Face Blog · huggingface.co