The Local LLM Index / Quantization & Formats / #196

HaujetZhao/Qwen3-ASR-GGUF

by HaujetZhao · Quantization & Formats · updated 4mo ago

将 Qwen3-ASR 的 LLM 部分导出为 GGUF,用 llama.cpp 进行加速推理。后者支持 Vulkan 和 Cuda 加速。

34
momentum
231
stars
35
forks
#196
rank
View on GitHub →