归档 / 2026-05-21 / Granite-4.1-3B-GGUF (IBM)

Granite-4.1-3B-GGUF (IBM)

IBM Granite 4.1 3B GGUF量化，本地推理与边缘部署

部署

py LM Studio 搜索 granite-4.1-3b-GGUF 下载运行
py llama.cpp -m granite-4.1-3b-Q4_K_M.gguf

入选理由: GGUF格式可直接使用，但下载量低且无第三方评测，仅为量化重打包。
对位: 对位Phi-3-mini、Qwen2.5-3B
适合: 本地CPU推理 / 轻量级文本生成助手
不适合: 高精度推理或长上下文
规模: 3B · 未知
授权: Apache-2.0
框架: llama.cpp / LM Studio
可信度: IBM Granite系列，Apache-2.0许可，HuggingFace 582次下载

评分详情

Q1: 今天能接上用吗 5 / 5
Q2: 有可信证据吗 1 / 5
Q3: 是新东西吗 1 / 5
总分: 7

HuggingFace 原始数据 (抓取于 2026-05-21)

作者: lmstudio-community
任务类型: unknown
推理库: 未指定
下载: 582
点赞: 0
许可证: Apache-2.0
标签: gguf, base_model:ibm-granite/granite-4.1-3b, base_model:quantized:ibm-granite/granite-4.1-3b, license:apache-2.0, endpoints_compatible, region:us, conversational

探索