SummFlow 2026-05-28 Hugging Face

MiniCPM5-1B-GGUF (OpenBMB)

1B 模型 GGUF 量化,本地 agent 与边缘部署用

入选理由
MiniCPM5-1B GGUF格式即下即用,1B参数长上下文+工具调用,多项优化达SOTA,推荐用于本地部署。
对位
对位 LFM2.5-1.2B / Qwen3.5-0.8B
适合
本地工具调用 agent / 边缘推理与桌面宠物
不适合
高吞吐量线上服务
规模
1B · 128k
授权
apache-2.0 · 可商用
框架
llama.cpp / ollama / LM Studio
可信度
RL+OPD 训练带来平均分 +16、超长回复率 ↓29pp;1B 级工具调用/推理 SOTA

社区实测

在 1B 参数级开源模型中综合基准得分最高,工具调用与代码生成是其相对突出的长板。

  • 1B 规模下的端侧/本地部署,模型仅约 1.2GB,适合资源受限场景
  • 原生 128K 长上下文支持,同一检查点提供 Think/No Think 双模式
  • 覆盖主流推理后端(llama.cpp、vLLM、Ollama 等)的开箱即用部署指引
  • 相比前代 MiniCPM-V 4.6 1.3B,输出 token 消耗更高(约 2.3 倍),在按 token 计费或缓存敏感场景需留意

截至 2026-06-19

快速上手

ollama run hf.co/openbmb/MiniCPM5-1B-GGUF