此页是 2026-09-23 的观测快照,查看该模型当前信息 → /m/dealignai__bonsai-2-27b-ternary-crack-gguf/

归档 / 2026-09-23 / Bonsai-2-27B (dealignai)

Bonsai-2-27B (dealignai)

三元量化 27B GGUF，移除拒绝，单GPU可跑

入选理由: 7.2GB 的 27B 无审查三元量化模型，单卡可跑且支持视觉和推理模式；适合本地私有部署或拒答机制研究，注意合规使用。
对位: 对位 Qwen3.8-27B 三元量化
适合: 单 GPU 本地 27B 文本生成 / 无审查推理与视觉原型测试
不适合: 生产环境无审核部署
规模: 27B · 未知 · Q4 ~18GB / FP16 ~65GB
授权: Apache-2.0 · 需自查
框架: llama.cpp
血统: 量化自 Ternary-Bonsai-2-27B-gguf
可信度: HF 38k 下载；HarmBench-320 拒绝率 0%；MMLU 39.91%

快速上手示例

ollama run hf.co/dealignai/Bonsai-2-27B-Ternary-CRACK-GGUF

依赖版本和硬件参数请以源仓库说明为准。

评分详情

Q1: 今天能接上用吗 5 / 5
Q2: 有可信证据吗 3 / 5
Q3: 是新东西吗 1 / 5
总分: 9

HuggingFace 原始数据 (抓取于 2026-09-23)

作者: dealignai
任务类型: text-generation
推理库: llama.cpp
下载: 38,424
点赞: 125
许可证: Apache-2.0
标签: llama.cpp, gguf, ternary, 2-bit, llama-cpp, cuda, metal, on-device, hybrid-attention, prismml, bonsai, qwen3.5, abliterated, uncensored, crack, text-generation, base_model:Qwen/Qwen3.8-27B, base_model:quantized:Qwen/Qwen3.8-27B, license:apache-2.0, endpoints_compatible, region:us, conversational

探索