空间 / prism-ml / Ternary-Bonsai-27B-Demo

🤗prism-ml / Ternary-Bonsai-27B-Demo

27B参数三元权重大模型(权重取-1/0/1,约1.71 bits/weight)的聊天demo,通过Hugging Face推理API运行,支持流式生成文本。

作者
prism-ml
SDK
gradio
状态
运行中
收藏
22
运行模型
prism-ml/Ternary-Bonsai-27B-gguf

观测时间线