Bonsai-27B-mlx-1bit (Prism ML)
1-bit 27B 模型, 可在手机和笔记本本地运行推理
~4.1GB 1-bit许可 可商用任务 文本生成最近核对 2026-07-22
- 格式
- 1-bit
- 文件
- ~3.5GB
- 运行内存
- ~4.1GB–5.3GB
- 运行时
- MLX_LM
- 下载
- 23
仅 safetensors · 无 pickle 加载风险
快速上手示例
mlx_lm.generate --model prism-ml/Bonsai-27B-mlx-1bit 依赖版本和硬件参数请以源仓库说明为准。
适合与不适合
独立证据与社区反馈
1-bit 技术方向引发好奇,但 27B 实测数据极少——社区对 8B 版本的失望让更大版本的能力存疑
- 1-bit 27B 仅 3.9GB,宣称可部署在手机上,降低了大模型的本地运行门槛
- llama.cpp 上的 1-bit 推理性能令人满意
- 1-bit 量化可能过度损害模型能力,8B 版本实测远逊于同量级 Gemma-4-E2B
- 实际输出质量难以评判,1-bit 模型的可用性仍有待验证
- 三元(Bonsai)版本表现甚至比 1-bit 版本更差
- 独立评测PrismML — Concentrating intelligence
- 社区实测PrismML — Announcing 1-bit Bonsai: The First Commercially Viable 1- ...
- 社区实测Bonsai-8B is MUCH dumber than Gemma-4-E2B : r ...
- 社区实测You guys seen this? 1-bit model with an MMLU-R of 65.7, 8B params
可信度公布15项思维模式基准平均76.11分,保留FP16的89.5%,含详细部署说明
完整规格
下载动量
30天下载 23 → 25.3k
观测时间线
模型家族
- Qwen3.6-27B
- 量化 Bonsai-27B (Prism ML)
- 量化 Bonsai-27B-mlx-1bit (Prism ML)
- 量化 Qwen3.6-27B (OBLITERATUS)
- LoRA Qwen3.6-27b-Fable5 (hotdogs)
- 量化 Qwen3.6-27B-GGUF (unsloth)
- 量化 Qwen3.6-27B-MTP-pi-tune (bytkim)
- 量化 Qwen3.6-27B-OptiQ-4bit (mlx-community)
- LoRA Qwopus3.6-27B-v2-MTP-GGUF (Jackrong)
- 量化 Ternary-Bonsai-27B (Prism ML)