模型 / Granite-4.2-3B-MLX-6bit (IBM)

Granite-4.2-3B-MLX-6bit (IBM)

Granite 4.2 3B MLX 6bit 量化,本地推理

作者 lmstudio-community

仓库标识lmstudio-community/granite-4.2-3b-MLX-6bit

显存未知许可 可商用任务 智能体最近核对 2026-09-04
运行内存
已有格式线索,但估算映射未支持,无法估算显存
运行时
MLX_LM
下载
115

仅 safetensors · 无 pickle 加载风险

Hugging Face 源仓库 ↗

快速上手示例

mlx_lm.generate --model lmstudio-community/granite-4.2-3b-MLX-6bit

依赖版本和硬件参数请以源仓库说明为准。

适合与不适合

入选理由
IBM Granite 4.2 3B的MLX 6bit量化版,可在Apple Silicon上本地运行,支持多语言、推理与工具调用,适合macOS用户快速部署。
对位
对位 Llama-3.2-3B、Qwen2.5-3B
适合
Apple Silicon 本地推理 / 工具调用与思维链测试
不适合
高吞吐生产服务

完整规格

规模
3B · 已有格式线索,但估算映射未支持,无法估算显存
授权
apache-2.0 · 可商用
框架
mlx_lm
血统
量化自 granite-4.2-3b
访问提示
Hugging Face 可能需要代理

下载动量

30天下载 188 → 268

观测时间线

模型家族

查看全部家族 →