国产Apache 2.0
GLM-4-9B
智谱 GLM-4 开源对话模型（9B），中英文能力出色；同系列旗舰开源见条目 GLM-5.1
智谱 AI·9.4B 参数·Dense·发布于 2024-06-04
你的硬件评估
正在检测硬件...
❓ 未知
量化版本对比（GGUF / 本地运行）
磁盘约：该量化档典型 GGUF 单文件占用（未填 fileSize 时用同档显存约值代替）。 所需显存：在 GPU 上跑该档的约需（权重 + KV 等余量），站内人工标定。
| 格式 | 位宽 | 磁盘约 | 所需显存 | 质量 | 预估速度 | 状态 |
|---|---|---|---|---|---|---|
| Q4_K_M | 4-bit | 5.7 GB | 5.7 GB | 良好 | — | ❓ 未知 |
| Q6_K | 6-bit | 7.3 GB | 7.3 GB | 优秀 | — | ❓ 未知 |
| Q8_0 | 8-bit | 9.7 GB | 9.7 GB | 优秀 | — | ❓ 未知 |
| F16 | 16-bit | 18.8 GB | 18.8 GB | 无损 | — | ❓ 未知 |
显存需求一览
柱状长度为各档「所需显存」相对比例。
Q4_K_M
5.7 GB
Q6_K
7.3 GB
Q8_0
9.7 GB
F16
18.8 GB
参数量
9.4B
上下文长度
128K tokens
架构
Dense
最低显存
5.7 GB
Q4_K_M · 本地运行约需
量化选项
4 种
适用场景
对话中文
资源链接
推荐硬件配置
Q4_K_M→建议 ≥ 7 GB 显存（模型 5.7 GB + 15% 余量）
Q6_K→建议 ≥ 9 GB 显存（模型 7.3 GB + 15% 余量）
Q8_0→建议 ≥ 12 GB 显存（模型 9.7 GB + 15% 余量）
F16→建议 ≥ 22 GB 显存（模型 18.8 GB + 15% 余量）
延伸阅读
相关模型
同系列模型