国际MIT
Phi-4-14B
微软 Phi-4 14B,小模型大智慧,推理和数学能力突出
Microsoft·14.7B 参数·Dense·发布于 2024-12-12
你的硬件评估
正在检测硬件...
❓ 未知
量化版本对比(GGUF / 本地运行)
磁盘约:该量化档典型 GGUF 单文件占用(未填 fileSize 时用同档显存约值代替)。 所需显存:在 GPU 上跑该档的约需(权重 + KV 等余量),站内人工标定。
| 格式 | 位宽 | 磁盘约 | 所需显存 | 质量 | 预估速度 | 状态 |
|---|---|---|---|---|---|---|
| Q4_K_M | 4-bit | 9 GB | 9 GB | 良好 | — | ❓ 未知 |
| Q6_K | 6-bit | 11.6 GB | 11.6 GB | 优秀 | — | ❓ 未知 |
| Q8_0 | 8-bit | 15.1 GB | 15.1 GB | 优秀 | — | ❓ 未知 |
| F16 | 16-bit | 29.4 GB | 29.4 GB | 无损 | — | ❓ 未知 |
显存需求一览
柱状长度为各档「所需显存」相对比例。
Q4_K_M
9 GB
Q6_K
11.6 GB
Q8_0
15.1 GB
F16
29.4 GB
参数量
14.7B
上下文长度
16K tokens
架构
Dense
最低显存
9 GB
Q4_K_M · 本地运行约需
量化选项
4 种
适用场景
推理数学代码
资源链接
推荐硬件配置
Q4_K_M→建议 ≥ 11 GB 显存(模型 9 GB + 15% 余量)
Q6_K→建议 ≥ 14 GB 显存(模型 11.6 GB + 15% 余量)
Q8_0→建议 ≥ 18 GB 显存(模型 15.1 GB + 15% 余量)
F16→建议 ≥ 34 GB 显存(模型 29.4 GB + 15% 余量)