国际MIT

Phi-4-mini-3.8B

微软 Phi-4 Mini,3.8B 参数支持 128K 超长上下文,推理能力出色

Microsoft·3.8B 参数·Dense·发布于 2025-02-19

你的硬件评估

正在检测硬件...
未知

量化版本对比(GGUF / 本地运行)

磁盘约:该量化档典型 GGUF 单文件占用(未填 fileSize 时用同档显存约值代替)。 所需显存:在 GPU 上跑该档的约需(权重 + KV 等余量),站内人工标定。

格式位宽磁盘约所需显存质量预估速度状态
Q4_K_M4-bit2.3 GB2.3 GB
良好
未知
Q6_K6-bit3 GB3 GB
优秀
未知
Q8_08-bit3.9 GB3.9 GB
优秀
未知
F1616-bit7.6 GB7.6 GB
无损
未知

显存需求一览

柱状长度为各档「所需显存」相对比例。

Q4_K_M
2.3 GB
Q6_K
3 GB
Q8_0
3.9 GB
F16
7.6 GB
参数量

3.8B

上下文长度

128K tokens

架构

Dense

最低显存

2.3 GB

Q4_K_M · 本地运行约需

量化选项

4 种

适用场景

对话推理长文本

资源链接

推荐硬件配置

Q4_K_M建议 ≥ 3 GB 显存(模型 2.3 GB + 15% 余量)
Q6_K建议 ≥ 4 GB 显存(模型 3 GB + 15% 余量)
Q8_0建议 ≥ 5 GB 显存(模型 3.9 GB + 15% 余量)
F16建议 ≥ 9 GB 显存(模型 7.6 GB + 15% 余量)

延伸阅读

相关模型

同系列模型

其他Dense模型