按显存划分的最佳本地大模型

4 GB 显存的最佳大模型

选择你的显存大小。我们按任务为推荐量化下能放得下的所有收录模型排名,并展示升一档能解锁什么。

作者: Jakub Rusinowski · 最后更新:

显存档位4 GB例如 RTX 5050, RTX 5060, RTX 4060
放得下的模型39完全载入显存
综合最佳83Shieldstral 1.0 3B
能放下的最大模型2.4 GBGemma 3 4B Instruct

4 GB 下各任务的最佳模型

评分为 0–100 的任务质量分;速度按 RTX 5050 估算。

放得下的最强模型

按逻辑与编程排名的前 15 个

模型显存在 RTX 5050 上的速度(估算)评分
Shieldstral 1.0 3B
Shieldstral · Q4_K_M
2.3 GB~81 tok/s83
LFM3 1.7B
Liquid LFM3 · Q4_K_M
1 GB~159 tok/s83
LFM3-VL 2B
Liquid LFM3 · Q4_K_M
1.2 GB~149 tok/s83
Gemma 3 4B Instruct
Gemma 3 · Q4_K_M
2.4 GB~83 tok/s80
Phi-4 Mini (3.8B)
Phi-4 Mini · Q4_K_M
2.3 GB~79 tok/s79
Qwen 3.5 4B
Qwen 3.5 · Q4_K_M
2.4 GB~86 tok/s79
VibeThinker 3B
VibeThinker · Q4_K_M
1.9 GB~94 tok/s79
Phi 3.5 Mini
Phi 3.5 Family · Q4_K_M
2.3 GB~82 tok/s79
BitNet b1.58 3B
BitNet b1.58 · 1.58-bit
0.7 GB~160 tok/s74
StarCoder 2 3B
StarCoder 2 · Q4_K_M
1.8 GB~107 tok/s74
EXAONE 3.5 2.4B
EXAONE 3.5 · Q4_K_M
1.4 GB~115 tok/s73
Aya 3B
Aya 3B (Tiny Aya) · Q4_K_M
1.8 GB~96 tok/s72
Qwen 3.5 2B
Qwen 3.5 · Q4_K_M
1.2 GB~124 tok/s72
Granite 4.1 3B
IBM Granite 4.1 · Q4_K_M
1.8 GB~96 tok/s71
Ministral 3B
Ministral · Q4_K_M
2.2 GB~84 tok/s71

FAQ

What LLMs run well with 4 GB VRAM?

Shieldstral, Liquid LFM3, Liquid LFM3, Gemma 3, Phi-4 Mini all fit in 4 GB VRAM.

Which GPUs have 4 GB VRAM?

NVIDIA GeForce RTX 5050, NVIDIA GeForce RTX 5060, NVIDIA GeForce RTX 4060, AMD Radeon RX 9060 XT 8GB.

各档位一览

显存可放下综合最佳
4 GB39Shieldstral 1.0 3B
6 GB67Granite 3.0 8B Instruct
8 GB88Granite 3.0 8B Instruct
10 GB101Qwen 2.5 14B Instruct
12 GB103Qwen 2.5 14B Instruct
16 GB113Qwen 2.5 14B Instruct
20 GB131Qwen 2.5 14B Instruct
24 GB156Qwen 2.5 Coder 32B
32 GB157Qwen 2.5 Coder 32B
48 GB163Qwen 2.5 72B Instruct
64 GB168Qwen 2.5 72B Instruct
80 GB178Qwen 2.5 72B Instruct
购买此硬件 Intel Arc B570 10GB — 10 GB VRAM · 150 W board power立即云端部署 RunPod 上的 RTX 4090 — 低至 $0.34/小时 · 价格核实于 2026-07

或在 Vast.ai 比较,低至 $0.35/小时 (typical low · varies)

作为亚马逊联盟成员,我们从符合条件的购买中获得收入。云 GPU 链接为推荐链接——我们可能获得佣金,您无需额外付费。