Ollama vs llama.cpp
以下是从 11 个维度对 Ollama 和 llama.cpp 的详细对比。
Ollama
本地大模型运行工具，一键跑 LLM
- 价格
- 免费（本地运行）
- GitHub Stars
- 176K+
- 开源
- true
- 支持模型
- Llama, Mistral, Gemma, Qwen 等 100+ 模型
- 上下文窗口
- 依模型而定
- 多文件编辑
- false
- Git 集成
- false
- MCP 支持
- false
- 子代理
- false
- 平台支持
- macOS, Linux, Windows
- 首发年份
- 2023
curl -fsSL https://ollama.ai/install.sh | shllama.cpp
C/C++ 实现的 LLM 推理引擎
- 价格
- 免费（本地运行）
- GitHub Stars
- 121K+
- 开源
- true
- 支持模型
- GGUF 格式模型（Llama, Mistral, Qwen 等）
- 上下文窗口
- 可配置（最高 128K+）
- 多文件编辑
- false
- Git 集成
- false
- MCP 支持
- false
- 子代理
- false
- 平台支持
- macOS, Linux, Windows
- 首发年份
- 2023
brew install llama.cpp完整对比表
| 工具 | 价格 | GitHub Stars | 开源 | 支持模型 | 上下文窗口 | 多文件编辑 | Git 集成 | MCP 支持 | 子代理 |
|---|---|---|---|---|---|---|---|---|---|
Ollama🔓 本地大模型运行工具，一键跑 LLM | 免费（本地运行） | 176K+ | ✓ | Llama, Mistral, Gemma, Qwen 等 100+ 模型 | 依模型而定 | — | — | — | — |
llama.cpp🔓 C/C++ 实现的 LLM 推理引擎 | 免费（本地运行） | 121K+ | ✓ | GGUF 格式模型（Llama, Mistral, Qwen 等） | 可配置（最高 128K+） | — | — | — | — |
一键安装
Ollama
curl -fsSL https://ollama.ai/install.sh | shllama.cpp
brew install llama.cpp