跳到主要内容

vLLM vs LiteLLM

以下是从 11 个维度对 vLLM 和 LiteLLM 的详细对比。

vLLM

高性能 LLM 推理与服务引擎

价格
免费(BYOGPU)
GitHub Stars
87K+
开源
true
支持模型
主流模型(Llama, Mistral, Qwen 等)
上下文窗口
依模型而定
多文件编辑
false
Git 集成
false
MCP 支持
false
子代理
false
平台支持
Linux(需 GPU)
首发年份
2023
pip install vllm

LiteLLM

统一 LLM API 代理(100+ 模型接口)

价格
免费(BYOK)+ 企业版
GitHub Stars
54K+
开源
true
支持模型
100+ 模型(OpenAI, Anthropic, Google, 本地等)
上下文窗口
依模型而定
多文件编辑
false
Git 集成
false
MCP 支持
false
子代理
false
平台支持
macOS, Linux, Windows
首发年份
2023
pip install litellm

完整对比表

工具价格GitHub Stars开源支持模型上下文窗口多文件编辑Git 集成MCP 支持子代理
vLLM🔓
高性能 LLM 推理与服务引擎
免费(BYOGPU)87K+主流模型(Llama, Mistral, Qwen 等)依模型而定
LiteLLM🔓
统一 LLM API 代理(100+ 模型接口)
免费(BYOK)+ 企业版54K+100+ 模型(OpenAI, Anthropic, Google, 本地等)依模型而定

一键安装

vLLMpip install vllm
LiteLLMpip install litellm