LiteLLM
LiteLLM 是一款開源 LLM 閘道,提供統一 API 連接超過 100 個模型供應商。將 OpenClaw 路由透過 LiteLLM,即可獲得集中式費用追蹤、日誌記錄,以及在不更改 OpenClaw 設定的情況下切換後端的靈活性。
為什麼搭配 OpenClaw 使用 LiteLLM?
- 費用追蹤 — 精確掌握 OpenClaw 在所有模型上的花費
- 模型路由 — 在 Claude、GPT-4、Gemini、Bedrock 之間切換而不需改設定
- 虛擬金鑰 — 為 OpenClaw 建立有花費上限的金鑰
- 日誌記錄 — 完整的請求/回應日誌,方便除錯
- 備援機制 — 主要供應商故障時自動切換
快速開始
透過新手引導
openclaw onboard --auth-choice litellm-api-key
手動設定
- 啟動 LiteLLM Proxy:
pip install 'litellm[proxy]'
litellm --model claude-opus-4-6
- 將 OpenClaw 指向 LiteLLM:
export LITELLM_API_KEY="your-litellm-key"
openclaw
完成。OpenClaw 現在會透過 LiteLLM 路由。
設定
環境變數
export LITELLM_API_KEY="sk-litellm-key"
設定檔
{
models: {
providers: {
litellm: {
baseUrl: "http://localhost:4000",
apiKey: "${LITELLM_API_KEY}",
api: "openai-completions",
models: [
{
id: "claude-opus-4-6",
name: "Claude Opus 4.6",
reasoning: true,
input: ["text", "image"],
contextWindow: 200000,
maxTokens: 64000,
},
{
id: "gpt-4o",
name: "GPT-4o",
reasoning: false,
input: ["text", "image"],
contextWindow: 128000,
maxTokens: 8192,
},
],
},
},
},
agents: {
defaults: {
model: { primary: "litellm/claude-opus-4-6" },
},
},
}
虛擬金鑰
為 OpenClaw 建立專用金鑰並設定花費上限:
curl -X POST "http://localhost:4000/key/generate" \
-H "Authorization: Bearer $LITELLM_MASTER_KEY" \
-H "Content-Type: application/json" \
-d '{
"key_alias": "openclaw",
"max_budget": 50.00,
"budget_duration": "monthly"
}'
將產生的金鑰作為 LITELLM_API_KEY 使用。
模型路由
LiteLLM 可以將模型請求路由到不同的後端。在 LiteLLM 的 config.yaml 中設定:
model_list:
- model_name: claude-opus-4-6
litellm_params:
model: claude-opus-4-6
api_key: os.environ/ANTHROPIC_API_KEY
- model_name: gpt-4o
litellm_params:
model: gpt-4o
api_key: os.environ/OPENAI_API_KEY
OpenClaw 持續請求 claude-opus-4-6 — LiteLLM 負責處理路由。
查看用量
查看 LiteLLM 的儀表板或 API:
# 金鑰資訊
curl "http://localhost:4000/key/info" \
-H "Authorization: Bearer sk-litellm-key"
# 花費紀錄
curl "http://localhost:4000/spend/logs" \
-H "Authorization: Bearer $LITELLM_MASTER_KEY"
注意事項
- LiteLLM 預設在
http://localhost:4000運行 - OpenClaw 透過 OpenAI 相容的
/v1/chat/completions端點連接 - 所有 OpenClaw 功能都可透過 LiteLLM 運作,沒有任何限制