跳轉到主要內容
LiteLLM 是一個開放原始碼 LLM 閘道,提供統一 API,可連接 100 多個模型提供者。透過 LiteLLM 路由 OpenClaw,即可集中追蹤成本、記錄日誌、使用具花費上限的虛擬金鑰,以及在不變更 OpenClaw 設定的情況下進行後端容錯移轉。

快速開始

openclaw onboard --auth-choice litellm-api-key
若要針對遠端代理進行非互動式設定,請明確傳入代理 URL:
openclaw onboard --non-interactive --accept-risk --auth-choice litellm-api-key \
  --litellm-api-key "$LITELLM_API_KEY" --custom-base-url "https://litellm.example/v1"

設定

{
  models: {
    providers: {
      litellm: {
        baseUrl: "http://localhost:4000",
        apiKey: "${LITELLM_API_KEY}",
        api: "openai-completions",
        models: [
          {
            id: "claude-opus-4-6",
            name: "Claude Opus 4.6",
            reasoning: true,
            input: ["text", "image"],
            contextWindow: 200000,
            maxTokens: 64000,
          },
          {
            id: "gpt-4o",
            name: "GPT-4o",
            reasoning: false,
            input: ["text", "image"],
            contextWindow: 128000,
            maxTokens: 8192,
          },
        ],
      },
    },
  },
  agents: {
    defaults: {
      model: { primary: "litellm/claude-opus-4-6" },
    },
  },
}
入門設定寫入的預設模型是 litellm/claude-opus-4-6

圖像生成

LiteLLM 可以透過 OpenAI 相容的 /images/generations/images/edits 路由支援 image_generate 工具。預設圖像模型是 gpt-image-2;可在 agents.defaults.imageGenerationModel 下設定不同模型:
{
  models: {
    providers: {
      litellm: {
        baseUrl: "http://localhost:4000",
        apiKey: "${LITELLM_API_KEY}",
      },
    },
  },
  agents: {
    defaults: {
      imageGenerationModel: {
        primary: "litellm/gpt-image-2",
        timeoutMs: 180_000,
      },
    },
  },
}
Loopback LiteLLM URL(http://localhost:4000127.0.0.1::1host.docker.internal)不需要全域私有網路覆寫即可運作。若是託管於區域網路的代理,請設定 models.providers.litellm.request.allowPrivateNetwork: true,因為 API 金鑰會傳送到該主機。

進階

為 OpenClaw 建立具花費上限的專用金鑰:
curl -X POST "http://localhost:4000/key/generate" \
  -H "Authorization: Bearer $LITELLM_MASTER_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "key_alias": "openclaw",
    "max_budget": 50.00,
    "budget_duration": "monthly"
  }'
將產生的金鑰作為 LITELLM_API_KEY 使用。
LiteLLM 可以將模型請求路由到不同後端。請在 LiteLLM config.yaml 中設定:
model_list:
  - model_name: claude-opus-4-6
    litellm_params:
      model: claude-opus-4-6
      api_key: os.environ/ANTHROPIC_API_KEY

  - model_name: gpt-4o
    litellm_params:
      model: gpt-4o
      api_key: os.environ/OPENAI_API_KEY
OpenClaw 會持續請求 claude-opus-4-6;LiteLLM 會處理路由。
# Key info
curl "http://localhost:4000/key/info" \
  -H "Authorization: Bearer sk-litellm-key"

# Spend logs
curl "http://localhost:4000/spend/logs" \
  -H "Authorization: Bearer $LITELLM_MASTER_KEY"
  • LiteLLM 預設在 http://localhost:4000 上執行。
  • OpenClaw 透過 LiteLLM 的代理式 OpenAI 相容 /v1 端點連線。
  • 透過已設定的 LiteLLM base URL 時,不會套用僅限原生 OpenAI 的請求塑形: 沒有 service_tier、沒有 Responses store、沒有提示快取提示,也沒有 OpenAI reasoning-effort 酬載塑形。
  • 隱藏的 OpenClaw 歸因標頭(originatorversionUser-Agent)只會傳送至 已驗證的原生 OpenAI 端點,因此不會注入到自訂 LiteLLM base URL。
如需一般提供者設定與容錯移轉行為,請參閱模型提供者

相關

LiteLLM 文件

官方 LiteLLM 文件與 API 參考。

模型選擇

所有提供者、模型參照與容錯移轉行為的概覽。

設定

完整設定參考。

模型

如何選擇和設定模型。