Caveman 每月有 171,826 次造訪,月增率 -15.5%,定價模式為免費增值、需聯絡報價。LiteLLM 每月有 576,967 次造訪,成長率 +7.9%,定價模式為免費增值、需聯絡報價。
| 面向/指標 | ![]() | ![]() |
|---|---|---|
| 官方網域 | caveman.so | litellm.ai |
| 定價模式 | 免費增值、需聯絡報價 | 免費增值、需聯絡報價 |
| 每月造訪次數 | 17.18萬 (171,826) | 57.7萬 (576,967) |
| 月流量變化量 | -3.16萬 (-15.5%) | +4.25萬 (+7.9%) |
| 主要市場與市佔 | 🇺🇸 美國 (30%) | 🇺🇸 美國 (27.9%) |
| 每月直接造訪 | 6.42萬 | 22.9萬 |
| 使用者評分 | 4.7 | 4.8 |
| 支援平台 | 網站 | 網站 |

用可還原的上下文壓縮與智慧模型路由,降低 AI Agent 權杖成本

一個開源 AI 閘道,接入 100 多個 LLM 供應商
用一套請求格式呼叫 100 多個供應商與 1,800 多個模型,切換模型無須修改應用程式碼。
為團隊、專案或應用簽發限定範圍的金鑰,設定每月支出上限,清楚看到誰在用、花了多少。
在多個部署間分配流量,失敗時自動重試,某個模型或供應商故障時回退到備選。
用面板查看請求量、Token 數與各模型成本,並支援日誌與分析工具整合。

專項更強Hosts high-performance open-weight models directly on dedicated serverless infrastructure, but does not route across external providers.
專項更強Hosts high-performance open-weight models directly on dedicated serverless infrastructure, but does not route across external providers.
免費 / 開源Runs parallel CLI coding agents in isolated worktrees, lacking dedicated context compression and cost routing tools.
透過 API 閘道器提供自動模型備援切換與預算管理,但開源自訂性較低。

Unified LLM gateway with failover and analytics, but offers less robust open-source developer SDK support.

專項更強為程式碼編寫代理提供企業級上下文引擎,但缺乏開源 Token 壓縮與自訂模型路由功能。
專項更強為程式碼編寫代理提供企業級上下文引擎,但缺乏開源 Token 壓縮與自訂模型路由功能。
提供進階的企業級可觀測性與安全防護工具,但缺乏 LiteLLM 那種輕量、自架代理伺服器的簡便性。
免費 / 開源一個用來統一 LLM 供應商的開源替代方案,但中介軟體整合的生態系較不那麼豐富。

免費 / 開源Provides an open-source Python framework for building model-agnostic agents without built-in context compression.
建立具備權限意識的上下文圖譜並將任務路由至模型,不過主要針對企業級代理工作流程。