LiteLLM 每月有 576,967 次造訪,月增率 +7.9%,定價模式為免費增值、需聯絡報價。Raindrop 每月有 42,807 次造訪,成長率 -18.4%,定價模式為免費試用、付費、需聯絡報價。

在用戶之前發現並修好 AI Agent 的問題
| 面向/指標 | ![]() | ![]() |
|---|---|---|
| 官方網域 | litellm.ai | raindrop.ai |
| 定價模式 | 免費增值、需聯絡報價 | 免費試用、付費、需聯絡報價 |
| 每月造訪次數 | 57.7萬 (576,967) | 4.28萬 (42,807) |
| 月流量變化量 | +4.25萬 (+7.9%) | -9630 (-18.4%) |
| 主要市場與市佔 | 🇺🇸 美國 (27.9%) | 🇺🇸 美國 (77.1%) |
| 每月直接造訪 | 22.9萬 | 2.36萬 |
| 使用者評分 | 4.8 | 4.4 |
| 支援平台 | 網站 | 網站 |

一個開源 AI 閘道,接入 100 多個 LLM 供應商
用一套請求格式呼叫 100 多個供應商與 1,800 多個模型,切換模型無須修改應用程式碼。
為團隊、專案或應用簽發限定範圍的金鑰,設定每月支出上限,清楚看到誰在用、花了多少。
在多個部署間分配流量,失敗時自動重試,某個模型或供應商故障時回退到備選。
用面板查看請求量、Token 數與各模型成本,並支援日誌與分析工具整合。

在用戶之前發現並修好 AI Agent 的問題
查看一次執行中的每則訊息、工具呼叫與決策,包含輸入、輸出與耗時,精確鎖定問題環節。
把反覆出現的故障歸併成 issue,附上嚴重程度、受影響用戶、最後出現時間與信心分數,取代零散告警。
由 Agent 負責調查並提供後續自動化,涵蓋 Slack、網頁端與 MCP,讓除錯發生在團隊本來就在用的地方。
在 pull request 上針對改動執行情境,並與真實流量比對,合併前攔截回歸。

專項更強Hosts high-performance open-weight models directly on dedicated serverless infrastructure, but does not route across external providers.
專項更強Hosts high-performance open-weight models directly on dedicated serverless infrastructure, but does not route across external providers.
透過 API 閘道器提供自動模型備援切換與預算管理,但開源自訂性較低。

Unified LLM gateway with failover and analytics, but offers less robust open-source developer SDK support.

免費 / 開源面向生產級 AI 的代理可觀測性、評估與持續改進平台
提供進階的企業級可觀測性與安全防護工具,但缺乏 LiteLLM 那種輕量、自架代理伺服器的簡便性。
免費 / 開源一個用來統一 LLM 供應商的開源替代方案,但中介軟體整合的生態系較不那麼豐富。
免費 / 開源打造、模擬、評估並監控能自我改進的 AI 代理

免費 / 開源Maxim AI is a platform for evaluating, testing, and monitoring AI applications, and the home of Bifrost, an open-source LLM gateway. It helps teams ship reliable AI features with tracing, evaluation, agent simulation, and production observability.
免費 / 開源Maxim AI is a platform for evaluating, testing, and monitoring AI applications, and the home of Bifrost, an open-source LLM gateway. It helps teams ship reliable AI features with tracing, evaluation, agent simulation, and production observability.

免費 / 開源Open-source request routing with built-in evaluations, but has a smaller community and fewer pre-built provider connectors.