專項更強由 DeepSeek-V4 與 R1 驅動的高效開源權重與託管推理 AI,token 成本極低。
Groq 每月有 3,987,936 次造訪,月增率 +10%,定價模式為付費。LiteLLM 每月有 576,967 次造訪,成長率 +7.9%,定價模式為免費增值、需聯絡報價。
| 面向/指標 | ![]() | ![]() |
|---|---|---|
| 官方網域 | groq.com | litellm.ai |
| 定價模式 | 付費 | 免費增值、需聯絡報價 |
| 每月造訪次數 | 398.79萬 (3,987,936) | 57.7萬 (576,967) |
| 月流量變化量 | +36.27萬 (+10%) | +4.25萬 (+7.9%) |
| 主要市場與市佔 | 🇮🇳 印度 (19.3%) | 🇺🇸 美國 (27.9%) |
| 每月直接造訪 | 170.25萬 | 22.9萬 |
| 使用者評分 | 4.7 | 4.8 |
| 支援平台 | 網站 | 網站 |

基於 LPU 與 LPX 平台的超高速 AI 推論
專為推論而非訓練設計的自研加速器,針對極低延遲進行調校。
託管 Llama、Mixtral、Gemma 等熱門開源模型,以及 Whisper 語音模型。
與常見 OpenAI 風格請求格式高度相容,方便快速整合。
提供 Whisper 自動語音辨識與文字轉語音能力,適合語音應用。

一個開源 AI 閘道,接入 100 多個 LLM 供應商
用一套請求格式呼叫 100 多個供應商與 1,800 多個模型,切換模型無須修改應用程式碼。
為團隊、專案或應用簽發限定範圍的金鑰,設定每月支出上限,清楚看到誰在用、花了多少。
在多個部署間分配流量,失敗時自動重試,某個模型或供應商故障時回退到備選。
用面板查看請求量、Token 數與各模型成本,並支援日誌與分析工具整合。
專項更強由 DeepSeek-V4 與 R1 驅動的高效開源權重與託管推理 AI,token 成本極低。

專項更強Proprietary frontier models with powerful reasoning and multimodal features, but lacking open-weight model hosting and custom inference speeds.

專項更強Google 的快速原型開發 IDE 與開發者 API 工作台,用於建構以 Gemini 模型為基礎的多模態應用程式。

專項更強Hosts high-performance open-weight models directly on dedicated serverless infrastructure, but does not route across external providers.
專項更強Hosts high-performance open-weight models directly on dedicated serverless infrastructure, but does not route across external providers.
透過 API 閘道器提供自動模型備援切換與預算管理,但開源自訂性較低。


Unified LLM gateway with failover and analytics, but offers less robust open-source developer SDK support.

免費 / 開源Decentralized serverless inference platform hosting open-source models, offering lower costs but less enterprise reliability guarantees.