LiteLLM 记录了 576,967 月访问量,月度环比增长为 +7.9%,定价为免费增值,定价请咨询。Promptr 记录了 0 月访问量,增长率为 0%,定价为 Pay-as-you-go。
| 维度 / 指标 | ![]() | |
|---|---|---|
| 官方域名 | litellm.ai | promptr.dev |
| 定价模式 | 免费增值,定价请咨询 | Pay-as-you-go |
| 月访问量 | 57.7万 (576,967) | 0 (0) |
| 月度环比流量变化 | +4.25万 (+7.9%) | 0 (0%) |
| 主要市场与份额 | 🇺🇸 美国 (27.9%) | 🌐 全球 (—) |
| 直接访问 / 月 | 22.9万 | 0 |
| 用户评分 | 4.8 | 3.6 |
| 支持的平台 | 网站 | 网站 |

一个开源 AI 网关,接入 100 多个 LLM 提供商
用一套请求格式调用 100 多个提供商和 1,800 多个模型,切换模型无须修改应用代码。
为团队、项目或应用签发限定范围的密钥,设置月度支出上限,清晰看到谁在用、花了多少。
在多个部署间分配流量,失败时自动重试,某个模型或提供商宕机时回退到备选。
用面板查看请求量、Token 数与各模型成本,并支持日志与分析工具集成。
用一次 REST 调用压缩 LLM 提示词,降低 token 成本
把提示词发往单一 REST 接口,即可取回纯文本的精简版本,直接交给模型使用。
供应商表示 LLM 输入成本最多可降低 40%,并以示例展示某提示词减少 45%。
提供 curl、Python、JavaScript、C# 的复制即用示例,集成只需几分钟而非数天。
用标签包住段落,即可将其排除在压缩之外,或为该区块指定特定压缩比例。

专项更强Hosts high-performance open-weight models directly on dedicated serverless infrastructure, but does not route across external providers.
专项更强Hosts high-performance open-weight models directly on dedicated serverless infrastructure, but does not route across external providers.
通过 API 网关提供自动模型故障转移与预算管理,但开源自定义性较低。
免费 / 开源Unsloth is an open-source toolkit for running and training large language models locally. It provides faster, more memory-efficient fine-tuning, a local chat and agent environment with browser use, image and video generation, and an OpenAI-compatible API your existing tools can connect to.
免费 / 开源Unsloth is an open-source toolkit for running and training large language models locally. It provides faster, more memory-efficient fine-tuning, a local chat and agent environment with browser use, image and video generation, and an OpenAI-compatible API your existing tools can connect to.

Unified LLM gateway with failover and analytics, but offers less robust open-source developer SDK support.
提供进阶的企业级可观测性与安全防护工具,但缺乏 LiteLLM 那种轻量、自托管代理服务器的简便性。

免费 / 开源用可恢复的上下文压缩与智能模型路由,削减 AI Agent 词元成本
免费 / 开源一个用来统一 LLM 供应商的开源替代方案,但中间件整合的生态系较不那么丰富。
免费 / 开源Honcho is an open-source memory layer for AI agents. It ingests messages, indexes them, and runs background reasoning so agents can recall who a user is, what happened before, and what to do next — across sessions, tools, and machines.

免费 / 开源Open-source request routing with built-in evaluations, but has a smaller community and fewer pre-built provider connectors.
免费 / 开源Open-source request routing with built-in evaluations, but has a smaller community and fewer pre-built provider connectors.
专项更强擅长请求缓存、监控与成本分析,但主要作用是代理监控器而非路由器。