LiteLLM は月間 576,967 訪問、前月比成長率 +7.9%、料金体系フリーミアム、料金は要問い合わせを記録しています。OpenLIT は月間 6,028 訪問、成長率 -18.3%、料金体系無料を記録しています。
100 以上の LLM プロバイダーをつなぐオープンソース AI ゲートウェイ
オープンソースで OpenTelemetry ネイティブな AI エージェント可観測性とハーネスエンジニアリングの基盤
| 項目 / 指標 | | |
|---|---|---|
| 公式ドメイン | litellm.ai | openlit.io |
| 料金モデル | フリーミアム、料金は要問い合わせ | 無料 |
| 月間訪問数 | 57.7万 (576,967) | 6028 (6,028) |
| 前月比トラフィック増減 | +4.25万 (+7.9%) | -1353 (-18.3%) |
| 主要市場とシェア | 🇺🇸 アメリカ合衆国 (27.9%) | 🇺🇸 アメリカ合衆国 (53.6%) |
| 月間ダイレクト訪問数 | 22.9万 | 2375 |
| ユーザー評価 | 4.8 | 4.7 |
| 対応プラットフォーム | ウェブサイト | ウェブサイト |
100 以上の LLM プロバイダーをつなぐオープンソース AI ゲートウェイ
1 つのリクエスト形式で 100 以上のプロバイダー、1,800 以上のモデルを呼び出し、アプリのコードを変えずにモデルを切り替えられます。
チーム、プロジェクト、アプリごとにスコープ付きキーを発行し、月次支出上限を設定して、誰がどれだけ使っているかを可視化します。
複数のデプロイにトラフィックを分散し、失敗時にリトライし、モデルやプロバイダーの障害時には自動で別の選択肢へ切り替えます。
リクエスト数、トークン数、モデル別コストをダッシュボードで確認でき、ログや分析ツールとの連携にも対応します。
オープンソースで OpenTelemetry ネイティブな AI エージェント可観測性とハーネスエンジニアリングの基盤
すべての LLM 呼び出し、ツール呼び出し、検索、エージェントステップを OpenTelemetry のトレースとメトリクスとして取得し、ユーザー、セッション、コスト、レイテンシ、カスタムメタデータで絞り込めます。
本番トラフィックや実験に対して LLM-as-a-judge、ヒューリスティック、人手レビューで採点し、正確性、関連性、安全性を継続的に測定します。
Prompt Hub でプロンプトを管理・バージョン管理し、新しいアプリコードを出さずにデプロイ、ロールバック、更新ができます。
OpenAI、Anthropic などの LLM API キーをコードベースの外にある暗号化された Vault に保管し、ローテーションできます。
即時アクセス可能な膨大なホスト型モデルカタログを提供しますが、セルフホスティングではなくサードパーティプラットフォームへの信頼が必要です。
無料・オープンソースオープン AI モデルをローカルでもクラウドでも実行・構築
特化型Hosts high-performance open-weight models directly on dedicated serverless infrastructure, but does not route across external providers.
特化型Hosts high-performance open-weight models directly on dedicated serverless infrastructure, but does not route across external providers.
APIゲートウェイを通じた自動モデルフェイルオーバーと予算ガバナンスを提供しますが、オープンソースとしてのカスタマイズ性はやや劣ります。
APIゲートウェイを通じた自動モデルフェイルオーバーと予算ガバナンスを提供しますが、オープンソースとしてのカスタマイズ性はやや劣ります。
Unified LLM gateway with failover and analytics, but offers less robust open-source developer SDK support.
無料・オープンソース本番AIのためのエージェント可観測性・評価・継続的改善プラットフォーム
管理されたマルチプロバイダーAIルーティングとコスト追跡を提供しますが、LiteLLMが持つネイティブなオープンソースの柔軟性に欠けます。
無料・オープンソースLLMプロバイダーを統合するためのオープンソースの代替手段ですが、ミドルウェア統合のエコシステムはやや小規模です。
無料・オープンソース自己改善するAIエージェントの構築・シミュレーション・評価・監視
無料・オープンソース自己改善するAIエージェントの構築・シミュレーション・評価・監視
無料・オープンソースMaxim AI is a platform for evaluating, testing, and monitoring AI applications, and the home of Bifrost, an open-source LLM gateway. It helps teams ship reliable AI features with tracing, evaluation, agent simulation, and production observability.
無料・オープンソースMaxim AI is a platform for evaluating, testing, and monitoring AI applications, and the home of Bifrost, an open-source LLM gateway. It helps teams ship reliable AI features with tracing, evaluation, agent simulation, and production observability.
