
実験追跡やモデルレジストリのワークフローに優れていますが、リアルタイムのLLM本番環境の観測性には特化していません。
実験追跡やモデルレジストリのワークフローに優れていますが、リアルタイムのLLM本番環境の観測性には特化していません。

AIプラットフォームチームのためのエージェント可観測性・評価・ガバナンス
| 項目 / 指標 | ![]() | ![]() |
|---|---|---|
| 公式ドメイン | arize.com | langwatch.ai |
| 料金モデル | 有料、料金は要問い合わせ | 料金は要問い合わせ |
| 月間訪問数 | 24.9万 (249,028) | 5.21万 (52,098) |
| 前月比トラフィック増減 | +7668 (+3.2%) | +2.2万 (+73%) |
| 主要市場とシェア | 🇺🇸 アメリカ合衆国 (51.6%) | 🇺🇸 アメリカ合衆国 (46.7%) |
| 月間ダイレクト訪問数 | 10.78万 | 2.9万 |
| ユーザー評価 | 4.6 | 4.6 |
| 対応プラットフォーム | ウェブサイト | ウェブサイト |

本番AIのためのエージェント可観測性・評価・継続的改善プラットフォーム
OpenTelemetry 上の OpenInference 規約を用いてエージェントと LLM 呼び出しの span・trace・セッションを取得し、計装を移植可能に保ちます。
span・trace・セッションの各レベルで評価を実行し、検索品質やツール利用、最終回答を大規模な本番データで採点します。
製品内エージェントがトレースを調査して根本原因を推定し、出荷前にレビューできる修正案を提示します。
トレースデータを自社インフラ内に保持したい場合に、定評あるオープンソースのトレース・評価ツールをセルフホストできます。

AIプラットフォームチームのためのエージェント可観測性・評価・ガバナンス
GenAI仕様に完全対応し、LangChain、LangGraph、CrewAI、Mastra、Pydantic AI、Vercel AI SDK、その他OTel互換スタックのトレースが同じ画面に集約され、スパン単位でトークン、コスト、キャッシュを計上します。
LLMジャッジ、独自コード、ワークフローで単一出力や会話全体を採点し、NotebookまたはUIから評価を実行、本番トラフィックもリアルタイムに評価できます。
テキストと音声の模擬ユーザーが現実的なシナリオでターンごとにエージェントを試し、ローカルとCIで実行可能。ツール、スキル、MCPサーバーはトレースされモック化できます。
自社キーでOpenAI、Anthropic、Google、Bedrock、Mistralなどを1つのエンドポイントに集約し、個人・チーム・顧客単位の予算を適用。オーバーヘッドは約11マイクロ秒です。

実験追跡やモデルレジストリのワークフローに優れていますが、リアルタイムのLLM本番環境の観測性には特化していません。
実験追跡やモデルレジストリのワークフローに優れていますが、リアルタイムのLLM本番環境の観測性には特化していません。
無料・オープンソース本番 LLM アプリのための AI ゲートウェイ、可観測性、ガードレール

無料・オープンソース自己改善するAIエージェントの構築・シミュレーション・評価・監視
無料・オープンソース自己改善するAIエージェントの構築・シミュレーション・評価・監視

無料・オープンソースMaxim AI is a platform for evaluating, testing, and monitoring AI applications, and the home of Bifrost, an open-source LLM gateway. It helps teams ship reliable AI features with tracing, evaluation, agent simulation, and production observability.
無料・オープンソースMaxim AI is a platform for evaluating, testing, and monitoring AI applications, and the home of Bifrost, an open-source LLM gateway. It helps teams ship reliable AI features with tracing, evaluation, agent simulation, and production observability.

無料・オープンソースAI エンジニアリングチームのためのコラボレーション層
無料・オープンソースAI エンジニアリングチームのためのコラボレーション層

無料・オープンソース組織全体でLLM評価・可観測性・レッドチーミングの基準を統一
無料・オープンソース組織全体でLLM評価・可観測性・レッドチーミングの基準を統一
無料・オープンソース信頼性の高いAIアプリのためのオープンソースLLM可観測性とAIゲートウェイ
無料・オープンソースOpenlayer is a platform that tests AI systems before release, monitors them in production, and enforces policy and compliance requirements across every model and agent your company runs.

無料・オープンソースAI エージェントの障害を見つけ、そのまま修正するオープンソース可観測性

エンタープライズ向けのガバナンスおよびモデル説明可能性機能を提供しますが、純粋なLLMトレースのセットアップのハードルが高めです。
エンタープライズ向けのガバナンスおよびモデル説明可能性機能を提供しますが、純粋なLLMトレースのセットアップのハードルが高めです。