Arize AI は月間 249,028 訪問、前月比成長率 +3.2%、料金体系有料、料金は要問い合わせを記録しています。Label Studio は月間 137,199 訪問、成長率 -16.1%、料金体系料金は要問い合わせ、無料を記録しています。
本番AIのためのエージェント可観測性・評価・継続的改善プラットフォーム
Label Studio is an open-source data labeling and AI evaluation platform from HumanSignal. It handles images, video, audio, text, documents, time series and agent traces in one flexible workspace, and connects to your ML pipeline through an API, Python SDK and webhooks.
| 項目 / 指標 | | |
|---|---|---|
| 公式ドメイン | arize.com | labelstud.io |
| 料金モデル | 有料、料金は要問い合わせ | 料金は要問い合わせ、無料 |
| 月間訪問数 | 24.9万 (249,028) | 13.72万 (137,199) |
| 前月比トラフィック増減 | +7668 (+3.2%) | -2.63万 (-16.1%) |
| 主要市場とシェア | 🇺🇸 アメリカ合衆国 (51.6%) | 🇺🇸 アメリカ合衆国 (23.9%) |
| 月間ダイレクト訪問数 | 10.78万 | 4.71万 |
| ユーザー評価 | 4.6 | 4.7 |
| 対応プラットフォーム | ウェブサイト | ウェブサイト |
本番AIのためのエージェント可観測性・評価・継続的改善プラットフォーム
OpenTelemetry 上の OpenInference 規約を用いてエージェントと LLM 呼び出しの span・trace・セッションを取得し、計装を移植可能に保ちます。
span・trace・セッションの各レベルで評価を実行し、検索品質やツール利用、最終回答を大規模な本番データで採点します。
製品内エージェントがトレースを調査して根本原因を推定し、出荷前にレビューできる修正案を提示します。
トレースデータを自社インフラ内に保持したい場合に、定評あるオープンソースのトレース・評価ツールをセルフホストできます。
Label Studio is an open-source data labeling and AI evaluation platform from HumanSignal. It handles images, video, audio, text, documents, time series and agent traces in one flexible workspace, and connects to your ML pipeline through an API, Python SDK and webhooks.
Programmable interfaces and custom templates let one workspace handle images, video, audio, text, PDFs, time series and multi-modal tasks.
Build custom benchmarks and rubrics, run side-by-side model comparisons, and grade generated answers against retrieved sources for RAG evaluation.
Collect human preferences, corrections and rankings to feed reinforcement learning from human feedback and fine-tuning workflows.
Connect observability tools, storage and any model to power AI-assisted pre-labeling, benchmarking and continuous evaluation.
無料・オープンソースオープン AI モデルをローカルでもクラウドでも実行・構築
無料・オープンソースModelScope (魔搭社区) is an open-source AI community and model service platform that hosts thousands of pretrained models, datasets, and ready-to-run demos, backed by Alibaba Cloud infrastructure.
無料・オープンソースModelScope (魔搭社区) is an open-source AI community and model service platform that hosts thousands of pretrained models, datasets, and ready-to-run demos, backed by Alibaba Cloud infrastructure.
特化型ソフトウェアと人間の専門家が協働する企業向け AI 基盤
無料・オープンソースOpen WebUI is an open-source, self-hosted AI interface that lets individuals and organizations run any model — local or cloud — inside a workspace they fully control. It ships as a one-command install, supports Ollama, OpenAI-compatible and Anthropic endpoints, and extends through Python tools, functions and pipelines.
無料・オープンソースOpen WebUI is an open-source, self-hosted AI interface that lets individuals and organizations run any model — local or cloud — inside a workspace they fully control. It ships as a one-command install, supports Ollama, OpenAI-compatible and Anthropic endpoints, and extends through Python tools, functions and pipelines.
SuperAnnotate is an AI data platform that combines a collaborative multimodal annotation editor, an expert data-operations team, and the orchestration layer needed to move curated datasets into training, evaluation, and production pipelines. It is aimed at teams building computer vision, NLP, audio, and generative AI systems who need reliable, high-quality ground truth at scale.
SuperAnnotate is an AI data platform that combines a collaborative multimodal annotation editor, an expert data-operations team, and the orchestration layer needed to move curated datasets into training, evaluation, and production pipelines. It is aimed at teams building computer vision, NLP, audio, and generative AI systems who need reliable, high-quality ground truth at scale.
特化型一つの接続環境で AI モデルとエージェントを追跡・評価・出荷。
無料・オープンソースIncludes integrated guardrails and simulation tools, but is less mature for large-scale enterprise production telemetry monitoring.
無料・オープンソースIncludes integrated guardrails and simulation tools, but is less mature for large-scale enterprise production telemetry monitoring.
無料・オープンソース強力なテストおよびプロンプト評価ツールを備えていますが、監視インターフェースは大規模なテレメトリーストリーム向けではありません。
プロンプト管理とバージョン管理に深く焦点を当てている一方、ArizeはエンドツーエンドのトレースとML観測性を優先しています。
プロンプト管理とバージョン管理に深く焦点を当てている一方、ArizeはエンドツーエンドのトレースとML観測性を優先しています。
