무료 / 오픈소스오픈 AI 모델을 로컬과 클라우드에서 실행하고 구축하세요

Label Studio is an open-source data labeling and AI evaluation platform from HumanSignal. It handles images, video, audio, text, documents, time series and agent traces in one flexible workspace, and connects to your ML pipeline through an API, Python SDK and webhooks.
| 항목 / 지표 | ![]() | ![]() |
|---|---|---|
| 공식 도메인 | arize.com | labelstud.io |
| 가격 모델 | 유료, 가격 문의 | 가격 문의, 무료 |
| 월간 방문 수 | 24.9만 (249,028) | 13.72만 (137,199) |
| 전월 대비 트래픽 변화량 | +7.67천 (+3.2%) | -2.63만 (-16.1%) |
| 주요 시장 및 점유율 | 🇺🇸 미국 (51.6%) | 🇺🇸 미국 (23.9%) |
| 월 직접 방문 수 | 10.78만 | 4.71만 |
| 사용자 평점 | 4.6 | 4.7 |
| 지원 플랫폼 | 웹사이트 | 웹사이트 |

프로덕션 AI를 위한 에이전트 관측성, 평가 및 지속적 개선 플랫폼
OpenTelemetry 기반 OpenInference 규약으로 에이전트와 LLM 호출의 span·trace·세션을 수집해 계측을 이식 가능하게 유지합니다.
span·trace·세션 수준에서 평가를 실행해 검색 품질, 도구 사용, 최종 답변을 대규모 프로덕션 데이터로 채점합니다.
제품 내 에이전트가 트레이스를 조사해 근본 원인을 추정하고 배포 전 검토할 수 있는 수정안을 제시합니다.
트레이스 데이터를 자사 인프라에 두고 싶을 때 검증된 오픈소스 추적·평가 도구를 셀프호스팅할 수 있습니다.

Label Studio is an open-source data labeling and AI evaluation platform from HumanSignal. It handles images, video, audio, text, documents, time series and agent traces in one flexible workspace, and connects to your ML pipeline through an API, Python SDK and webhooks.
Programmable interfaces and custom templates let one workspace handle images, video, audio, text, PDFs, time series and multi-modal tasks.
Build custom benchmarks and rubrics, run side-by-side model comparisons, and grade generated answers against retrieved sources for RAG evaluation.
Collect human preferences, corrections and rankings to feed reinforcement learning from human feedback and fine-tuning workflows.
Connect observability tools, storage and any model to power AI-assisted pre-labeling, benchmarking and continuous evaluation.
무료 / 오픈소스오픈 AI 모델을 로컬과 클라우드에서 실행하고 구축하세요
무료 / 오픈소스ModelScope (魔搭社区) is an open-source AI community and model service platform that hosts thousands of pretrained models, datasets, and ready-to-run demos, backed by Alibaba Cloud infrastructure.
무료 / 오픈소스ModelScope (魔搭社区) is an open-source AI community and model service platform that hosts thousands of pretrained models, datasets, and ready-to-run demos, backed by Alibaba Cloud infrastructure.

특화 강점소프트웨어와 인간 전문가가 함께 일하는 엔터프라이즈 AI 인프라

무료 / 오픈소스Open WebUI is an open-source, self-hosted AI interface that lets individuals and organizations run any model — local or cloud — inside a workspace they fully control. It ships as a one-command install, supports Ollama, OpenAI-compatible and Anthropic endpoints, and extends through Python tools, functions and pipelines.
무료 / 오픈소스Open WebUI is an open-source, self-hosted AI interface that lets individuals and organizations run any model — local or cloud — inside a workspace they fully control. It ships as a one-command install, supports Ollama, OpenAI-compatible and Anthropic endpoints, and extends through Python tools, functions and pipelines.

SuperAnnotate is an AI data platform that combines a collaborative multimodal annotation editor, an expert data-operations team, and the orchestration layer needed to move curated datasets into training, evaluation, and production pipelines. It is aimed at teams building computer vision, NLP, audio, and generative AI systems who need reliable, high-quality ground truth at scale.
SuperAnnotate is an AI data platform that combines a collaborative multimodal annotation editor, an expert data-operations team, and the orchestration layer needed to move curated datasets into training, evaluation, and production pipelines. It is aimed at teams building computer vision, NLP, audio, and generative AI systems who need reliable, high-quality ground truth at scale.

특화 강점하나의 연결 환경에서 AI 모델과 에이전트를 추적·평가·배포하세요.

무료 / 오픈소스Includes integrated guardrails and simulation tools, but is less mature for large-scale enterprise production telemetry monitoring.
무료 / 오픈소스Includes integrated guardrails and simulation tools, but is less mature for large-scale enterprise production telemetry monitoring.

무료 / 오픈소스강력한 테스트 및 프롬프트 평가 도구를 갖추고 있지만, 모니터링 인터페이스는 대규모 원격 측정 스트림에 덜 최적화되어 있습니다.

프롬프트 관리 및 버전 제어에 크게 집중하는 반면, Arize는 엔드투엔드 트레이싱과 ML 관측성을 우선시합니다.
프롬프트 관리 및 버전 제어에 크게 집중하는 반면, Arize는 엔드투엔드 트레이싱과 ML 관측성을 우선시합니다.