즉시 액세스할 수 있는 대규모 호스팅 모델 카탈로그를 제공하지만, 자체 호스팅 대신 타사 플랫폼을 신뢰해야 합니다.
LiteLLM는 월간 방문 576,967, 전월 대비 성장률 +7.9%, 무료+유료, 가격 문의 가격 모델을 기록합니다. Roboflow는 월간 방문 1,431,204, 성장률 +6.6%, 무료+유료, 가격 문의 가격 모델을 기록합니다.

100개 이상의 LLM 제공자를 잇는 오픈소스 AI 게이트웨이
| 항목 / 지표 | ![]() | |
|---|---|---|
| 공식 도메인 | litellm.ai | roboflow.com |
| 가격 모델 | 무료+유료, 가격 문의 | 무료+유료, 가격 문의 |
| 월간 방문 수 | 57.7만 (576,967) | 143.12만 (1,431,204) |
| 전월 대비 트래픽 변화량 | +4.25만 (+7.9%) |
| +8.82만 (+6.6%) |
| 주요 시장 및 점유율 | 🇺🇸 미국 (27.9%) | 🇺🇸 미국 (21.2%) |
|---|
| 월 직접 방문 수 | 22.9만 | 67.65만 |
|---|
| 사용자 평점 | 4.8 | 4.6 |
|---|
| 지원 플랫폼 | 웹사이트 | 웹사이트 |
|---|

100개 이상의 LLM 제공자를 잇는 오픈소스 AI 게이트웨이
하나의 요청 형식으로 100개 이상 제공자와 1,800개 이상 모델을 호출하고 앱 코드 수정 없이 모델을 교체합니다.
팀·프로젝트·앱별로 범위가 제한된 키를 발급하고 월 지출 한도를 설정해 누가 얼마나 쓰는지 확인합니다.
여러 배포에 트래픽을 분산하고 실패 시 재시도하며, 모델이나 제공자 장애 시 자동으로 대체 경로로 전환합니다.
요청량, 토큰 수, 모델별 비용을 대시보드로 보여주고 로그·분석 도구 연동을 지원합니다.
물리적 세계를 위한 컴퓨터 비전을 구축하고 학습하고 배포하세요
최신 모델과 사용자 정의 필터로 수천 장의 이미지를 몇 분 만에 라벨링하고 학습용 데이터셋을 정리합니다.
탐지, 추적, 로직 블록을 조합해 동작을 실행하고 데이터베이스를 갱신하며 산업 시스템과 연동합니다.
클라우드나 엣지 기기에서 고속 추론을 실행해 애플리케이션이 위치한 곳에서 라이브 영상과 이미지를 처리합니다.
세상을 보고 무슨 일이 일어나는지 이해하며 동작을 트리거하는 에이전트로 빠르게 프로덕션에 진입합니다.
즉시 액세스할 수 있는 대규모 호스팅 모델 카탈로그를 제공하지만, 자체 호스팅 대신 타사 플랫폼을 신뢰해야 합니다.

특화 강점Hosts high-performance open-weight models directly on dedicated serverless infrastructure, but does not route across external providers.
#2API 게이트웨이를 통해 자동 모델 장애 조치 및 예산 거버넌스를 제공하지만, 오픈소스 커스터마이징은 상대적으로 적습니다.

특화 강점Replicate is a cloud API for running, fine-tuning, and deploying machine learning models. Spin up open-source and hosted models — from image, video, and audio generation to speech synthesis, captioning, and LLM inference — with one line of code, or package your own model with Cog and put it behind a production-ready API.

무료 / 오픈소스실시간 객체 검출을 위한 YOLO 모델 패밀리에 집중하는 반면, Roboflow는 더 광범위한 주석 및 데이터셋 도구를 제공합니다.


강력한 엔터프라이즈 데이터 라벨링 및 큐레이션 워크플로우를 제공하지만, Roboflow와 같은 내장 모델 학습 및 엣지 배포 파이프라인은 부족합니다.

Unified LLM gateway with failover and analytics, but offers less robust open-source developer SDK support.

기업용 ML 파이프라인을 위한 어노테이션과 데이터 큐레이션을 결합하지만, 엣지 모델 배포를 위해서는 더 많은 수동 설정이 필요합니다.
물리적 AI 데이터셋을 위한 강력한 멀티모달 데이터 인프라를 갖추고 있으나, Roboflow에 비해 단순한 엔드유저 모델 배포에 대한 집중도는 낮습니다.
고급 엔터프라이즈 관찰 가능성 및 가드레일 도구를 제공하지만, LiteLLM의 경량 자체 호스팅 프록시가 주는 단순함은 부족합니다.

관리형 멀티프로바이더 AI 라우팅 및 비용 추적을 제공하지만, LiteLLM의 네이티브 오픈소스 유연성은 부족합니다.
무료 / 오픈소스LLM 제공업체를 통합하기 위한 오픈소스 대안이지만, 미들웨어 통합 생태계가 상대적으로 덜 방대합니다.
특화 강점Hosts high-performance open-weight models directly on dedicated serverless infrastructure, but does not route across external providers.
API 게이트웨이를 통해 자동 모델 장애 조치 및 예산 거버넌스를 제공하지만, 오픈소스 커스터마이징은 상대적으로 적습니다.
특화 강점Replicate is a cloud API for running, fine-tuning, and deploying machine learning models. Spin up open-source and hosted models — from image, video, and audio generation to speech synthesis, captioning, and LLM inference — with one line of code, or package your own model with Cog and put it behind a production-ready API.
무료 / 오픈소스실시간 객체 검출을 위한 YOLO 모델 패밀리에 집중하는 반면, Roboflow는 더 광범위한 주석 및 데이터셋 도구를 제공합니다.
기업용 ML 파이프라인을 위한 어노테이션과 데이터 큐레이션을 결합하지만, 엣지 모델 배포를 위해서는 더 많은 수동 설정이 필요합니다.