Athina AI es un espacio de trabajo de desarrollo y observabilidad para equipos que construyen productos sobre grandes modelos de lenguaje. Se centra en un entorno compartido donde los prompts se versionan, se prueban con datasets y se comparan entre modelos, de modo que los cambios se validan antes de llegar a producción. Combina una interfaz tipo hoja de cálculo sin código para product managers con SDK y API GraphQL para ingenieros.
La capa de evaluación ofrece más de 50 métricas predefinidas (incluidos controles para RAG como fidelidad y relevancia del contexto) y criterios personalizados, con posibilidad de regenerar datasets al cambiar el modelo, el prompt o el recuperador. En producción, Athina registra y traza cada paso de un flujo de IA, ejecuta evaluaciones en línea sobre el tráfico entrante y segmenta los análisis por prompt, modelo, tema o ID de cliente.
Está orientada a organizaciones que cuidan el control de datos: ofrece controles de acceso detallados, cumplimiento SOC-2 Type 2, despliegue autoalojado en tu propia VPC y soporte de modelos personalizados o privados vía Azure OpenAI y AWS Bedrock. Hay un plan gratuito para empezar y planes de pago y empresariales con precio a consultar.