Athina AI est un espace de travail de développement et d'observabilité pour les équipes qui construisent des produits sur de grands modèles de langage. Il s'articule autour d'un environnement partagé où les prompts sont versionnés, testés sur des jeux de données et comparés entre modèles, afin que les changements soient validés avant la production. Une interface no-code type tableur pour les product managers complète des SDK et une API GraphQL pour les ingénieurs.
La couche d'évaluation propose plus de 50 métriques prédéfinies (dont des contrôles RAG comme la fidélité et la pertinence du contexte) et des critères personnalisés, avec régénération des jeux de données quand le modèle, le prompt ou le retriever changent. En production, Athina journalise et trace chaque étape d'un flux d'IA, exécute des évaluations en ligne sur le trafic entrant et segmente les analyses par prompt, modèle, thème ou ID client.
Athina vise les organisations attachées à la maîtrise des données : contrôles d'accès fins, conformité SOC-2 Type 2, déploiement auto-hébergé dans votre propre VPC et prise en charge de modèles personnalisés ou privés via Azure OpenAI et AWS Bedrock. Une offre gratuite permet de démarrer, les offres payantes et entreprise étant sur devis.