Galileo

Galileo é uma plataforma de observabilidade e avaliação de IA para equipes que desenvolvem aplicações e agentes de IA generativa. Ela reúne conjuntos de dados de desenvolvimento, rastros de produção, resultados de avaliadores e feedback de revisores em um único fluxo de trabalho, permitindo que as equipes identifiquem padrões de falha e decidam o que corrigir. A plataforma oferece mais de 20 avaliações prontas para RAG, agentes, segurança e proteção, além de avaliadores personalizados para requisitos específicos de cada domínio. Os revisores podem corrigir pontuações e usar o Autotune para revisar os prompts dos avaliadores; a Galileo informa que, nos casos demonstrados, cinco correções podem melhorar a precisão do avaliador em até 17%. As avaliações otimizadas podem ser destiladas em modelos Luna e usadas como barreiras de proteção em produção. Segundo a empresa, essa abordagem pode monitorar todo o tráfego com um custo 96% menor. O plano gratuito é prático para experimentos, com 5,000 rastros por mês, usuários ilimitados e avaliações personalizadas ilimitadas. O Pro começa em $100 por mês com cobrança anual e aumenta a franquia para 50,000 rastros, enquanto a expansão baseada no uso pode elevar o preço. Clientes Enterprise podem solicitar implantação hospedada, em VPC ou local, controles de acesso mais robustos, suporte dedicado e rastros ilimitados. O Galileo é indicado para equipes que desejam reunir avaliação, depuração, monitoramento e barreiras de proteção em uma única plataforma, mas é importante verificar o volume de rastros, os requisitos de implantação e as necessidades de suporte antes de escolher um nível pago.