Galileo

Galileo는 생성형 AI 애플리케이션과 에이전트를 구축하는 팀을 위한 AI 관측성 및 평가 플랫폼입니다. 개발 데이터 세트, 프로덕션 추적 기록, 평가기 결과, 검토자 피드백을 하나의 워크플로에 통합하여 팀이 실패 패턴을 찾고 무엇을 수정할지 결정하도록 돕습니다. RAG, 에이전트, 안전성 및 보안을 위한 20개 이상의 사전 구축 평가와 함께 도메인별 요구 사항을 위한 맞춤형 평가기를 지원합니다. 검토자는 점수를 수정하고 Autotune으로 평가기 프롬프트를 개정할 수 있습니다. Galileo는 제시된 사례에서 다섯 번의 수정으로 평가기 정확도가 최대 17% 향상될 수 있다고 보고합니다. 최적화된 평가는 Luna 모델로 증류하여 프로덕션 가드레일로 사용할 수 있으며, 회사 측은 이 방식으로 전체 트래픽을 96% 낮은 비용에 모니터링할 수 있다고 설명합니다. 무료 플랜은 실험에 실용적이며 매월 5,000개의 추적 기록, 무제한 사용자, 무제한 맞춤형 평가를 제공합니다. Pro는 연간 청구 시 월 $100부터 시작하며 허용량이 50,000개의 추적 기록으로 늘어나지만, 사용량 기반 확장에 따라 가격이 상승할 수 있습니다. Enterprise 구매자는 호스팅형, VPC 또는 온프레미스 배포와 더 강력한 액세스 제어, 전담 지원, 무제한 추적 기록을 요청할 수 있습니다. Galileo는 평가, 디버깅, 모니터링, 가드레일을 하나의 플랫폼에서 원하는 팀에 적합하지만, 유료 등급을 선택하기 전에 추적 기록 규모, 배포 요구 사항, 지원 요구 사항을 확인해야 합니다.