Freeplayについて
Freeplayは、LLM製品を開発するチームに、本番環境での挙動の観測、評価の実行、変更のオフラインテスト、プロンプト、モデル、データセット、人によるレビューの管理を行うための一元的な場所を提供します。可観測性ビューでは、個々の生成結果、複数ステップのトレース、ユーザーセッション全体を切り替えて確認できます。コスト、レイテンシー、使用量、フィードバック、評価結果がまとめて表示されるため、実際の本番環境での挙動に基づいて次の実験を選べます。カスタマイズ可能なプレイグラウンドはプロンプトとモデルの比較に対応し、データセットを使えばリリース前に同じ検証を繰り返せます。Freeplayは、OpenAI、Anthropic、Google Vertex、AWS Bedrock、Groqなどの一般的なプロバイダーに対応しています。企業顧客はセルフホスト型モデルも利用できます。この構成は、監視とテストを同じ改善サイクルにつなげたいエンジニアリングチームやプロダクトチームに適しています。無料プランでは1件のプロジェクトと中程度の利用量に対応します。より多くのプロジェクトや利用量が必要なチームは、月額 $500 からのGrowth料金を考慮する必要があり、Enterpriseは個別見積もりです。
機能
本番環境の可観測性
生成結果、トレース、セッションを調査し、品質問題、レイテンシーのボトルネック、コストの変化、利用パターンを特定します。
評価ワークフロー
自動評価を実行し、その結果を人によるラベルやカスタム指標と組み合わせて共有ビューで確認します。
オフラインテスト
変更が本番環境のユーザーに届く前に、データセットを使ってプロンプトやモデルの変更をテストします。
プロンプトとモデルの管理
プロンプトのバージョンを整理し、カスタマイズ可能なプレイグラウンドで対応モデルを比較します。
人によるレビュー
ラベル付けとレビューのワークフローにサンプルを流し、チームのフィードバックを構造化された評価データに変換します。
長所
- $0 プランでは、小規模チームが前払いの利用料なしで、1件のプロジェクト、月間 10,000 件の生成、90日間のデータ保持を利用できます。
- 可観測性は生成結果、トレース、セッションを網羅しているため、個別の呼び出しと複数ステップのエージェント挙動の両方を調査できます。
- 一般的なモデルプロバイダーに対応しており、OpenAI、Anthropic、Google Vertex、AWS Bedrock、Groqを比較する際の負担を軽減できます。
- 評価、データセット、実験、人によるレビューが1つのワークフローにまとまり、別々のツール間での引き継ぎを減らせます。
短所
- Growthは月額 $500 からで、無料プランの上限を超えたチームには大幅な料金増となる場合があります。
- 無料プランは1件のプロジェクトと月10回のテスト実行に限られるため、複数のアプリケーションで頻繁に実験する場合は制約があります。
- Enterpriseは個別料金のため、導入全体の費用を見積もるには営業担当者との相談が必要です。
- セルフホスト型モデルと柔軟な導入オプションはEnterprise限定で、下位プランではインフラの選択肢が限られます。
料金プラン
Free
- チームユーザー数無制限
- 1件のプロジェクト
- 月間 10,000 件の生成
- 月10回のテスト実行
- 90日間のデータ保持
- 一般的なモデルプロバイダー
- マルチテナント導入
Growth
- チームユーザー数無制限
- 5件のプロジェクトから
- 月間 100,000 件の生成から
- 月50回のテスト実行から
- データ保持期間をカスタマイズ可能
- 一般的なモデルプロバイダー
- マルチテナント導入
- 14日間のトライアル
Enterprise
- チームユーザー数無制限
- プロジェクト数無制限
- 月間 500,000 件の生成から
- テスト実行回数無制限
- データ保持期間をカスタマイズ可能
- セルフホスト型モデルに対応
- セルフホスト、シングルテナント、またはマルチテナント導入
- 企業向けSAMLまたはOIDC
- 30日間のトライアル
* 料金情報は参考用です。最新情報はFreeplay公式サイトのお知らせをご確認ください。