注: 以下の翻訳の正確性は検証されていません。AIPを利用して英語版の原文から機械的に翻訳されたものです。
中間パラメーターを使用してブロックの出力を評価する
LLM を活用する機能には複雑な処理が複数含まれることが多く、最終結果の評価だけではプロンプトの性能を判断するのに不十分な場合があります。
AIP Logic と AIP Evals では、評価用の中間パラメーターを設定できます。関数の最終出力と同様に、中間出力を使用して自動評価ツールを設定したり、単に結果を確認したりできます。評価スイートの結果データセットが設定されている場合は、中間パラメーターの出力値もそのデータセットに含まれます。
中間パラメーターを設定する
評価用の中間パラメーターを設定するには、次の手順に沿って進めます。
- AIP Logic のブロック上のフラスコアイコンを選択して、出力を中間パラメーターとして公開します。
- 出力を評価するには、評価ツールの設定パネルで新しい中間パラメーターを選択します。
