プロンプトやエージェントのプログラムを、無期限に手作業で調整するのではなく、計測して自動的に改善する対象として扱う手法。
1件
各ステップが何をすべきかを宣言し、評価指標を与えると、オプティマイザがそれを最大化するプロンプトと少数事例を探索します。パイプラインの改善が、経験則ではなく計測可能な作業になるのが利点です。評価用データセットが前提であり、それがなければ最適化の対象自体が存在しません。