動察 Beatingのモニタリングによると、LangChainは新コンポーネント「RubricMiddleware」を発表しました。これはAIエージェントが事前に設定された基準に従って自身の出力をチェック・修正できるようにするものです。開発者はまずタスクの「完了基準」を明確に記述します。例えば、コードがテストを通過すること、レポートが指定されたセクションを網羅していること、回答に禁止コンテンツが含まれていないことなどです。エージェントが結果を提出するたびに、システムは評価モデルを呼び出して項目ごとにチェックします。基準を満たしていない場合は、フィードバックが元のエージェントに返され、チェックに合格するか反復上限に達するまで修正が続けられます。
この仕組みは、エージェントが長期間のタスクを実行する際によく見られる「最後の一歩が足りない」問題を解決します。多くのエージェントはタスクを完全にこなせないわけではなく、フォーマット、テスト、引用、セクションなどの厳格な要件を見落としがちです。RubricMiddlewareはタスクの流れに自動品質チェッカーを追加するようなもので、エージェントに「一見正しそうな答え」を生成するだけでなく、何が本当の完了かを認識させます。
LangChainのドキュメントでも、この方法は明確な受け入れ基準があるタスクに最も適していると明記されています。例えば、俳句の音節が正しいか、コードリファクタリング後にテストが通るか、レポートに必要な部分がすべて含まれているかなどです。一般ユーザーにとって、その価値はエージェントの会話能力を高めることではなく、チェックリストに従って成果物を納品できる実行者のように振る舞わせることにあります。