メインコンテンツにスキップ

リリース内でEvalsを実行およびレビューする方法

リリース内でEvalsを見つけて実行し、レビューし、さらにEvalsを追加し、なぜBatch Testが利用できないかを学びます。

対応者:Dawn Perrott

この記事を使って、リリースに適用されるEvalsを見つけて実行し、リリースにさらにEvalsを追加し、なぜBatch Testがリリース内で利用できないかを理解しましょう。

リリースに適用されるEvalsを確認する方法

リリースに適用されるEvalsを確認するには、リリースを開き、Evalsタブをクリックします。このタブにはEvalsが2つのグループで表示されます。

  • このリリースで変更されたもの: このリリースの一部として編集または追加されたEvals。編集済みラベルは既存のEvalが変更されたことを示します。

  • Mainから: すでにFin Mainに存在し、このリリースに対して実行可能なEvals。Fin MainはFinのライブ本番バージョンです。

各Evalの行には名前、実行状況、…メニューが表示されます。実行状況はキュー待ち、実行中(例:6/6 実行中)、または未実行です。

「Login query improvements」という名前のリリースのEvalsタブ。変更されたグループには1つの編集済みEvalがあり、Mainからのグループにはキュー待ち、実行中、未実行のステータスのEvalsがリストされています。

グループを非表示または表示するには、その名前をクリックします。Evalsタブには各グループのEvals数も表示されます。

変更されたグループとMainからのグループが折りたたまれ、その下に「Add more Evals」ボタンがあるリリースのEvalsタブ。

リリース内でEvalを実行する方法

リリース内でEvalを実行するには、EvalsタブのEval行の実行ボタンをクリックします。実行はEvalのシミュレーション(リアルなテスト会話)をリリースの変更に対して行い、ライブのFin Main設定ではありません。実行中は行に停止ボタンが表示され、クリックすると実行を停止できます。

リリースにさらにEvalsを追加するには、2つのグループの下にあるAdd more Evalsをクリックします。

リリース内で作業中にすべてのEvalsを見る方法

リリース内で作業中にすべてのEvalsを見るには、ナビの左上にあるスイッチャーでリリースを選択し、次にFin AI Agent > Test > Evalsに移動します。Evalsページには名前、結果、タグ、最終実行日、最終実行者が一覧表示されます。名前で検索したり、フィルターを追加したり、Eval名の横の実行または停止ボタンを使えます。

リリース内で開かれたEvalsページ。検索ボックス、「Add Filter」ボタン、Eval名、結果、タグ、最終実行日、最終実行者の列があるテーブルが表示されています。


リリース内のEvalsに関するよくある質問

「このリリースで変更されたもの」と「Mainから」の違いは何ですか?

リリースのEvalsタブでは、このリリースで変更されたものはリリースの一部として編集または追加されたEvalsを示し、MainからはすでにFin Mainに存在するEvalsを示します。

リリース内でBatch Testを使えますか?

Batch TestはFin Mainでのみ利用可能なため、リリース内では使用できません。使用するにはFin Mainに切り替えてください。

こちらの回答で解決しましたか?