メインコンテンツにスキップ

会話デバッグにFin Operatorを使用する

Operatorを使って、Finが会話で特定の動作をした理由(誤答、予期しないエスカレーション、手順の問題など)を調査し、根本原因を修正します。

対応者:Patrick Andrews

Finが会話で特定の動作をした理由とその修正方法を理解します。Fin OperatorはFinの思考、トレース、使用したコンテンツソースを含む全文のトランスクリプトを読み取り、何が起きたかを診断し、根本原因の解決を支援します。

注意:Fin OperatorはProアドオンの一部として含まれています。アクセスにはProアドオンが必要です。


調査できる内容

  • 特定の回答がなぜ提供されたか—使用されたコンテンツソース、Finの推論方法、適切な情報が利用可能だったかを調べます。

  • Finが特定の動作をした理由—特定の応答、エスカレーション、解決に至る意思決定経路を追跡し、どのコンテンツ、ガイドラインルール、手順が結果に影響したかを含みます。

  • 手順のステップが特定の方法で実行された理由—どのステップがどの順序で、どのデータで実行されたか、なぜステップがスキップされたり予期しない分岐を取ったかを正確に確認します。

ヒント:Fin OperatorはFin Voice(電話)会話(トランスクリプト、推論トレース、結果を含む)を分析できます。モニターは電話通話もサポートしているため、モニターでFin Voice通話を評価できます。詳細はモニターでの電話通話の確認方法をご覧ください。


​


例のプロンプト

  • 「なぜこの会話でFinは誤答をしたのか?」(会話リンクまたはIDを貼り付けてください)

  • 「この会話はなぜエスカレーションされたのか?」

  • 「なぜこの手順のステップ3がスキップされたのか?」
    ​


Fin Operatorの調査と修正方法

Fin Operatorは必要なデータを取得し、Finの設定を照合し、修正案を提案します—すべて一連の流れで行います。

  1. Finの推論トレース、参照したコンテンツソース、実行したツール呼び出しを含む全文の会話を取得します。

  2. Finの設定を参照し、関連するコンテンツ、ガイドラインルール、手順定義を確認してFinが何を扱っていたかを理解します。

  3. 根本原因を特定します—問題がコンテンツ、ガイドライン、手順、またはその組み合わせにあるかを明確にします。

  4. 修正案を提案します—根本原因に応じてknowledge base、手順、ガイドラインルールの変更を提案します。同じ会話内でレビューと承認が可能です。

手順の問題の場合、Fin Operatorは実行トレースを取得し、どのステップがどの順序でどのデータで実行されたかを正確に示し、手順定義と照合して根本原因を特定します。


ヒント

  • 特定の会話リンクやIDを共有してターゲットを絞ったデバッグを行いましょう。具体的であるほどFin Operatorは問題を速やかに診断できます。

  • パターン分析には調査内容ではなく症状を記述してください。「返品に関する問い合わせがエスカレーションされている」は「返品関連会話のエスカレーショントリガーを確認する」より適切です。Fin Operatorに適切な調査経路を判断させましょう。

  • 問題が不明な場合は単一の会話から始めてください。Fin Operatorがパターンを特定したら、同じ問題が他の会話にもあるか確認を依頼できます。

  • Fin Operatorは実際のデータと照合して主張を検証します。「ステップ3がスキップされた」と言った場合、それが実際に起きたかを確認してから説明を作成します。

こちらの回答で解決しましたか?