メインコンテンツにスキップ

会話デバッグにFin Operatorを使用する

Operatorを使って、Finが会話で特定の動作をした理由(誤答、予期しないエスカレーション、手順の問題など)を調査し、根本原因を修正します。

対応者:Patrick Andrews

Finが会話で特定の動作をした理由とその修正方法を理解します。Fin OperatorはFinの思考、トレース、使用したコンテンツソースを含む全文のトランスクリプトを読み取り、何が起こったかを診断し、根本原因の解決を支援します。

注意:Fin OperatorはPro add-onの一部として含まれています。アクセスにはPro add-onが必要です。


調査できる内容

  • 特定の回答がなぜ提供されたのか—どのコンテンツソースが使われ、Finがそれらをどのように推論し、正しい情報が利用可能だったか。

  • Finが特定の動作をした理由—特定の応答、エスカレーション、解決に至る意思決定経路をたどり、どのコンテンツ、ガイドラインルール、手順が結果に影響したかを含む。

  • 手順のステップがなぜ特定の方法で実行されたのか—どのステップがどの順序で、どのデータで実行され、なぜステップがスキップされたり予期しない分岐を取ったかを正確に確認。

ヒント:Fin OperatorはFin Voice(電話)会話(トランスクリプト、推論トレース、結果を含む)を分析できます。これは現在Phone/Voice会話をサポートしていないMonitorsとは異なります。



例のプロンプト

  • 「なぜこの会話でFinは誤答をしたのか?」(会話リンクまたはIDを貼り付け)

  • 「この会話はなぜエスカレーションされたのか?」

  • 「なぜこの手順のステップ3がスキップされたのか?」


Fin Operatorの調査と修正方法

Fin Operatorは必要なデータを取得し、Finの設定を照合し、修正案を提案します—すべて一連の流れで行います。

  1. Finの推論トレース、参照したコンテンツソース、実行したツール呼び出しを含む全文の会話を取得します。

  2. Finの設定を参照し、関連するコンテンツ、ガイドラインルール、手順定義を確認してFinが何を扱っていたかを理解します。

  3. 根本原因を特定します—問題がコンテンツ、ガイドライン、手順、またはその組み合わせにあるかを明確にします。

  4. 修正案を提案します—根本原因に応じてknowledge base、手順、ガイドラインルールの変更を提案します。同じ会話内でレビューと承認が可能です。

手順の問題の場合、Fin Operatorは実行トレースを取得し、どのステップがどの順序でどのデータで実行されたかを正確に示し、手順定義と照合して根本原因を特定します。


ヒント

  • 特定の会話リンクやIDを共有してターゲットを絞ったデバッグを行いましょう。具体的であればあるほど、Fin Operatorは問題を迅速に診断できます。

  • パターン分析には調査内容ではなく症状を説明してください。「返品に関する問い合わせがエスカレーションされている」は「返品関連会話のエスカレーショントリガーを確認する」より良い表現です。Fin Operatorに適切な調査経路を判断させましょう。

  • 問題が不明な場合は単一の会話から始めてください。Fin Operatorがパターンを特定したら、同じ問題が他の会話にもあるか確認を依頼できます。

  • Fin Operatorは実際のデータと照合して主張を検証します。「ステップ3がスキップされた」と言った場合、それが実際に起こったかを確認してから説明を作成します。

こちらの回答で解決しましたか?