MonitorレポートはFin AI Agentの会話品質を追跡・測定するのに役立ちます。これらの指標を使って品質傾向を示し、改善点を特定するレポートを作成できます。
Scorecard scoreとScorecard pass rateはFinの全体的な品質を素早く把握できます。スコアは平均パフォーマンスを示し、合格率は評価されたスコアカードが品質基準を満たす頻度を示します。Scorecard failsと併用すると、パフォーマンス低下が一時的な問題か広範な問題かを判断できます。
Scorecard評価指標は時間経過によるパフォーマンスを追跡し、Knowledge Hubの更新や製品発売などFinに影響を与える変化を見つけるのに役立ちます。これにより傾向を特定し、品質低下を防ぐためにFinの応答を調整しやすくなります。
より詳細な分析には、Evaluated scorecard criteriaとScorecard criteria scoresが会話のどの部分が機能しているか、どの部分が機能していないかを示します。技術的正確さやトーンなどの特定の基準ごとにパフォーマンスを分解し、Finの改善が必要な箇所を正確に把握できます。
Monitorレポートの作成方法
Monitorレポートを作成するには、レポート > すべてのレポート > + 新しいレポート > Monitorに移動します。
Scorecard評価
指標名 | 説明 |
評価済みスコアカード | スコアカード評価の数。 |
Scorecard fail rate | 失敗したスコアカード評価の割合。 |
Scorecard fails | 失敗したスコアカード評価の数。 |
Scorecard pass rate | 合格したスコアカード評価の割合。 |
Scorecard passes | 合格したスコアカード評価の数。 |
Scorecard score | スコアカード評価に割り当てられたレビューのスコア。 |
Scorecard基準評価
Scorecard基準評価は、指標を分類またはフィルタリングするための定性的データポイントです。
指標名 | 説明 |
評価済みScorecard基準 | Scorecard基準評価の数。 |
Scorecard基準失敗 | 失敗したScorecard基準評価の数。 |
Scorecard基準合格 | 合格したScorecard基準評価の数。 |
Scorecard基準スコア | Scorecard基準評価に割り当てられたレビューのスコア。 |
レポート属性
属性名 | 説明 |
Monitor | QAモニター |
Reviewed by | レビューを完了または担当したレビュアー。 |
Reviewee | レビューで評価されたチームメンバー。 |
Scorecard | レビュー中に適用された評価テンプレート。 |
Scorecard outcome | スコアカード評価の最終結果。例： |
Scorecard score | スコアカード評価によって算出された定量的スコア。 |
Monitor指標を使ったカスタムレポートの作成
すべてのMonitor指標はカスタムレポートビルダーで利用可能で、他のIntercomデータと組み合わせて会話品質のカスタマイズビューを作成できます。
Monitor指標を使ってカスタムレポートを作成するには、レポート > + 新しいレポート > 独自のレポートを作成に移動し、Monitorsカテゴリから必要な指標を選択します。スコアカード、期間、その他の属性でフィルタリングして、チームに最も関連するセグメントに絞り込めます。