Os relatórios do Monitor ajudam você a acompanhar e medir a qualidade das conversas do Fin AI Agent. Você pode usar essas métricas para criar relatórios que destacam tendências de qualidade e identificam áreas para melhoria.
Pontuação do Scorecard e Taxa de aprovação do Scorecard oferecem uma visão rápida da qualidade geral do Fin. A pontuação mostra o desempenho médio, enquanto a taxa de aprovação indica com que frequência os scorecards avaliados atingem seu limite de qualidade. Usados com as falhas do Scorecard, ajudam a ver se uma queda no desempenho é um problema isolado ou mais amplo.
As métricas de avaliação do Scorecard ajudam você a acompanhar o desempenho ao longo do tempo e identificar mudanças que podem estar afetando o Fin, como uma atualização do Knowledge Hub ou lançamento de produto. Isso facilita identificar tendências e ajustar as respostas do Fin antes que a qualidade caia ainda mais.
Para uma análise mais profunda, os critérios avaliados do Scorecard e as pontuações dos critérios do Scorecard mostram quais partes da conversa estão funcionando e quais não. Eles detalham o desempenho por critérios específicos, como precisão técnica ou tom, para que você veja exatamente onde o Fin precisa melhorar.
Como criar um relatório do Monitor
Para criar um relatório dos Monitores, vá para Relatórios > Todos os Relatórios > + Novo relatório > Monitores.
Avaliação do Scorecard
Nome da Métrica | Descrição |
Scorecards avaliados | Número de avaliações de scorecard. |
Taxa de falha do Scorecard | Percentual de avaliações de scorecard que falharam. |
Falhas do Scorecard | Número de avaliações de scorecard que falharam. |
Taxa de aprovação do Scorecard | Percentual de avaliações de scorecard que foram aprovadas. |
Aprovações do Scorecard | Número de avaliações de scorecard que foram aprovadas. |
Pontuação do Scorecard | A pontuação de revisão atribuída às avaliações do scorecard. |
Avaliação dos critérios do Scorecard
A avaliação dos critérios do Scorecard são pontos de dados qualitativos usados para categorizar ou filtrar suas métricas.
Nome da Métrica | Descrição |
Critérios de scorecard avaliados | Número de avaliações dos critérios do scorecard. |
Falhas dos critérios do Scorecard | Número de avaliações dos critérios do scorecard que falharam. |
Aprovações dos critérios do Scorecard | Número de avaliações dos critérios do scorecard que foram aprovadas. |
Pontuação dos critérios do Scorecard | A pontuação de revisão atribuída às avaliações dos critérios do scorecard. |
Atributos do relatório
Nome do atributo | Descrição |
Monitor | O monitor de QA |
Revisado por | O revisor que completou ou é responsável pela revisão. |
Avaliado | O colega de equipe que está sendo avaliado na revisão. |
Scorecard | O modelo de avaliação aplicado durante a revisão. |
Resultado do Scorecard | O resultado final da avaliação do scorecard. Exemplos de valores incluem: |
Pontuação do Scorecard | A pontuação quantitativa produzida pela avaliação do scorecard. |
Construindo relatórios personalizados com métricas do Monitor
Todas as métricas do Monitor estão disponíveis no construtor de relatórios personalizados, para que você possa combiná-las com outros dados do Intercom e criar visualizações personalizadas da qualidade da conversa.
Para construir um relatório personalizado usando métricas do Monitor, vá para Relatórios > + Novo relatório > Crie o seu próprio e selecione as métricas que você precisa na categoria Monitores. Você pode filtrar por scorecard, período de tempo ou qualquer outro atributo para focar nos segmentos mais relevantes para sua equipe.