Utilisez cet article pour ajouter une fiche d'évaluation à une évaluation, créer une nouvelle fiche, ajouter des critères et définir le poids et le paramètre Critique de chaque critère.

Une fiche d'évaluation ajoute une notation de qualité à une évaluation, comme la clarification ou l'efficacité, en plus de ses contrôles de réussite/échec. Tant qu'une évaluation n'a pas de fiche, elle affiche uniquement les résultats de simulation et aucune évaluation de qualité. Une fiche s'applique à chaque simulation dans l'évaluation, avec les mêmes critères pour chacune.

Après avoir ajouté une fiche d'évaluation, une section Évaluation de la qualité apparaît en haut de l'évaluation, à côté de Résultats de simulation. Les critères affichés proviennent de la fiche ajoutée, donc la section liste les critères qu'elle contient. Elle montre le Score global et la moyenne pour chacun de ces critères. La liste des conversations simulées obtient aussi une colonne Score global et une colonne pour chaque critère.

Vous pouvez aussi ajouter une fiche d'évaluation depuis Paramètres de l'évaluation. Pour ouvrir Paramètres de l'évaluation sur une évaluation existante, cliquez sur le menu options (...) à côté de Nouvelle simulation, puis cliquez sur Modifier l'évaluation. Dans Paramètres de l'évaluation, ouvrez le menu déroulant Évaluation de la qualité, puis choisissez une fiche existante ou cliquez sur Créer une nouvelle fiche. Par défaut, c'est Aucune fiche.

Pour créer une fiche d'évaluation pour une évaluation, nommez-la et ajoutez les critères sur lesquels Fin est noté. Les fiches d'évaluation évaluent toujours Fin, donc le paramètre Qui est évalué est fixé à Fin AI Agent, et Coéquipiers humains assignés n'est pas disponible.

Après avoir ajouté des critères notés, la section Score global (%) affiche une moyenne pondérée. Elle est calculée en multipliant le score (%) de chaque critère par son poids, en additionnant les résultats, puis en divisant par le poids total. Jusqu'à ce moment, elle affiche Non noté.

Le bouton bascule Auto-évaluation est disponible uniquement lorsque chaque critère utilise une évaluation IA.

Les évaluations notent automatiquement chaque critère avec l'IA, en utilisant la description du critère et la transcription de la simulation (tous les messages, à l'exclusion des événements). La Notation manuelle n'est pas disponible, car les simulations n'ont pas d'évaluateur humain. Le contenu Fin, les procédures et les directives ne sont pas encore disponibles pour l'évaluateur IA comme contexte.

Dans le tableau Critères d'évaluation, chaque critère a un Poids de la note et un paramètre Critique :

Pour voir comment Fin a été noté sur une seule conversation, ouvrez une simulation d'une évaluation qui a une fiche. En plus de son contrôle de transfert et des contrôles de simulation, la simulation affiche son Score global et, pour chaque critère, la note donnée par le juge LLM (modèle de langage large). Si Motifs de notation est activé pour un critère, vous voyez aussi la raison du juge, pour comprendre pourquoi une réponse a été notée ainsi et en faire une correction.