Zum Hauptinhalt springen

Monitore FAQs

Finden Sie Antworten auf häufige Fragen zur Einrichtung von Monitoren, Verwaltung von Berechtigungen und Fehlerbehebung in Ihren Quality Assurance workflows.

Verfasst von Dawn

Was ist der Unterschied zwischen einem Monitor und einer Scorecard?

Sie erfüllen zwei verschiedene Funktionen und arbeiten zusammen:

  • Monitore definieren, welche Gespräche überprüft werden — Sie legen die Kriterien fest (Filter oder natürliche Sprach-Flag-Kriterien), und der Monitor zeigt automatisch passende Gespräche an.

  • Scorecards definieren, wie jedes Gespräch bewertet wird — Sie legen die Kriterien, Bewertungsoptionen und Bewertungsregeln fest, die Prüfer (oder AI) zur Qualitätsbewertung verwenden.

Ein Monitor ohne Scorecard markiert Gespräche, bewertet sie aber nicht. Für einen vollständigen QA workflow benötigen Sie beides.

Gibt es Beschränkungen, wie viele Monitore oder Scorecard-Kriterien ich erstellen kann?

Ja, die folgenden Beschränkungen gelten:

Kann ich mehrere Monitore gleichzeitig laufen lassen?

Ja, Sie können so viele Monitore erstellen, wie Sie benötigen, jeweils für einen anderen Gesprächstyp oder Qualitätssignal. Zum Beispiel könnten Sie einen Monitor für eine zufällige Baseline-Stichprobe, einen anderen für Gespräche mit niedrigem CX-Score und einen weiteren für Gespräche, die als Policy-Risiken markiert sind, betreiben. Jeder Monitor läuft unabhängig. Beachten Sie, dass es eine Begrenzung von 20 Monitoren mit natürlichen Sprach-Flag-Kriterien gibt – Monitore mit vordefinierten Filtern sind unbegrenzt.

Kann ich einen Monitor nach der Erstellung bearbeiten?

Ein Monitor kann nach der Erstellung teilweise bearbeitet werden. Die folgenden Einstellungen können jederzeit auf der Monitors-Seite aktualisiert werden: Monitorname, Flag-Kriterien, Filter, Prüfer und die angehängte Scorecard. Wenn Sie Ihre Änderungen speichern, werden alle Gespräche, die den aktualisierten Kriterien entsprechen, automatisch neu bewertet – einschließlich zuvor markierter Gespräche, die innerhalb der aktualisierten Flag-Kriterien, Filter, Scorecard usw. liegen.

Der Überwachungsmodus (kontinuierlich, einmalig oder geplant), das Startdatum und die Stichprobenkontrollen (z. B. Anzahl der Gespräche pro Tag oder Woche) sind jedoch gesperrt, sobald ein Monitor gespeichert und aktiviert wurde. Diese Einstellungen steuern, wie der Monitor läuft und wie Backfills erstellt werden, daher können sie nach der Erstellung nicht mehr geändert werden.

Wenn Sie eine dieser gesperrten Einstellungen ändern müssen, wird empfohlen, einen neuen Monitor mit der gewünschten Konfiguration zu erstellen. Sie können die Option Monitor duplizieren (verfügbar im Drei-Punkte-Menü auf der Monitors-Seite) verwenden, um einen bestehenden Monitor zu kopieren und schnell anzupassen.

Kann ich einen Monitor für Teamkollegen-Gespräche verwenden, nicht nur für Fin?

Noch nicht, Monitore bewerten derzeit nur Fin AI Agent Gespräche. Die Anwendung von Monitoren und Scorecards auf menschliche Teamkollegen-Gespräche ist geplant.

Gibt es eine Möglichkeit, einen Monitor zu pausieren oder zu archivieren?

Ja. Sie können einen Monitor archivieren, um ihn von der Haupt-Monitors-Seite auszublenden, ohne ihn zu löschen. Archivierte Monitore behalten alle historischen Daten und Gesprächszahlen. Um zu archivieren, klicken Sie auf das Drei-Punkte-Menü einer Monitor-Karte und wählen Sie Monitor archivieren. Um archivierte Monitore anzuzeigen, verwenden Sie den Filter-Dropdown auf der Monitors-Seite und wählen Sie Archivierte Monitore. Sie können einen archivierten Monitor jederzeit wiederherstellen – siehe unten.

Wie stelle ich einen archivierten Monitor wieder her?

Verwenden Sie auf der Monitors-Seite den Filter-Dropdown, um zu Archivierte Monitore zu wechseln. Finden Sie den Monitor, den Sie wiederherstellen möchten, klicken Sie auf das Drei-Punkte-Menü seiner Karte und wählen Sie Monitor wiederherstellen. Ein Bestätigungsdialog erscheint. Optional können Sie Verpasste Gespräche der letzten 2 Wochen nachholen aktivieren, um Gespräche nachzuholen, die während der Archivierung stattfanden. Klicken Sie auf Wiederherstellen, um ihn zu reaktivieren.

Wie stelle ich einen archivierten Monitor wieder her?

Ja, klicken Sie auf das Drei-Punkte-Menü eines Monitors auf der Monitors-Seite und wählen Sie Monitor duplizieren. Im selben Menü finden Sie auch Optionen zum Bearbeiten, Archivieren oder Löschen des Monitors.

Gibt es eine Möglichkeit, einen Monitor zu duplizieren?

Ja, klicken Sie auf das Drei-Punkte-Menü eines Monitors auf der Monitors-Seite und wählen Sie Monitor duplizieren. Im selben Menü finden Sie auch Optionen zum Bearbeiten, Archivieren oder Löschen des Monitors.

Kann ich einen Monitor als Entwurf speichern?

Nein, derzeit nicht.

Haben Monitore Zugriff auf die vollständige Workspace-Einrichtung?

Nein, Monitore haben nur Zugriff auf das Gesprächstranskript. Sie haben keinen Zugriff auf die Knowledge base, Guidance, Tasks oder Procedures. Zum Beispiel kann ein Monitor nicht prüfen, ob Fin Zugriff auf einen bestimmten Artikel hatte oder ob ein Gespräch basierend auf einer Guidance-Regel an einen Menschen weitergeleitet werden sollte.

Ist es möglich zu sehen, wann ein Monitor bearbeitet wurde, was sich geändert hat und von wem?

Nein, eine Prüfprotokoll-Historie für Monitor-Bearbeitungen ist derzeit in der UI nicht verfügbar.

Ist es möglich, benutzerdefinierte Datumsbereiche in der Aktivitätsansicht auf dem Monitor-Dashboard zu verwenden?

Nein, die einzigen verfügbaren Datumsfilter sind letzte 7 Tage, letzte 8 Wochen und letzte 6 Monate.

Gibt es einen API-Endpunkt für Monitor-Berichtsdaten?

Nein, derzeit nicht.


Gespräche und Berechtigung

Was ist die minimale Gesprächslänge, damit ein Monitor es einschließt?

Ein Gespräch muss mindestens 2 Nachrichten von Fin und 2 Nachrichten vom Kunden enthalten, um in einen Monitor aufgenommen zu werden.

Kann dasselbe Gespräch in mehreren Monitoren erscheinen?

Ja. Jeder Monitor läuft als unabhängige Ja/Nein-Prüfung, sodass ein Gespräch, das den Kriterien mehrerer Monitore entspricht, in jedem markiert wird. Wenn Sie von einem Monitor aus zu einem Gespräch wechseln, sehen Sie genau, warum es von diesem speziellen Monitor markiert wurde.

Wenn ein Gespräch bewertet und dann wieder geöffnet wird, wird es erneut bewertet?

Nein. Ein Gespräch wird pro Monitor nur einmal bewertet. Wenn das Gespräch später wieder geöffnet wird, weil der Kunde eine neue Nachricht sendet, wird es nicht erneut mit derselben Monitor-Version abgeglichen oder bewertet. Die ursprüngliche Bewertung ist die einzige, die aufgezeichnet wird.

Kann ich historische Gespräche beim Erstellen eines Monitors nachholen?

Ja. Beim ersten Erstellen eines Monitors können Sie bis zu 90 Tage historische Gespräche nachholen. Ab diesem Zeitpunkt erfasst der Monitor automatisch neue passende Gespräche.

Funktionieren Monitore für Fin Voice?

Nein. Fin Voice wird derzeit von Monitoren nicht unterstützt.

Werden tickets von Monitoren bewertet?

Nein. Weder Kunden-tickets noch Tracker-tickets werden in Monitore aufgenommen – nur Gespräche.

Was passiert, wenn ich die Flag-Kriterien eines Monitors aktualisiere – werden bestehende Gespräche entfernt?

Nein. Gespräche, die den vorherigen Flag-Kriterien entsprachen, bleiben im Monitor. Nur zukünftige Gespräche werden anhand der aktualisierten Konfiguration abgeglichen.

Wie lange dauert es, bis Gespräche in einem Monitor angezeigt werden?

Gespräche sollten sofort erscheinen. Die Gesprächszahl auf dem Monitor-Dashboard kann jedoch einige Minuten benötigen, um sich bei hohem Gesprächsaufkommen zu aktualisieren.

Wenn ein Gespräch fälschlicherweise in einem Monitor angezeigt wird, kann ich es entfernen?

Nein. Es ist derzeit nicht möglich, ein Gespräch manuell aus einem Monitor zu entfernen.

Kann ich einen Test an einem Monitor durchführen, wenn ich keine Flag-Kriterien eingerichtet habe?

Nein. Die Option Test ausführen erscheint nur, wenn Flag-Kriterien konfiguriert wurden.

Wie kann ich überprüfen, warum ein Gespräch meine Flag-Kriterien erfüllt oder nicht erfüllt hat?

Gehen Sie zum Monitor, klicken Sie auf Bearbeiten und öffnen Sie den Abschnitt Test ausführen. Unter Flag-Kriterien an Beispielgesprächen testen geben Sie die Gesprächs-ID ein und klicken auf Hinzufügen. Das Monitor-Ergebnis erklärt, warum das Gespräch übereinstimmte oder nicht.


Scorecards und Bewertung

Brauche ich eine Scorecard, um einen Monitor zu verwenden?

Nein, aber ohne eine Scorecard markiert Ihr Monitor Gespräche, ohne sie zu bewerten. Prüfer sehen übereinstimmende Gespräche ohne Bewertungskriterien. Für einen vollständigen QA-Workflow fügen Sie während der Monitoreinrichtung eine Scorecard hinzu.

Kann ich verschiedene Scorecards an verschiedene Monitore anhängen?

Ja. Jeder Monitor kann seine eigene Scorecard haben, sodass Sie verschiedene Gesprächstypen gegen unterschiedliche Qualitätskriterien bewerten können. Zum Beispiel könnte ein Monitor für schutzbedürftige Kunden eine andere Scorecard verwenden als ein Monitor für Abrechnungsgespräche.

Kann ich Scorecard-Kriterien in mehreren Scorecards wiederverwenden?

Ja — Titel und Beschreibungen der Kriterien sind wiederverwendbar. Sobald Sie Kriterien erstellt haben, können Sie diese zu mehreren Scorecards hinzufügen. Frühere Bewertungsergebnisse können jedoch nicht wiederverwendet werden und müssen in jeder Scorecard neu festgelegt werden.

Kann ich KI-bewertete und manuell bewertete Kriterien in derselben Scorecard mischen?

Ja. Sie können für jedes Kriterium wählen, ob die Bewertung durch KI oder einen menschlichen Prüfer erfolgt. Wenn Auto-review aktiviert ist und ein Kriterium manuelle Bewertung erfordert, erscheinen diese Gespräche weiterhin in der Unreviewed-Warteschlange.

Was bewirkt das Markieren von Kriterien als kritisch?

Wenn kritische Kriterien eine nicht bestandene Bewertung erhalten, fällt die Gesamtbewertung auf 0 % — unabhängig von den Bewertungen anderer Kriterien. Dies überschreibt alle Gewichtungen und die Bestehensgrenze. Nicht bewertete Kriterien lösen kein Versagen aus. Kritische Kriterien sind nützlich für unverhandelbare Standards wie Compliance-Anforderungen, Sicherheit oder Richtlinieneinhaltung und Eskalationsmanagement.

Wie funktionieren Scorecard-Gewichtungen?

Gewichtungen sind relativ zueinander, nicht fest an eine Skala von 100 gebunden. Die Summe kann jede Zahl sein — entscheidend ist der Anteil, den jedes Kriterium beiträgt. Zum Beispiel trägt ein Kriterium mit einem Gewicht von 25 von insgesamt 50 genauso viel bei wie eines mit 50 von 100. Gewichtungen gelten nur für Kriterien, die in die Bewertung einfließen.

Können KI-generierte Bewertungen überschrieben werden?

Ja. Teammitglieder können jede KI-Bewertung manuell überschreiben, wenn sie eine Abweichung feststellen. Klicken Sie einfach auf die Bewertung im Score-Tab des Gesprächs, um sie zu ändern.

Kann ich beim Wiederverwenden von Scorecard-Kriterien auch deren Gewichtungen übernehmen?

Nein. Nur Name und Beschreibung werden übernommen. Gewichtungen müssen immer neu konfiguriert werden.

Wie wirkt sich die Auswahl von N/A bei Scorecard-Kriterien auf die Gesamtbewertung aus?

Das Kriterium wird vollständig von der Gewichtung ausgeschlossen. Die Gesamtbewertung wird nur auf Basis der verbleibenden bewerteten Kriterien berechnet.

Wo kann ich Bewertungsnoten sehen?

Bewertungen sind in der Monitor-Gesprächsliste sichtbar (mit Gesamtbewertung und einzelnen Kriterienbewertungen als Spalten) und in jedem einzelnen Gespräch unter dem Score-Tab.

Kann ich eine Scorecard als Entwurf speichern?

Nein, derzeit nicht.

Ist es möglich zu sehen, ob eine Scorecard bearbeitet wurde und von wem?

Nein. Eine Prüfprotokoll-Historie für Scorecard-Bearbeitungen ist derzeit nicht verfügbar.


Auto-review

Was ist Auto-review?

Auto-review ist eine Funktion, die Sie auf einer Scorecard aktivieren können und die den gesamten QA-Prozess automatisiert. Wenn aktiviert, wird der manuelle Prüfschritt übersprungen, wenn die KI alle Kriterien einer Scorecard bewertet. Gespräche werden automatisch als geprüft markiert, und nur Fehler oder Sonderfälle erfordern menschliche Aufmerksamkeit.

Wann überspringt Auto-review den manuellen Prüfschritt?

Auto-review überspringt die manuelle Prüfung nur, wenn die KI alle Attribute in der Scorecard sicher bewerten kann. Wenn ein Attribut einen menschlichen Prüfer erfordert oder die KI ein Attribut nicht sicher bewerten kann, erscheinen diese Gespräche weiterhin in der Unreviewed-Warteschlange.

Was passiert, wenn Auto-review eine nicht bestandene Bewertung erkennt?

Wenn die KI eine nicht bestandene Bewertung vergibt, wird das Gespräch automatisch als Reviewed + fix needed markiert und in die Warteschlange Follow-up actions needed geleitet — kein manueller Prüfschritt erforderlich. Teammitglieder können die Bewertung bei Bedarf dennoch überschreiben.

Welcher Prüferstatus wird für Auto-reviewed-Gespräche angezeigt?

Der Prüferstatus wird als Auto-reviewed angezeigt. Diese Gespräche umgehen die manuelle Unreviewed-Warteschlange, es sei denn, die KI erkennt einen Fehler oder kann ein Attribut nicht sicher bewerten.

Lernt die KI, wenn ein Mensch eine KI-Bewertung ändert, für zukünftige Prüfungen dazu?

Nein. Die KI lernt derzeit nicht von menschlichen Überschreibungen.

Kann ich einen Monitor testen, bevor ich ihn einschalte?

Ja — und wir empfehlen es dringend. Für Monitore, die natürliche Sprach-Flag-Kriterien verwenden, nutzen Sie das Test monitor-Tool, um Ihre Kriterien an echten Gesprächen zu validieren, bevor Sie live gehen. Es zeigt, welche Gespräche markiert würden, und hebt Fehlzuordnungen hervor, damit Sie diese verfeinern und Fehlalarme reduzieren können.

Kann ich einen Test durchführen, wenn ich keine Flag-Kriterien eingerichtet habe?

Nein. Die Option Test ausführen erscheint nur, wenn Flag-Kriterien konfiguriert wurden.

Wie kann ich überprüfen, warum ein Gespräch meine Flag-Kriterien erfüllt oder nicht erfüllt hat?

Gehen Sie zum Monitor, klicken Sie auf Bearbeiten und öffnen Sie den Abschnitt Test ausführen. Unter Flag-Kriterien an Beispielgesprächen testen geben Sie die Gesprächs-ID ein und klicken auf Hinzufügen. Das Monitor-Ergebnis erklärt, warum das Gespräch übereinstimmte oder nicht.

Gibt es einen API-Endpunkt für Monitor-Berichtsdaten?

Nein, im Moment nicht.


Bewertungen und workflow

Was bedeuten die QA-Review-Statuslabels?

Jeder Status zeigt an, wo sich ein Gespräch im Review-workflow befindet:

Label

Bedeutung

Unreviewed

Es hat noch keine Überprüfung stattgefunden

Reviewed

Überprüfung abgeschlossen, keine Aktion erforderlich

Reviewed + fix needed

Überprüfung abgeschlossen, eine Korrektur ist erforderlich

Reviewed + won’t fix

Überprüfung abgeschlossen, Problem erkannt, aber wird nicht behoben

Reviewed + fixed

Überprüfung abgeschlossen, Korrektur wurde angewendet

Wie finde ich Gespräche, die mir zugewiesen sind?

Gehen Sie zur Warteschlange Unreviewed conversations auf der Monitor-Seite. Filtern Sie dort nach Ihrem Namen, um nur Gespräche zu sehen, die Ihnen über alle Monitore hinweg zugewiesen sind.

Was passiert, wenn ich ein Gespräch als Reviewed + fix needed markiere?

Das Gespräch wird automatisch von der Warteschlange Unreviewed conversations in die Warteschlange Follow-up actions needed verschoben, wo Ihr Content- oder QA-Team es bearbeiten kann. Sobald die Korrektur angewendet wurde, können Sie den Status auf Reviewed + fixed aktualisieren.

Kann ich einen Teamkollegen in einer Notiz unter dem Score-Tab markieren?

Nein. Das Markieren von Teamkollegen in Score-Notizen wird derzeit nicht unterstützt.


Berechtigungen und Zugriff

Welche Berechtigungen benötige ich, um Monitors zu verwenden?

Es sind zwei Berechtigungen erforderlich, die beide von einem Workspace-Administrator aktiviert werden:

  • Can view Fin and Automation settings — für die tägliche Arbeit wie das Überprüfen von Gesprächen und das Anpassen von Kriterienwerten

  • Can create, edit and internally share Reports — für den Konfigurationszugriff wie das Erstellen, Bearbeiten oder Löschen von Monitors und Scorecards

Wer kann Monitors erstellen und bearbeiten?

Jeder Teamkollege mit den Berechtigungen Can view Fin and Automation settings und Can create, edit and internally share Reports kann Monitors und Scorecards erstellen, bearbeiten und löschen. Teamkollegen mit nur der ersten Berechtigung können Gespräche überprüfen und Kriterienwerte anpassen, aber keine Monitors erstellen oder löschen.

Hat dies deine Frage beantwortet?