Zum Hauptinhalt springen

Monitore FAQs

Finden Sie Antworten auf häufige Fragen zur Einrichtung von Monitoren, Verwaltung von Berechtigungen und Fehlerbehebung in Ihren Quality Assurance workflows.

Verfasst von Dawn Perrott

Was ist der Unterschied zwischen einem Monitor und einer Scorecard?

Sie erfüllen zwei verschiedene Funktionen und arbeiten zusammen:

  • Monitore definieren, welche Gespräche überprüft werden – Sie legen die Kriterien fest (Filter oder natürliche Sprach-Flag-Kriterien), und der Monitor zeigt automatisch passende Gespräche an.

  • Scorecards definieren, wie jedes Gespräch bewertet wird – Sie legen die Kriterien, Bewertungsoptionen und Bewertungsregeln fest, die Reviewer (oder AI) zur Qualitätsbewertung verwenden.

Ein Monitor ohne Scorecard markiert Gespräche, bewertet sie aber nicht. Für einen vollständigen QA workflow benötigen Sie beides.

Gibt es Beschränkungen, wie viele Monitore oder Scorecard-Kriterien ich erstellen kann?

Ja, folgende Beschränkungen gelten:

  • Bis zu 20 Monitore mit natürlichen Sprach-Flag-Kriterien. Monitore mit vordefinierten Filtern sind unbegrenzt.

  • Bis zu 20 AI-bewertete Scorecard-Kriterien. Manuell bewertete Kriterien sind unbegrenzt.

Kann ich mehrere Monitore gleichzeitig laufen lassen?

Ja, Sie können so viele Monitore erstellen, wie Sie benötigen, jeweils mit Fokus auf einen anderen Gesprächs- oder Qualitätssignaltyp. Zum Beispiel könnten Sie einen Monitor für eine zufällige Baseline-Stichprobe, einen weiteren für Gespräche mit niedrigem CX-Score und einen weiteren für Gespräche, die als Richtlinienrisiken markiert sind, betreiben. Jeder Monitor läuft unabhängig. Beachten Sie, dass es eine Begrenzung von 20 Monitoren mit natürlichen Sprach-Flag-Kriterien gibt – Monitore mit vordefinierten Filtern sind unbegrenzt.

Kann ich einen Monitor nach der Erstellung bearbeiten?

Ein Monitor kann nach der Erstellung teilweise bearbeitet werden. Folgende Einstellungen können jederzeit auf der Monitore-Seite aktualisiert werden: Monitorname, Flag-Kriterien, Filter, Reviewer und die angehängte Scorecard. Wenn Sie Ihre Änderungen speichern, werden alle Gespräche, die den aktualisierten Kriterien entsprechen, automatisch neu bewertet – einschließlich zuvor markierter Gespräche, die innerhalb der aktualisierten Flag-Kriterien, Filter, Scorecard usw. liegen.

Der Überwachungsmodus (kontinuierlich, einmalig oder geplant), das Startdatum und die Stichprobenkontrollen (z. B. Anzahl der Gespräche pro Tag oder Woche) sind jedoch gesperrt, sobald ein Monitor gespeichert und aktiviert wurde. Diese Einstellungen steuern, wie der Monitor läuft und wie Backfills erstellt werden, daher können sie nach der Erstellung nicht mehr geändert werden.

Wenn Sie eine dieser gesperrten Einstellungen ändern müssen, wird empfohlen, einen neuen Monitor mit der gewünschten Konfiguration zu erstellen. Sie können die Option Monitor duplizieren verwenden (verfügbar im Drei-Punkte-Menü auf der Monitore-Seite), um einen bestehenden Monitor zu kopieren und schnell anzupassen.

Kann ich einen Monitor für Teamkollegen-Gespräche verwenden, nicht nur für Fin?

Ja, zusätzlich zur Bewertung von Fin AI Agent-Gesprächen unterstützen Monitore auch die QA von menschlichen Agenten. Sie können einen Monitor erstellen, der auf menschliche Teamkollegen-Gespräche abzielt, eine Scorecard mit Ihren QA-Kriterien anhängen und Gespräche automatisch kontinuierlich, einmalig oder geplant überprüfen lassen.

Gibt es eine Möglichkeit, einen Monitor zu pausieren oder zu archivieren?

Ja. Sie können einen Monitor archivieren, um ihn von der Hauptseite der Monitore auszublenden, ohne ihn zu löschen. Archivierte Monitore behalten alle historischen Daten und Gesprächszahlen. Um zu archivieren, klicken Sie im Drei-Punkte-Menü einer Monitor-Karte auf Monitor archivieren. Um archivierte Monitore anzuzeigen, verwenden Sie das Filter-Dropdown auf der Monitore-Seite und wählen Archivierte Monitore. Sie können einen archivierten Monitor jederzeit wiederherstellen – siehe unten.

Wie stelle ich einen archivierten Monitor wieder her?

Wechseln Sie auf der Monitore-Seite mit dem Filter-Dropdown zu Archivierte Monitore. Finden Sie den Monitor, den Sie wiederherstellen möchten, klicken Sie im Drei-Punkte-Menü seiner Karte und wählen Monitor wiederherstellen. Ein Bestätigungsdialog erscheint. Optional können Sie Verpasste Gespräche der letzten 2 Wochen nachholen aktivieren, um Gespräche einzuholen, die während der Archivierung stattfanden. Klicken Sie auf Wiederherstellen, um ihn zu reaktivieren.

Wie stelle ich einen archivierten Monitor wieder her?

Ja, klicken Sie im Drei-Punkte-Menü eines Monitors auf der Monitore-Seite und wählen Monitor duplizieren. Im selben Menü finden Sie auch Optionen zum Bearbeiten, Archivieren oder Löschen des Monitors.

Gibt es eine Möglichkeit, einen Monitor zu duplizieren?

Ja, klicken Sie im Drei-Punkte-Menü eines Monitors auf der Monitore-Seite und wählen Monitor duplizieren. Im selben Menü finden Sie auch Optionen zum Bearbeiten, Archivieren oder Löschen des Monitors.

Kann ich einen Monitor als Entwurf speichern?

Nein, derzeit nicht.

Haben Monitore Zugriff auf die vollständige Workspace-Konfiguration?

Nein, Monitore haben nur Zugriff auf das Gesprächstranskript. Sie haben keinen Zugriff auf die Knowledge base, Guidance, Tasks oder Procedures. Zum Beispiel kann ein Monitor nicht prüfen, ob Fin Zugriff auf einen bestimmten Artikel hatte oder ob ein Gespräch basierend auf einer Guidance-Regel an einen Menschen weitergeleitet werden sollte.

Ist es möglich zu sehen, wann ein Monitor bearbeitet wurde, was sich geändert hat und von wem?

Nein, eine Prüfprotokoll-Historie für Monitor-Bearbeitungen ist derzeit nicht in der Benutzeroberfläche verfügbar.

Ist es möglich, benutzerdefinierte Datumsbereiche in der Aktivitätsansicht auf dem Monitor-Dashboard zu verwenden?

Nein, die einzigen verfügbaren Datumsfilter sind letzte 7 Tage, letzte 8 Wochen und letzte 6 Monate.

Gibt es einen API-Endpunkt für Monitor-Berichtsdaten?

Nein, derzeit nicht.

Kann ich menschliche Agent QA Monitore auf Fin Standalone verwenden?

Nein, menschliche Agent QA Monitore sind auf Fin Standalone nicht verfügbar.


Gespräche und Berechtigung

Was ist die minimale Gesprächslänge, damit ein Monitor es einschließt?

Ein Gespräch muss mindestens 2 Nachrichten von Fin und 2 Nachrichten vom Kunden enthalten, um in einen Monitor aufgenommen zu werden.

Kann dasselbe Gespräch in mehreren Monitoren erscheinen?

Ja. Jeder Monitor läuft als unabhängige Ja/Nein-Prüfung, sodass ein Gespräch, das den Kriterien mehrerer Monitore entspricht, in jedem markiert wird. Wenn Sie von einem Monitor aus zu einem Gespräch wechseln, sehen Sie genau, warum es von diesem speziellen Monitor markiert wurde.

Wenn ein Gespräch bewertet wurde und dann wieder geöffnet wird, wird es erneut bewertet?

Nein. Ein Gespräch wird pro Monitor nur einmal bewertet. Wenn das Gespräch später wieder geöffnet wird, weil der Kunde eine neue Nachricht sendet, wird es unter derselben Monitor-Version nicht erneut zugeordnet oder bewertet. Die ursprüngliche Bewertung ist die einzige, die aufgezeichnet wird.

Kann ich historische Gespräche beim Erstellen eines Monitors nachholen?

Ja. Beim ersten Erstellen eines Monitors können Sie bis zu 90 Tage historische Gespräche nachholen. Ab diesem Zeitpunkt erfasst der Monitor automatisch neue passende Gespräche.

Funktionieren Monitore für Fin Voice?

Nein. Fin Voice wird derzeit von Monitoren nicht unterstützt.

Kann ich Monitors verwenden, um menschliche Telefongespräche zu bewerten?

Nein. Monitors bewerten nur Chat- und Messaging-Gespräche – Telefongespräche werden derzeit nicht unterstützt, egal ob sie von menschlichen Teammitgliedern oder Fin Voice geführt werden.

Werden tickets von Monitors bewertet?

Nein. Weder Kundentickets noch Tracker-Tickets werden in Monitors aufgenommen – nur Gespräche.

Was passiert, wenn ich die Flag-Kriterien eines Monitors aktualisiere – werden bestehende Gespräche entfernt?

Nein. Gespräche, die den vorherigen Flag-Kriterien entsprachen, bleiben im Monitor. Nur zukünftige Gespräche werden mit der aktualisierten Konfiguration abgeglichen.

Wie lange dauert es, bis Gespräche in einem Monitor erscheinen?

Gespräche sollten sofort erscheinen. Die Gesprächszahl im Monitor-Dashboard kann jedoch bei hohem Gesprächsaufkommen einige Minuten zur Aktualisierung benötigen.

Wenn ein Gespräch fälschlicherweise in einem Monitor angezeigt wird, kann ich es entfernen?

Nein. Es ist derzeit nicht möglich, ein Gespräch manuell aus einem Monitor zu entfernen.

Kann ich einen Test an einem Monitor durchführen, wenn ich keine Flag-Kriterien festgelegt habe?

Nein. Die Option "Test ausführen" erscheint nur, wenn Flag-Kriterien konfiguriert wurden.

Wie kann ich überprüfen, warum ein Gespräch meine Flag-Kriterien erfüllt oder nicht erfüllt hat?

Gehen Sie zum Monitor, klicken Sie auf Bearbeiten und öffnen Sie den Abschnitt Test ausführen. Unter Flag-Kriterien an Beispielgesprächen testen geben Sie die Gesprächs-ID ein und klicken auf Hinzufügen. Das Monitor-Ergebnis erklärt, warum das Gespräch übereinstimmte oder nicht.

Warum erscheint ein bestimmtes Gespräch nicht in meinem Monitor?

Wenn ein Gespräch nicht angezeigt wird, prüfen Sie diese häufigen Ursachen:

  • Mindestnachrichtenanforderung: Das Gespräch muss mindestens 2 Nachrichten von Fin und 2 Nachrichten vom Kunden enthalten.

  • Tickettyp: Kundentickets und Tracker-Tickets werden nicht in Monitors aufgenommen – nur Gespräche.

  • Telefonate: Monitors bewerten nur Chat- und Messaging-Gespräche – Telefongespräche werden derzeit nicht unterstützt.

  • Fin Voice: Monitors unterstützen keine Fin Voice-Gespräche.

  • Startdatum: Das Gespräch könnte vor dem konfigurierten Startdatum des Monitors stattgefunden haben.

  • Filterabweichung: Wenn Ihr Monitor präzise Filter verwendet (wie Resolution State, Topic oder CX Score), könnte das Gespräch diese Kriterien nicht erfüllen. Überprüfen Sie Ihre Filtereinstellungen.

  • Flag-Kriterienabweichung: Wenn Ihr Monitor natürliche Sprach-Flag-Kriterien verwendet, nutzen Sie das Tool Test ausführen. Gehen Sie zum Monitor, klicken Sie auf Bearbeiten, öffnen Sie den Abschnitt Test ausführen, geben Sie die Gesprächs-ID ein und klicken Sie auf Hinzufügen. Das Ergebnis erklärt, ob das Gespräch übereinstimmte und warum.


Scorecards und Bewertung

Brauche ich eine Scorecard, um einen Monitor zu verwenden?

Nein, aber ohne eine Scorecard markiert Ihr Monitor Gespräche, ohne sie zu bewerten. Prüfer sehen übereinstimmende Gespräche ohne Bewertungskriterien. Für einen vollständigen QA-Workflow fügen Sie während der Monitoreinrichtung eine Scorecard hinzu.

Kann ich verschiedene Scorecards an verschiedene Monitors anhängen?

Ja. Jeder Monitor kann seine eigene Scorecard haben, sodass Sie verschiedene Gesprächstypen nach unterschiedlichen Qualitätskriterien bewerten können. Zum Beispiel könnte ein Monitor für schutzbedürftige Kunden eine andere Scorecard verwenden als ein Monitor für Abrechnungsgespräche.

Kann ich Scorecard-Kriterien in mehreren Scorecards wiederverwenden?

Ja – Titel und Beschreibungen der Kriterien sind wiederverwendbar. Sobald Sie Kriterien erstellt haben, können Sie diese zu mehreren Scorecards hinzufügen. Frühere Bewertungsergebnisse können jedoch nicht wiederverwendet werden und müssen in jeder Scorecard neu festgelegt werden.

Kann ich KI-bewertete und manuell bewertete Kriterien in derselben Scorecard mischen?

Ja. Sie können für jedes Kriterium wählen, ob KI oder ein menschlicher Prüfer die Bewertung übernimmt. Wenn die Auto-review aktiviert ist und ein Kriterium manuelle Bewertung erfordert, erscheinen diese Gespräche weiterhin in der Unreviewed-Warteschlange.

Was bewirkt das Markieren von Kriterien als kritisch?

Wenn kritische Kriterien eine nicht bestandene Bewertung erhalten, fällt die Gesamtbewertung auf 0 % – unabhängig von den Bewertungen anderer Kriterien. Dies überschreibt alle Gewichtungen und die Bestehensgrenze. Nicht bewertete Kriterien lösen kein Versagen aus. Kritische Kriterien sind nützlich für unverhandelbare Standards wie Compliance-Anforderungen, Sicherheits- oder Richtlinieneinhaltung und Eskalationsmanagement.

Wie funktionieren Scorecard-Gewichtungen?

Gewichtungen sind relativ zueinander, von 0 bis zu einer Skala von 100. Die Summe kann beliebig sein – wichtig ist das Verhältnis, das jedes Kriterium beiträgt. Zum Beispiel trägt ein Kriterium mit Gewicht 25 von insgesamt 50 genauso viel bei wie eines mit 50 von 100. Gewichtungen gelten nur für Kriterien, die in die Bewertung einfließen.

Können KI-generierte Bewertungen überschrieben werden?

Ja. Teammitglieder können jede KI-Bewertung manuell überschreiben, wenn sie eine Abweichung feststellen. Klicken Sie einfach auf die Bewertung im Score-Tab des Gesprächs, um sie zu ändern.

Kann ich bei der Wiederverwendung von Scorecard-Kriterien auch deren Gewichtungen übernehmen?

Nein. Nur Name und Beschreibung werden übernommen. Gewichtungen müssen immer neu konfiguriert werden.

Wie wirkt sich die Auswahl von N/A bei Scorecard-Kriterien auf die Gesamtbewertung aus?

Das Kriterium wird vollständig von der Gewichtung ausgeschlossen. Die Gesamtbewertung wird nur auf Basis der verbleibenden bewerteten Kriterien berechnet.

Wo kann ich Bewertungsnoten sehen?

Bewertungen sind in der Monitor-Gesprächsliste sichtbar (mit Gesamtbewertung und einzelnen Kriterienbewertungen als Spalten) und in jedem einzelnen Gespräch unter dem Score-Tab.

Kann ich eine Scorecard als Entwurf speichern?

Nein, derzeit nicht.

Ist es möglich zu sehen, ob eine Scorecard bearbeitet wurde und von wem?

Nein. Eine Prüfprotokollhistorie für Scorecard-Änderungen ist derzeit nicht verfügbar.


Auto-review

Was ist Auto-review?

Auto-Review ist eine Funktion, die Sie auf einer Scorecard aktivieren können und die den gesamten QA-Prozess automatisiert. Wenn sie eingeschaltet ist, wird der manuelle Überprüfungsschritt übersprungen, wenn AI alle Kriterien auf einer Scorecard bewertet. Gespräche werden automatisch als überprüft markiert, und nur Fehler oder Grenzfälle erfordern menschliche Aufmerksamkeit.

Welchen Reviewer-Status zeigt Auto-reviewed Gespräche an?

Der Reviewer-Status wird als Auto-reviewed angezeigt. Diese Gespräche umgehen die manuelle Unreviewed-Warteschlange, es sei denn, die AI erkennt einen Fehler oder kann ein Attribut nicht sicher bewerten.

Lernt die AI aus einer von einem Menschen geänderten AI-Bewertung für zukünftige Reviews?

Nein. AI lernt momentan nicht aus menschlichen Überschreibungen.

Kann ich einen Monitor testen, bevor ich ihn einschalte?

Ja — und wir empfehlen es dringend. Für Monitore, die natürliche Sprach-Flag-Kriterien verwenden, nutzen Sie das Test monitor Tool, um Ihre Kriterien anhand realer Gespräche zu validieren, bevor Sie live gehen. Es zeigt, welche Gespräche markiert würden, und hebt Abweichungen hervor, damit Sie verfeinern und Fehlalarme reduzieren können.

Kann ich einen Test durchführen, wenn ich keine Flag-Kriterien eingerichtet habe?

Nein. Die Option Run test erscheint nur, wenn Flag-Kriterien konfiguriert wurden.

Wie kann ich überprüfen, warum ein Gespräch meine Flag-Kriterien erfüllt oder nicht erfüllt hat?

Gehen Sie zum Monitor, klicken Sie auf Edit und öffnen Sie den Abschnitt Run test. Unter Test flag criteria on sample conversations geben Sie die Gesprächs-ID ein und klicken auf Add. Das Monitor-Ergebnis erklärt, warum das Gespräch die Kriterien erfüllt hat oder nicht.

Gibt es einen API-Endpunkt für Monitor-Berichtsdaten?

Nein, momentan nicht.


Gesprächslistenansicht

Warum hat sich die Gesprächslistenansicht geändert?

Wir haben die Gesprächslistenansicht ersetzt, die Sie beim Klicken auf einen Monitor sehen. Die neue Erfahrung basiert auf einer anderen Grundlage, die zuverlässiger, stabiler und schneller ist. Obwohl sie noch nicht alle Funktionen der vorherigen Ansicht enthält, sind die fehlenden Funktionen vorübergehend und werden in den kommenden Wochen wieder eingeführt.

Einige Funktionen, die ich vorher genutzt habe, fehlen — wann kehren sie zurück?

Die folgenden Funktionen sind vorübergehend nicht verfügbar und werden in den kommenden Wochen wieder eingeführt:

  • Sortieren und Neuordnen von Spalten

  • Einige monitor-spezifische Filter

  • Ändern von Feldern im Details-Tab des rechten Gesprächspanels (z. B. Neu-Zuweisung an ein anderes Team)


Reviews und workflows

Was bedeuten die QA-Review-Statuslabels?

Es gibt zwei Review-Zustände:

Label

Was es bedeutet

Unreviewed

Es hat noch keine Überprüfung stattgefunden

Submitted

Überprüfung abgeschlossen und eingereicht

Wie finde ich Gespräche, die mir zugewiesen sind?

Gehen Sie zur Unreviewed conversations-Warteschlange auf der Monitors-Seite. Filtern Sie dort nach Ihrem eigenen Namen, um nur Gespräche zu sehen, die Ihnen über alle Monitore hinweg zugewiesen sind.

Kann ich noch nach alten Review-Status wie ‚Fix Needed‘ oder ‚Won’t Fix‘ filtern?

Ja. Um bestehende workflows nicht zu stören, können Sie Gespräche weiterhin mit Legacy-Status filtern, sodass zuvor klassifizierte Gespräche zugänglich bleiben. Neue Gespräche können jedoch nicht mehr diesen Legacy-Status zugewiesen werden — nur Unreviewed und Submitted sind künftig verfügbar.

Was ist mit den alten Status ‚Fix needed‘, ‚Won't fix‘ und ‚Fix complete‘ passiert?

Diese Status waren Teil einer früheren Version von Monitors und wurden durch ein vereinfachtes Zwei-Zustands-System ersetzt: Unreviewed und Submitted.

Sie können weiterhin nach den alten Status filtern, um zuvor klassifizierte Gespräche zu finden, aber neue Gespräche können nur auf Unreviewed oder Submitted gesetzt werden. Gespräche, die mit einer nicht bestandenen Bewertung eingereicht werden, werden automatisch zur Nachverfolgung markiert.

Die Änderung ist beabsichtigt — sie bildet die Grundlage für ein flexibleres System. Wir werden einen neuen workflow einführen, der auf Back-office Tickets basiert, bei dem Sie eigene benutzerdefinierte Status definieren und verwalten können.

Werden benutzerdefinierte Review-Status in Zukunft verfügbar sein?

Ja. Die Vereinfachung auf Unreviewed und Submitted ist beabsichtigt und wird nicht rückgängig gemacht, bildet aber die Grundlage für ein flexibleres System. Wir werden einen neuen workflow einführen, der auf Back-office Tickets basiert, bei dem Sie eigene benutzerdefinierte Status definieren und verwalten können.

Was passiert, wenn ich eine Review einreiche?

Sobald alle Scorecard-Kriterien bewertet sind, setzen Sie den Review-Status auf Submitted, um die Review als abgeschlossen zu markieren. Gespräche, die mit einer nicht bestandenen Bewertung eingereicht werden, werden zur Nachverfolgung markiert. Sie können vor dem Einreichen noch eine Notiz hinzufügen — zum Beispiel, um ein Inhaltsupdate zu kennzeichnen.

Ein Gespräch hat die Scorecard-Review nicht bestanden — was soll ich tun?

Wenn eine Review mit einer nicht bestandenen Bewertung eingereicht wird, wird das Gespräch automatisch zur Nachverfolgung markiert. Der nächste Schritt hängt davon ab, warum es nicht bestanden hat:

  • Inhaltslücke — die Antwort war falsch oder unvollständig, weil Fin’s knowledge base sie nicht abdeckt: Aktualisieren Sie den relevanten Artikel, Snippet oder internen Artikel im Knowledge Hub.

  • Anleitungsproblem — Fin hat sich falsch verhalten (z. B. eskaliert, obwohl es nicht sollte, oder den falschen Ton verwendet): Fügen Sie eine Anleitungsregel hinzu oder aktualisieren Sie sie.

  • Verfahrensproblem — ein workflow-Schritt wurde nicht wie vorgesehen ausgeführt: Überprüfen und aktualisieren Sie das relevante Verfahren.

Beachten Sie, dass das Einreichen einer Review die Reaktion von Fin nicht direkt ändert — Änderungen an Inhalten, Anleitungen oder Verfahren verbessern die zukünftige Leistung von Fin.

Kann ich einen Teamkollegen in einer Notiz unter dem Score-Tab markieren?

Nein. Das Markieren von Teamkollegen in Score-Notizen wird derzeit nicht unterstützt.


Berechtigungen und Zugriff

Welche Berechtigungen benötige ich, um Monitors zu verwenden?

Es sind zwei Berechtigungen erforderlich, die beide von einem Workspace-Admin aktiviert werden:

  • Kann Fin- und Automationseinstellungen anzeigen — für die tägliche Arbeit wie das Überprüfen von Gesprächen und Anpassen von Kriterienwerten

  • Kann Reports erstellen, bearbeiten und intern teilen — für den Zugriff auf die Konfiguration wie das Erstellen, Bearbeiten oder Löschen von monitors und Scorecards

Wer kann monitors erstellen und bearbeiten?

Jeder Teamkollege mit beiden Berechtigungen Kann Fin- und Automationseinstellungen anzeigen und Kann Reports erstellen, bearbeiten und intern teilen kann monitors und Scorecards erstellen, bearbeiten und löschen. Teamkollegen mit nur der ersten Berechtigung können Gespräche überprüfen und Kriterienwerte anpassen, aber keine monitors erstellen oder löschen.

Hat dies deine Frage beantwortet?