Zum Hauptinhalt springen

Batch-Test Fin AI Agent

Führen Sie Batch-Tests mit echten Kundenfragen durch, um Fin’s Antworten vor dem Einsatz zu optimieren.

Verfasst von Beth-Ann Sher

Batch test ermöglicht es Ihnen, zu simulieren, wie Fin auf echte Kundenfragen reagieren wird – bevor diese Antworten tatsächliche Kunden erreichen. Es hilft Ihnen, die Inhaltsabdeckung zu überprüfen, unerwartete Ergebnisse zu debuggen und Fin’s Verhalten über Marken, users, Sprachen und Automatisierungen hinweg zu verfeinern.

Tipp: Für mehrstufige Testgespräche mit automatischen Bestehen/Nicht-Bestehen-Ergebnissen und einer Regressionstest-Suite, die Sie nach jeder Änderung erneut ausführen können, verwenden Sie Evals. Evals decken alles ab, was Batch test macht, und der CSV-Import ermöglicht es Ihnen, Ihre bestehenden Batch test Fragen in einem Schritt zu übernehmen.

Hinweis: Ab dem 5. November 2026 wird Batch test in neuen Workspaces nicht mehr in der linken Navigation angezeigt. Wenn Sie Batch test bereits verwenden, bleibt es weiterhin verfügbar. Neue Workspaces können Evals nutzen, um Fin zu testen.

Wichtige Vorteile / Anwendungsfälle:

  • Validieren Sie Fin’s Antworten über mehrere Marken und user-Profile hinweg, bevor Sie live gehen.

  • Diagnostizieren und beheben Sie Inhaltslücken, indem Sie die Quelle, Persönlichkeit und Anleitung hinter jeder Antwort prüfen.

  • Organisieren Sie Testläufe in wiederverwendbare Gruppen, um Änderungen im Zeitverlauf zu verfolgen.

  • Sehen Sie, wann Automatisierungen ausgelöst werden, einschließlich Fin-Aufgaben, Aktionen und benutzerdefinierten Antworten.

  • Steuern Sie Spracheinstellungen und stellen Sie sicher, dass Echtzeitübersetzungen wie erwartet funktionieren.

Batch Test ist für alle Kunden konzipiert, die Intercom zur Unterstützung von Gesprächen nutzen – egal, ob Sie ein bestehender Fin-Kunde sind oder einfach nur dessen Potenzial erkunden möchten.

Um auf Batch Test für Fin zuzugreifen, müssen Teammitglieder einen vollen Sitz haben und ihre Zugriffsberechtigung für Gespräche auf "Alle Gespräche" eingestellt sein.


So verwenden Sie Batch test

1. Erstellen Sie Ihre Fragen

Gehen Sie zu Fin AI Agent > Test in der Hauptnavigation und wählen Sie, wie Sie Fragen hinzufügen möchten.

Die Optionen zum Hinzufügen von Fragen für einen Batch test sind:

  • Aus vergangenen Gesprächen generieren

    • Alle Gespräche

    • Aus einem bestimmten AI-Thema

  • Fragen manuell hinzufügen

  • Eine CSV-Datei mit Fragen hochladen

Diese Optionen ermöglichen es Ihnen sicherzustellen, dass Fin vor dem Livegang mit echten, relevanten Kundenanfragen getestet wird, damit Sie Inhaltslücken erkennen und Antworten für verschiedene Zielgruppen und Szenarien optimieren können.

Hinweis:

  • Sie können bis zu 50 Fragen pro Testgruppe hochladen.

  • Sie müssen mindestens 1 Gespräch in den letzten 90 Tagen haben, damit die Option Aus inbox generieren erscheint.

  • Die Berechtigungen „Kann auf Personen-, Firmen- und Account-Listen zugreifen“ und „Kann auf lead- und user-Profilseiten zugreifen“ sind ebenfalls erforderlich.

So erstellen Sie Ihre Liste mit Kundenfragen

Jeder Ansatz zur Generierung von Fragegruppen hat seine eigenen Vorteile und idealen Anwendungsfälle.

Fragen aus vergangenen Gesprächen generieren

Sie können automatisch bis zu 50 Fragen basierend auf Ihren neuesten Kundenkonversationen (30-90 Tage) generieren, sodass der Fragenkatalog genau widerspiegelt, was Kunden gerade jetzt fragen.

Dies ist eine schnelle Möglichkeit, eine Liste von Fragen zu erhalten, die aktuelle Kundenbedürfnisse genau widerspiegelt.

Hinweis: Die Option erscheint nur, wenn es zumindest ein gewisses aktuelles Gesprächsvolumen gibt (z. B. in den letzten 90 Tagen).

Fragen nach Thema generieren

Diese Methode verwendet AI-Themen, um themenspezifische Fragegruppen basierend auf echten Kundenanfragen zu generieren. Sie ist besonders nützlich, wenn Sie sich auf bestimmte Themenbereiche konzentrieren und verstehen möchten, wie gut diese behandelt werden.

Häufige Anwendungsfälle sind:

  • Vorbereitung auf saisonale Spitzen bei Kundenfragen (zum Beispiel Steuerfragen zum Jahresende).

  • Bewertung der Fin-Leistung nach Aktivierung neuer Inhalte zu bestimmten Themen.

  • Priorisierung von Themen mit hohem Volumen oder niedrigem CSAT, die durch den Topics Explorer identifiziert wurden.

Hinweis: Diese Methode erfordert, dass AI Topics in Ihrem Workspace verfügbar sind. Der Topics Explorer basiert auf aktuellen Gesprächsdaten, um Erkenntnisse zu generieren.

Fragen manuell hinzufügen

Wenn Sie Ihre Fragen nicht aus vorhandenen Daten generieren möchten, können Sie eine Liste von Fragen kopieren und einfügen oder sie einzeln hinzufügen. Diese Methode gibt Ihnen volle Kontrolle über den genauen Inhalt und die Formulierung, ohne von historischen Gesprächen abhängig zu sein.

Häufige Anwendungsfälle sind:

  • Sie haben eine vorgefertigte Fragenliste mit compliance-kritischen Szenarien und/oder Randfällen, die in historischen Gesprächsdaten nicht vorkommen.

  • Sie testen Antworten zu neuen Funktionen oder Richtlinien ohne vergangenes Gesprächsvolumen.

Eine CSV-Datei mit Fragen hochladen

Diese Methode ermöglicht es Ihnen, eine anderswo generierte Fragenliste hochzuladen, z. B. von einer anderen Support-Plattform. Sie benötigen lediglich eine .csv-Datei mit einer einzigen Spalte, die bis zu 50 Testfragen enthält.

Häufige Anwendungsfälle sind:

  • Sie müssen eine kuratierte Liste in großen Mengen laden (z. B. pro Thema, pro Zielgruppe, pro Region).

  • Sie müssen wiederholbare Bewertungen über Teams hinweg durchführen.

  • Sie bereiten einen Launch oder saisonalen Anstieg vor und möchten mit einem einzigen Upload 30–50 kanonische Fragen abdecken.

Indem Sie die richtige Methode zur Fragegenerierung für Ihre Bedürfnisse auswählen, können Sie Fin’s Leistung anhand relevanter Kundenszenarien bewerten und verfeinern, um Lücken zu erkennen und Antworten im Laufe der Zeit zu verbessern.

2. Konfigurieren Sie Ihren Test

Ihre Testfragen werden automatisch mit einem generischen Vorschauuser gestartet, um auf alle Inhalte zuzugreifen und alle Automatisierungen ohne Zielgruppenansprache auszulösen. Um diese Testeinstellungen zu konfigurieren, klicken Sie oben auf der Seite auf das Dropdown Verwalten und wählen dann Einstellungen aus.

Testen als

Wählen Sie, wie Sie Fin testen möchten, indem Sie users oder Zielgruppen simulieren. Sie können Fin testen als:

  • User oder Lead – Testen Sie Fin als user oder lead mit verfügbaren Inhalten, Anleitungen und Automatisierungen (Aufgaben, Datenconnectoren und benutzerdefinierte Antworten). Wählen Sie einen user aus, um zu sehen, wie Fin Antworten basierend auf user attributes wie Sprache, Standort, Plan und mehr anpasst. Perfekt, um Setups vor dem Launch zu validieren oder nach der Bereitstellung Fehler zu beheben. Sie können aus einer Dropdown-Liste von Kontakten in Ihrem Workspace auswählen und simulieren, wie dieser spezifische user agiert. Dies ist besonders nützlich, wenn Sie bereits Test-users in Ihrem Workspace eingerichtet haben. Sie können jedoch auch echte users/leads in Ihrem Workspace suchen und auswählen.

  • Audience – Testen Sie Fin als audience(s) mit audience-spezifischen Inhalten und Anleitungen. Automatisierungen werden nicht ausgeführt.

  • Preview User – Testen Sie Fin mit allen Live-Inhalten, Anleitungen und Automatisierungen.

Marke

Wenn Sie mehrere Marken in Ihrem Workspace eingerichtet haben, können Sie die Marke auswählen, die Sie testen möchten. Zum Beispiel könnten die Inhalte für diese Marke unterschiedlich sein, sodass die Fin-Antwort getestet werden kann, um sicherzustellen, dass diese Nuancen erkannt werden.

Klicken Sie auf Bestätigen, um den Test mit diesen Einstellungen erneut auszuführen.

3. Führen Sie den Test aus und prüfen Sie die Antworten

Sobald Sie einen Test ausführen, können Sie die von Fin generierte Antwort für jede Frage ansehen.

Verwenden Sie das "Antwort bewerten"-Panel, um zu sehen:

  • Persönlichkeit-Einstellungen (z. B. Tonfall)

  • Anleitung (falls konfiguriert)

  • Inhaltsquellen, aus denen Fin gezogen hat

  • Automatisierungen (z. B. Fin Tasks, Datenconnectoren oder benutzerdefinierte Antworten, die ausgelöst wurden)

Obwohl Sie Automatisierungen, die in einem Batch-Test ausgelöst wurden, nicht direkt bearbeiten können, führt das Panel Sie zur entsprechenden Konfigurationsseite, damit Sie diese überprüfen oder schnell anpassen können.

4. Fügen Sie eine neue Frage hinzu

Um eine neue Frage hinzuzufügen, gehen Sie im Hauptmenü zu Fin AI Agent > Test. Klicken Sie dann auf die Schaltfläche + Frage hinzufügen. Ein Dropdown-Menü erscheint und bietet Ihnen verschiedene Optionen, wie Sie Ihre Fragen hinzufügen möchten.

  • Mehr aus allen Gesprächen generieren – Sie können bis zu 50 Fragen aus Ihren vergangenen Gesprächen erstellen.

  • Mehr nach Thema generieren – Wenn AI Topics in Ihrem Workspace verfügbar sind, können Fragen automatisch basierend auf Ihren Gesprächsthemen generiert werden.

  • Mehr aus einer CSV hochladen – Importieren Sie bis zu 50 Fragen auf einmal, indem Sie eine CSV-Datei hochladen.

  • Mehr manuell hinzufügen – Sie können entweder eine Liste von Fragen kopieren und einfügen oder sie einzeln hinzufügen.

5. Passen Sie Spracheinstellungen und Übersetzungen an

Um Ihnen zu helfen, genaue Antworten in der richtigen Sprache zu erhalten, macht es der Batch-Test einfach, Ihre Sprachunterstützung und Echtzeitübersetzung-Einstellungen während des Tests zu überprüfen und zu aktualisieren.

Wenn Sie eine Antwort in einer anderen Sprache als erwartet sehen – zum Beispiel, wenn eine Frage auf Russisch eine Antwort auf Englisch erhält – werden klare gelbe Meldungen angezeigt, die erklären, warum dies passieren könnte und wie Sie das Problem beheben können.

Sobald Sie die entsprechenden Einstellungen aktiviert und die Antwort aktualisiert haben, erscheinen Fin’s Antworten in der richtigen Sprache.

Je nach Ihrer aktuellen Konfiguration müssen Sie möglicherweise nur eine oder beide Einstellungen aktivieren. Keine Sorge – Sie können sie gleichzeitig einschalten und später zu diesem Bildschirm zurückkehren.

6. Bewerten Sie Fin’s Antworten

Überprüfen Sie Fin’s Antworten und beurteilen Sie, ob sie den Erwartungen entsprechen, indem Sie die sachliche Richtigkeit, den angemessenen Ton und ob die richtigen Daten abgerufen oder die richtigen Verfahren ausgelöst wurden, prüfen.

Wenn Sie Akzeptabel auswählen, können Sie eine interne Notiz hinzufügen, auf die Sie später bei der Verbesserung von Fin’s Antworten zurückgreifen können. Diese Notizen werden im herunterladbaren CSV-Bericht für den Test enthalten sein.

Wenn Sie Schlecht auswählen, wählen Sie einen Grund für Ihre Bewertung aus der Liste. Hier müssen Sie eine Ursachenanalyse durchführen, um korrekt zu bestimmen, warum Fin’s Antwort nicht den Erwartungen entsprach, damit Sie sofort Verbesserungen vornehmen können.

Die möglichen Auswahlmöglichkeiten sind wie folgt:

  • Hat nicht die richtigen Inhalte verwendet

  • Hat die Frage des Kunden nicht klargestellt

  • Hat die Inhalte falsch verwendet

  • Der Ton war nicht passend

  • Die Antwortlänge ist zu lang oder zu kurz

  • Hat nicht in der richtigen Sprache gesprochen

  • Andere

Hinweis: Diese Bewertungen trainieren Fin nicht direkt. Sie müssen eine Korrektur über Diese Antwort verbessern anwenden oder Inhalte/Anleitungen aktualisieren und dann den Test erneut ausführen.

Lesen Sie unten Hinweise, die Ihnen helfen, eine Ursachenanalyse für eine Schlecht-bewertete Antwort durchzuführen.

Hat nicht die richtigen Inhalte verwendet

Verwenden Sie dies, wenn die Antwort sachlich falsch ist, weil Fin sich auf eine irrelevante, veraltete oder unvollständige Quelle stützte.

Hinweise:

  • Zitate verweisen auf die falsche Seite

  • Antwort bezieht sich auf eine alte Richtlinie oder ein anderes Produkt/Plan

  • Wichtige Fakten fehlen oder sind falsch

Hat die Frage des Kunden nicht klargestellt

Verwenden Sie dies, wenn die Frage mehrdeutig ist oder wichtige Details fehlen und Fin voreilig geantwortet hat, anstatt nach Kontext zu fragen.

Indikatoren:

  • Mehrfachabsichtige Anfragen („refund + upgrade“)

  • Vage Begriffe („issue with login“)

  • Abhängigkeit von kundenspezifischen Angaben (Plan, Region, Plattform), die nicht erfasst wurden.

Inhalt falsch verwendet

Verwenden Sie dies, wenn der zugrunde liegende Inhalt korrekt ist, Fin ihn aber falsch interpretiert, kombiniert oder geordnet hat.

Indikatoren:

  • Schritte außerhalb der Reihenfolge

  • Regeln auf die falsche Zielgruppe/Plan angewendet

  • Zwei Verfahren vermischt

  • Eine Voraussetzung ausgelassen, die in der Quelle vorhanden ist

Tonfall war nicht passend

Verwenden Sie dies, wenn die Antwort nicht zu Ihrer Markenstimme oder der Sensibilität der Situation passt.

Indikatoren:

  • Zu locker/fröhlich bei sensiblen Themen (Abrechnung, Sicherheit)

  • Zu formell für einfache FAQs

  • Fehlende Empathie oder Beruhigung

  • Sonst passt es nicht zu Ihrer Markenstimme

Antwortlänge ist zu lang oder zu kurz

Verwenden Sie dies, wenn die Wortfülle nicht zur Absicht oder zum Kanal passt.

Indikatoren:

  • Textwände bei schnellen FAQs

  • Zu kurze mehrstufige Antworten bei wichtigen Compliance-Themen

  • Wichtige Details vergraben oder ausgelassen

Hat nicht in der richtigen Sprache gesprochen

Verwenden Sie dies, wenn die Antwortsprache nicht zum Kunden oder zur Region passt.

Indikatoren:

  • Antwort erscheint auf Englisch, obwohl die Testzielgruppe nicht-englisch ist (oder umgekehrt)

  • Gemischte Sprachantworten im gleichen Thread

Sonstiges

Verwenden Sie dies, wenn das Problem nicht in die oben genannten Kategorien passt (klare Notiz hinterlassen).

Beispiele:

  • Automatisierung wurde wie erwartet ausgelöst (oder nicht)

  • Marken-/Zielgruppenfehlanpassung

  • Fehlender Datenconnector

  • UI-Element (Screenshot) aus dem Inhalt für illustrative Zwecke benötigt

7. Verfeinern Sie Fin’s Antworten

Sobald Sie den Grund ausgewählt haben, der am besten zu Ihrer Bewertung passt, klicken Sie auf Diese Antwort verbessern, um dynamische Empfehlungen zu sehen, die auf die von Ihnen ausgewählte Ursache für diese spezifische Antwort zugeschnitten sind.

Häufige Empfehlungen umfassen:

Hinzufügen oder Überarbeiten von Anleitungen zu:

  • Tonfall und Antwortlänge gestalten

  • Sicherstellen, dass Fin klärende Fragen bei mehrdeutigen Anfragen stellt

  • Klare Eskalationsregeln für Risikobereiche festlegen

  • Bevorzugte Quellinhalte für bestimmte Absichten oder Marken definieren

  • Sicherstellen, dass Compliance- und Richtlinienanforderungen korrekt angewendet werden

Hinzufügen eines Snippets für:

  • Schnelle, präzise und private Wissensaktualisierungen

  • Sofortige Übergangslösungen für veraltete oder falsche Inhalte

  • Nur intern bestimmte Details, die nicht öffentlich geteilt werden sollten

  • Saisonale oder zeitlich begrenzte Informationen (z. B. Aktionen)

  • Enge Randfälle, die spezifische Formulierungen oder Parameter erfordern

Erstellung oder Aktualisierung bestehender Artikel für:

  • Wichtige FAQs, die von Kunden häufig benötigt werden

  • Komplexe Verfahren, die von Überschriften, nummerierten Schritten, Tabellen oder Bildern profitieren

  • Inhalte, auf die zur Transparenz und zum Selbstbedienungswert für Kunden verwiesen werden sollte

  • Themen mit wiederholten Korrekturen in Snippets, die stattdessen in einem Artikel zusammengefasst werden sollten

  • Fin den Zugriff auf bestimmte Artikel ermöglichen

Aktualisierung der unterstützten Sprachen auf:

  • Unterstützung in weiteren Sprachen bieten

  • Eingehende Sprache effektiv erkennen

  • Echtzeitübersetzung von Hilfsinhalten in Ihrer Standardsprache ermöglichen

Hinweis: Wenn Sie Andere als Grund für eine Schlecht-bewertete Antwort auswählen, erhalten Sie möglicherweise keine empfohlene Lösung. In einigen Fällen kann die passende Lösung die Aktualisierung von Datenverbindungen oder die Erstellung eines Verfahrens umfassen, das Fin ermöglicht, im Namen eines Kunden zu handeln.

Beispiel

Dieses Beispiel zeigt eine hypothetische Ursachenanalyse und Lösung für eine Schlecht-bewertete Frage.

Frage: „Wie füge ich einen neuen user hinzu, ohne zu bezahlen?“

Was passiert ist: Fin antwortete mit allgemeinen Schritten zur Einladung eines users, übersah jedoch die planbasierte Abrechnungsnuance.

Ursachenanalyse: Die Antwortdetails zeigen, dass Fin sich auf den Artikel „Invite user“ stützte, der keine plan-/abrechnungsspezifischen Details für kostenlose vs. bezahlte Plätze abdeckt (Wissenslücke).

Grund auswählen: „Wurde nicht der richtige Inhalt verwendet.“

Vorschläge: Aktualisieren Sie den Artikel „Invite user“, um relevante Informationen einzuschließen; Fügen Sie Anleitungen hinzu, damit Fin klärende Fragen stellt, um den relevanten Plantyp vor der Antwort zu identifizieren.

8. Einen Test filtern und Massenaktualisierungen vornehmen

Einen Test nach Antwortstatus: filtern

  • Beliebig – alle Fragen, die der Testgruppe hinzugefügt wurden.

  • Beantwortete Fragen – nur Fragen, bei denen Fin eine direkte Antwort, eine Klärung oder eine Automatisierung (z. B. Workflow-Übergabe, Fin Task usw.) bereitgestellt hat

  • Unbeantwortete Fragen – nur Fragen, bei denen Fin keine Antwort geben oder eine Folgeaktion auslösen konnte.

Einen Test nach Antwortbewertung: filtern

  • Beliebig

  • Gut

  • Akzeptabel

  • Schlecht

Massenaktualisierungen mit den Kontrollkästchen links neben der Frage vornehmen. So können Sie Q+A-Paare massenhaft aktualisieren, bestimmte Fragen herunterladen, diese löschen, eine Testgruppe erstellen oder die mit der Frage verknüpfte Antwort aktualisieren.

9. Testgruppen speichern und organisieren

Sie können test groups verwenden, um bis zu 50 Fragen und Antworten im Testbereich zu organisieren und zu speichern. Dies ist die maximale Anzahl, die Sie auf einmal hochladen können, was es zu einer praktischen Möglichkeit macht, verwandte Fragen für eine einfachere Überprüfung und Wiederverwendung zu gruppieren. Jede Testgruppe behält die während des Tests verwendeten Einstellungen bei – wie die Simulation eines bestimmten users – sodass Sie Tests jederzeit mit derselben Konfiguration erneut ausführen können.

Klicken Sie oben auf der Seite auf Verwalten, um die Option + Neue Gruppe erstellen auszuwählen.

Von dort aus haben Sie mehrere flexible Optionen, um Ihre neue Testgruppe mit Fragen zu füllen:

  • Aus inbox generieren: Ziehen Sie Fragen direkt aus Ihren bestehenden Gesprächen, entweder aus allen Gesprächen oder nach bestimmten Themen.

  • Manuell hinzufügen: Geben Sie Fragen einzeln ein.

  • CSV-Datei hochladen: Importieren Sie mehrere Fragen schnell mit einer CSV-Datei.

Klicken Sie auf Verwalten, um eine Gruppe umzubenennen oder eine Testgruppe zu löschen.

Klicken Sie auf den Namen Ihrer Testgruppe, um weitere Gruppen zu erstellen, oder wählen Sie eine zuvor gespeicherte Gruppe aus.

Testgruppen sind besonders nützlich, um Fragen nach Themen zu organisieren. Wenn Sie beispielsweise eine Reihe von Versicherungsanspruchsfragen getestet und überprüft haben, können Sie diese als Gruppe mit der Bezeichnung „Versicherungsanspruchsfragen“ speichern. So können Sie diese Inhalte später einfach erneut aufrufen, erneut ausführen oder bewerten.

Sie sind auch ideal für die Verwaltung der Teamzusammenarbeit. Da Batch test eine arbeitsbereichsweite Funktion ist, ermöglicht die Verwendung von Testgruppen den Teammitgliedern, ihre Testläufe getrennt zu halten. Anstatt frühere Tests zu löschen, um Platz zu schaffen, können Sie sie in Gruppen speichern, um die Arbeit aller zu erhalten.

10. Einen CSV-Bericht herunterladen

Eine CSV-Datei kann erstellt werden, die alle Fragen, Antworten, vom user vergebenen Bewertungen und die für jede Antwort verwendeten Quellen zusammenfasst. Klicken Sie einfach oben auf der Seite auf Verwalten und wählen Sie dann CSV-Bericht erhalten.

Dies ist ideal, um Ergebnisse mit Ihrem größeren Team zur Zusammenarbeit zu teilen oder Führungskräften zur Überprüfung sichtbar zu machen.


FAQs

Was ist im Batch test nicht testbar?

Fin Vision (Bilderkennung) wird im Batch test-Bereich noch nicht unterstützt.

Werde ich für Auflösungen bei der Verwendung des Batch-Tests belastet?

Nein, die Fin AI Agent > Test-Seite ist kostenlos und Sie werden nicht für KI-Antworten berechnet, die durch den Batch-Test generiert werden. 👌

Kann ich Testfragen automatisch generieren?

Ja, Sie können Testfragen automatisch generieren. Damit die Option „Generate from inbox“ erscheint, müssen Sie mindestens 1 Konversation in den letzten 90 Tagen in Ihrem Workspace haben.

Trainieren Antwortbewertungen Fin?

Nein. Batch test dient ausschließlich der Qualitätssicherung – Bewertungen helfen Ihnen, Verbesserungsbereiche zu erkennen, nicht Fin neu zu trainieren.

Kann ich verschiedene Sprachen testen?

Ja. Batch test überprüft und markiert fehlende Sprach- oder Übersetzungseinstellungen, damit Sie diese leicht beheben können.

Kann ich verschiedene users simulieren?

Ja. Batch test ermöglicht es Ihnen, einen user/lead in Ihrem Workspace auszuwählen und zu sehen, wie Fin basierend auf deren spezifischen Benutzerattributen reagieren würde.

Was ist der Unterschied zwischen dem Zurücksetzen eines Tests und dem erneuten Ausführen eines Tests?

Das Zurücksetzen des Tests ermöglicht es Ihnen, eine andere Charge auszuwählen, entweder aus dem Gesprächsverlauf oder einem Upload. Das erneute Ausführen des Tests generiert Antworten basierend auf Änderungen im Inhalt oder den von Ihnen angegebenen Antwortbewertungen neu, sodass Sie die Leistung weiter verfeinern können.

Warum ist die Option „Generate from inbox“ deaktiviert?

Die Option „Generate from inbox“ ist deaktiviert, wenn nicht genügend Konversationen oder Konversationen mit relevanten Themen in Ihrem inbox vorhanden sind.

Beeinflusst Batch testing Kundendaten?

Nein. Batch testing ist nur eine Simulation und ändert keine Kundendaten.

Wenn Batch testing ausgeführt wird:

  • Data connectors verwenden ihre konfigurierten Test- oder Beispiel-Payloads. Die Ergebnisse sind deutlich als „answer uses sample response data“ gekennzeichnet, sodass keine Live-APIs aufgerufen werden.

  • Fin Tasks, Procedures, and Workflows werden nicht ausgeführt. Batch testing zeigt nur, was in einem echten Gespräch wäre ausgelöst worden, sodass keine Tags, Aktualisierungen, Eskalationen oder Schreibvorgänge tatsächlich stattfinden.

Dies ermöglicht es Ihnen, Antworten und Verhalten sicher zu validieren, ohne Intercom-Daten oder externe Systeme zu beeinflussen.

Sollte ich Batch test oder Evals verwenden?

Evals machen alles, was Batch test kann, und mehr. Batch test prüft einzelne Fragen, die Sie manuell bewerten. Evals führen vollständige Mehrfachgespräche gegen die gesamte Fin-Konfiguration durch, bewerten jede automatisch anhand von von Ihnen definierten Prüfungen und können nach jeder Änderung an Fin als Regressionstest erneut ausgeführt werden. Wenn Sie heute Batch test verwenden, importieren Sie Ihre Fragen in ein Eval mit CSV-Import oder bitten Sie Operator, das Eval für Sie zu erstellen. Siehe Evals for Fin.

Hat dies deine Frage beantwortet?