Teste deinen KI-Assistenten für den Kundenservice

Du kannst deinen KI-Assistenten so testen, wie es ein Kunde tun würde, bevor er echten Menschen antwortet: Maya, die KI-Business-Managerin in Entagl, schreibt Testfragen aus deinem Unternehmen und deinen echten Chats, lässt sie laufen und bewertet jede Antwort anhand von Regeln, die du lesen kannst. Eine falsche Antwort kostet mehr, als es scheint. In einer Gartner-Umfrage unter 3.566 Kunden, veröffentlicht im September 2026, gaben nur 27 % der Kunden an, dass sie den Chatbot eines Unternehmens nach einer negativen Erfahrung noch einmal ausprobieren würden, und Gartners Rat an Führungskräfte im Kundenservice lautete, "Zuverlässigkeit vor Reichweite" zu stellen.

Dieser Leitfaden erklärt, was ein Test ist, woher die Fragen kommen, wie Antworten bewertet werden, was ein Durchlauf kostet und was Maya tut, wenn ein Test fehlschlägt.

Was ist ein Test in Maya?

Ein Test ist ein kurzes Gespräch, das ein Kunde beginnen könnte, plus die Regeln, die eine gute Antwort einhalten muss. Er enthält eine bis sechs Kundennachrichten und beliebige dieser Prüfungen:

Regel	Beispiel
Muss erwähnen	"Nennt den Preis einer ersten Beratung"
Darf nicht sagen	"50 % Rabatt"
Soll fragen nach	"Dem Wunschtag des Kunden"
An eine Person übergeben	Ja, nein oder egal
Vorgabe	"Freundlich, höchstens drei Sätze"
Freigegebene Antwort (optional)	Eine Antwort, die du schon als richtig bestätigt hast

Jeder Test läuft auf einem Kanal ab, WhatsApp, sofern du keinen anderen wählst, damit die Antwort so bewertet wird, wie dieser Kunde sie sehen würde.

Tests erreichen nie einen Kunden. Aktionen, die deine KI ausführen würde, etwa eine Buchung, werden simuliert, und nichts wird gespeichert. Nur die Suche in deinen Wissensdateien läuft echt, damit der Test prüft, was dein Assistent tatsächlich finden würde.

Woher kommen die Testfragen?

Du kannst Tests selbst schreiben, musst es aber nicht. Bitte Maya darum, und sie schreibt sie aus einer von zwei Quellen:

Typische Fragen (Standard): was Kunden deiner Art von Unternehmen normalerweise fragen, auf Basis deiner eigenen Leistungen, Preise und FAQs.
Deine echten Gespräche: eine Auswahl deiner neuesten Chats aus den letzten 7, 30, 90, 180 oder 365 Tagen.

Sie kann auch Antworten, die dir nicht gefallen haben, und Kundenbewertungen mit drei Sternen oder weniger in Tests verwandeln. Widersprechen sich zwei Rückmeldungen, folgt sie der neuesten und markiert diesen Test, damit du ihn prüfst. E-Mail-Adressen, Telefonnummern, Links und Nutzernamen werden entfernt, bevor irgendetwas zum Test wird.

Du: Erstell 10 Tests aus meinen echten Gesprächen der letzten 30 Tage und lass sie laufen.

Sie schreibt bis zu 20 Tests auf einmal, und ein Workspace kann bis zu 100 behalten. Eigene Tests kannst du in Mayas Einstellungen unter Testfälle hinzufügen oder bearbeiten, oder du fragst einfach:

Du: Füg einen Test hinzu: Wenn jemand nach einem Rabatt fragt, sag nie "50 % Rabatt" und übergib an eine Person.

Wie wird jede Antwort bewertet?

Manche Regeln brauchen keine KI, um sie zu beurteilen, also nutzen sie auch keine:

Setz die genauen Wörter einer Regel "Darf nicht sagen" in Anführungszeichen. Tauchen sie in der Antwort auf, schlägt der Test fehl.
Ob der Assistent den Chat an eine Person übergeben hat, wird daran abgelesen, was er tatsächlich getan hat, nicht daran, was er geschrieben hat.

Den Rest bewertet ein KI-Prüfer. Damit eine Regel als erfüllt gilt, muss der Prüfer auf das verweisen, was die Antwort tatsächlich gesagt hat, und Maya kontrolliert, ob das Zitat wirklich dort steht. Ist sich der Prüfer nicht sicher, lautet das Ergebnis Unklar, nie bestanden. Das ist Absicht: Ein Test, der still besteht, obwohl er es nicht sollte, ist schlimmer als einer, der dich bittet, selbst hinzusehen.

Was kostet ein Testdurchlauf?

Kleine Durchläufe starten sofort. Für alles Größere gibt es zuerst einen Kostenvoranschlag:

Ein Durchlauf mit fünf Tests oder weniger startet sofort.
Ein Durchlauf mit mehr als fünf Tests kommt zuerst mit einem Kostenvoranschlag in Credits und startet erst, nachdem du Ja gesagt hast.
Auch für das Schreiben neuer Tests gibt es zuerst einen Kostenvoranschlag.

Jeder Durchlauf berechnet, was er wirklich verbraucht hat, und ein Durchlauf startet keine neuen Tests mehr, sobald er das Dreifache der Schätzung verbraucht hat. Während der Einrichtung sind deine ersten Durchläufe kostenlos (bis zu 40 Tests, einmal pro Workspace), und Maya entwirft dort 8 bis 12 Beispielfragen. Sie fasst sie im Chat zusammen und schickt sie als PDF, wenn du die Details möchtest (so funktioniert die Einrichtung).

Können Tests von selbst laufen?

Ja, auf zwei Arten.

Nach einer Änderung. Wenn Maya für dich eine FAQ, eine Leistung, einen Preis oder eine Unternehmensangabe ändert, führt sie die Tests erneut aus, die diese Änderung betrifft. Das ist standardmäßig aktiviert und läuft von selbst für bis zu fünf Tests und 10 Credits am Tag. Bei Änderungen an deinen Anweisungen oder am Ton und bei größeren Prüfungen fragt sie dich zuerst.

Nach Zeitplan. Wähl einen Rhythmus und eine Uhrzeit:

Du: Lass meine Tests jeden Montag um 9 laufen.

Du kannst täglich, jeden Werktag, wöchentlich oder monatlich (an Tag 1 bis 28) wählen. Maya nennt die Kosten pro Durchlauf und pro Monat, und der Zeitplan startet, nachdem du zugestimmt hast. Fügst du später Tests hinzu und würde ein Durchlauf mehr als das Anderthalbfache des Vereinbarten kosten, wird dieser Durchlauf mit einem Hinweis übersprungen, statt dir mehr zu berechnen. Auch wenn deine Credits aufgebraucht sind, wird ein Durchlauf mit einem Hinweis übersprungen.

Jeder Durchlauf endet mit einem Bericht in deinem Maya-Chat, samt PDF, und einer Benachrichtigung in der App und auf deinem Handy (und auf WhatsApp, wenn du es verbunden hast).

Was passiert, wenn ein Test fehlschlägt?

Tipp beim fehlgeschlagenen Ergebnis auf Von Maya beheben lassen. Maya öffnet einen Chat zu diesem Ergebnis und sucht nach der Ursache, mit genau der Version des Tests, die bewertet wurde:

Lag dein Assistent falsch, schlägt sie die Änderung vor: eine Anweisung, eine FAQ, einen Preis. Sie kommt als Freigabekarte zu dir, wie jede Änderung in Die Antworten deines KI-Assistenten ändern, einfach indem du fragst.
Sobald du freigibst, bietet sie an, genau diesen Test erneut laufen zu lassen.
War der Test selbst falsch (dein Unternehmen hat sich verändert, oder die Regel war zu streng), bietet sie an, stattdessen den Test zu ändern.

Ohne dein OK wird nichts geändert, außer du hast Maya auf den Modus Mach einfach gestellt ("Direkt" in der App). Für eine falsche Antwort, die ein echter Kunde schon bekommen hat, stehen die Schritte in Warum hat meine KI das gesagt?

Wo kannst du Tests ausführen?

Tests ausführen und verwalten kannst du im Maya-Chat im Web oder in der Entagl-App fürs Handy, unter Testfälle in Mayas Einstellungen oder indem du Maya auf WhatsApp schreibst.

Wo liegen die Grenzen?

Nur Nachrichten. Tests prüfen deinen Assistenten für Nachrichten (Receptionist). Tests für Sprachanrufe werden noch nicht unterstützt.
Nach der Einrichtung nicht kostenlos. Durchläufe verbrauchen Credits, ab mehr als fünf Tests mit vorherigem Kostenvoranschlag.
Der Prüfer kann unsicher sein. Manche Ergebnisse kommen als Unklar zurück. Öffne sie und entscheide selbst.
Kein Alarm bei Fehlschlag. Ein fehlgeschlagener geplanter Durchlauf erscheint in seinem Bericht, nicht als dringender Hinweis.
Ein Test ist eine Stichprobe, keine Garantie. Er prüft die Fragen, die du testest. Füg weiter Tests aus echten Gesprächen hinzu, während sich dein Unternehmen verändert. Den größeren Plan für die Einführung findest du in wie du einen KI-Agenten startest, ohne Kunden zu verlieren.

Fang mit zehn an. Schreib Maya auf WhatsApp und sag "Schreib 10 Tests aus meinen Chats der letzten 30 Tage".

FAQ

Schickt das Testen irgendetwas an meine Kunden?

Nein. Tests laufen in einer Sandbox. Nichts wird an irgendjemanden geschickt, und Aktionen wie Buchungen werden simuliert, nicht gespeichert.

Kann Maya einen fehlgeschlagenen Test selbst beheben?

Standardmäßig nicht. Sie findet die Ursache und schlägt eine Lösung vor, und die kommt als Freigabekarte zu dir, außer du hast sie auf den Modus Mach einfach umgestellt. Nachdem du freigegeben hast, kann sie den Test erneut laufen lassen.

Mit wie vielen Tests sollte ich anfangen?

Zehn bis zwanzig sind ein guter Anfang: Maya schreibt bis zu 20 auf einmal. Durchläufe mit fünf oder weniger Tests starten ohne Kostenvoranschlag, und eine Handvoll wichtiger Fragen nach täglichem Zeitplan kostet wenig. Maya nennt die Kosten des Zeitplans einmal, wenn du ihn einrichtest.

Kann ich meinen Sprachassistenten auf diese Weise testen?

Noch nicht. Testfälle decken deinen Assistenten für Nachrichten ab. Dein Sprachassistent hat während der Einrichtung einen eigenen Tester zum Ausprobieren, und unser Leitfaden zum Testen eines KI-Telefonagenten erklärt, wie du einen prüfst.

Weitere Maya-Leitfäden

Quellen: Gartner, "Gartner Survey Finds Only 27% of Customers Would Try a Chatbot Again After a Negative Experience", 2. September 2026. Produktdetails geprüft im November 2026.