Was bringt dein Chatbot wirklich?

Zahlen helfen, wenn der Kontext stimmt

Die 2025 im Quarterly Journal of Economics veröffentlichte Studie „Generative AI at Work“ untersuchte 5.172 Support-Mitarbeitende. Mit KI-Unterstützung lösten sie im Durchschnitt 15 % mehr Anliegen pro Stunde. Die Bearbeitungszeit pro Chat sank um 8,5 %. Untersucht wurde Assistenz für Menschen, nicht ein selbstständiger Chatbot.

Ein Working Paper von Fang et al. (2025) berichtet aus einem randomisierten Handelsplattform-Experiment mit 44.614 Beobachtungen eine relativ um 21,7 % höhere Kauf-Conversion gegenüber nicht verfügbarem Support (+1,31 Prozentpunkte absolut). Gegenüber menschlichem Support war der Unterschied nicht statistisch signifikant. Auch das ist kein No-BS-Ergebnis und keine Prognose für andere Websites.

Eine schnelle Antwort ist noch keine Lösung

Miss getrennt, wie schnell jemand eine erste Antwort bekommt und wann sein Anliegen tatsächlich erledigt ist. Eine sofortige Begrüßung sieht in der ersten Kennzahl gut aus, hilft aber wenig, wenn danach drei Rückfragen und eine E-Mail nötig werden.

Lege vorab fest, was „gelöst“ bedeutet. Zum Beispiel: Die Nutzerin bestätigt die Lösung, eine Stichprobe bewertet die Antwort als korrekt und es kommt innerhalb deines gewählten Zeitfensters keine erneute Anfrage zum selben Problem. Ein geschlossenes Chatfenster allein reicht nicht: Die Person könnte auch aufgegeben haben.

Erfasse Übergaben an dein Team separat. Eine rechtzeitige, gut vorbereitete Übergabe ist kein Misserfolg. Sie kann Zeit sparen, obwohl ein Mensch den Fall abschließt. Schlechte Antworten, Abbrüche und sinnvolle Übergaben in einer einzigen Automatisierungsquote zu vermischen, verdeckt diese Unterschiede.

• Erste Antwort und tatsächliche Lösung getrennt messen
• Wiederholte Anfragen zum selben Anliegen berücksichtigen
• Korrektheit anhand einer Gesprächsstichprobe prüfen
• Bearbeitungszeit des Teams einschließlich Übergaben erfassen

Zeitpotenzial mit eigenen Annahmen berechnen

Im Zeitrechner auf der Startseite setzt du dein monatliches Anfragevolumen, die bisherige Bearbeitungszeit und einen angenommenen vollständig gelösten Anteil ein. Bei 500 Anfragen, acht Minuten und 30 % ergeben sich 20 Stunden im Monat. Die 30 % sind ein Rechenbeispiel, keine gemessene Erfolgsquote.

Das Ergebnis zeigt die bisherige Bearbeitungszeit dieser Fälle. Ziehe für die tatsächliche Entlastung die Zeit für Einrichtung, Wissenspflege, Qualitätsprüfung und Nachbearbeitung ab. Wenn dein Team jeden Chat zusätzlich komplett liest, ist diese Prüfung Teil des Aufwands.

Rechne mehrere Szenarien durch, bevor du eine wirtschaftliche Entscheidung triffst. Gerade bei wenigen Anfragen kann eine gut geschriebene Hilfeseite zunächst mehr bringen als ein zusätzlicher Kanal. Ein Chatbot wird interessant, wenn wiederkehrende Fragen genug Zeit binden und die Antworten zuverlässig dokumentiert sind.

Den eigenen Betrieb fair vergleichen

Wähle vor dem Start einen repräsentativen Zeitraum und notiere Anfragearten, Volumen und Bearbeitungszeit. Vergleiche später einen ähnlich langen Zeitraum mit ähnlichem Mix. Eine Produktveröffentlichung oder saisonale Spitze kann den Vergleich verzerren; halte solche Veränderungen fest.

Nutze die Support-Inbox für deine Gesprächsstichprobe und ergänze fehlende Kennzahlen in einer einfachen Tabelle. Dieser Ratgeber beschreibt eine Messmethode, kein bereits enthaltenes Analyse-Dashboard. Beginne mit wenigen verständlichen Werten und prüfe regelmäßig, ob dein Team wirklich weniger Arbeit hat und die Antworten stimmen.