2 Min. Lesezeit · Aktualisiert 2026-05-22
Voice AI für Servicedesks: Latenz, Sprachen, Kosten
Was den Unterschied zwischen 0,8 s und 2,4 s end-to-end Latenz ausmacht — und warum 1,4 s der Sweetspot für B2B-Voice ist.
von helpcode research team · Research @ helpcode
Warum Voice 2026
Für ein B2C-SaaS reicht Chat. Für einen Servicedesk, der mit Installateuren auf dem Gerüst, Technikern im Lieferwagen, Köchen in lauten Küchen spricht — ist Tippen unmöglich. Voice AI hat die Schwelle überschritten, an der Kunden sie als kompetent wahrnehmen (kein 2018er-IVR mehr), und das Latenz-Budget hat sich so verengt, dass das Gespräch sich natürlich anfühlt.
Aber der Unterschied zwischen 0,8 s und 2,4 s end-to-end ist der Unterschied zwischen natürlich und robotisch. Dieser Leitfaden ist, was wir gemessen haben.
Das Latenz-Budget
Gesamt-End-to-End-Latenz = ASR + Retrieval + LLM + TTS.
Gemessene Budgets bei helpcode (Median):
- ASR (Sprache → Text): 250 ms
- Retrieval (Hybrid + Reranker, Top-12): 350 ms
- LLM-Call: 600 ms (Anthropic Haiku 4.5; Sonnet bringt ~400 ms mehr)
- TTS (Text → Sprache, erstes Phonem): 200 ms
Total: ~1,4 s bis zum ersten hörbaren Wort.
Erhöht ihr eine dieser Komponenten, bricht das Gespräch. Die zwei größten Stellknöpfe:
- Alles streamen. ASR streamt das partielle Transkript; Retrieval startet auf dem Partial; LLM streamt die Antwort; TTS streamt den ersten Satz, während der zweite noch generiert wird.
- Das richtige Modell für den richtigen Turn. Triviale Intents → günstiges Modell (Haiku). Komplexe Multi-Step → teures Modell (Sonnet). Routing pro Turn.
Mehrsprachige Voice
Native mehrsprachige Voice ist schwerer als nativer mehrsprachiger Chat, weil ASR-Fehler sich verstärken. Zwei praktische Taktiken:
- Spracherkennung im ersten Turn, nicht pro Turn. Mitten im Gespräch zu wechseln ist selten und der Detection-Aufwand pro Turn ist verschwendete Latenz.
- Markenbegriffe bleiben über Sprachen hinweg erhalten. Sagt der Kunde in irgendeiner Sprache „Vaillant", soll dieses Token wortwörtlich durch das ASR kommen. Ein Custom-Vocabulary-Hint im ASR ist Pflicht.
helpcode liefert by default 8 Sprachen — EN, DE, IT, FR, ES, NL, PL, PT.
Kosten-Ökonomie
Voice ist teurer als Chat. Grobe Kosten pro Konversation (5–7 Turns, EU-Modell-Endpoints):
- ASR + TTS: ~€0,04
- LLM (cheap-by-default Routing): ~€0,06
- Telefonie (EU-Inbound-Nummer): ~€0,02
Pro Konversation: ~€0,12. Verglichen mit einem menschlichen Agenten (~€2–4 pro L1-Kontakt) ist die Lücke groß genug, dass Voice sich selbst bei 30 % Deflection rechnet.
Mensch-Handoff
Voice-Handoff ist das schwierigste UX-Problem in diesem Bereich. helpcodes Ansatz:
- KI kündigt den Handoff an: „Ich hole einen Kollegen an die Leitung — einen Moment."
- Das Konversations-Transkript + erfasste Felder (Modell, Seriennummer, Fehlercode) gehen vor dem Eingang des Anrufs in der Warteschlange zum Agenten-Bildschirm, sodass die ersten Worte des Agenten nicht „Hallo, können Sie mir sagen…" sind.
- Latenz vom „Mensch"-Trigger bis zum ersten menschlichen Wort: Median 12 s.
Pre-Launch-Checkliste
- End-to-End-Latenz Median < 1,7 s, p95 < 2,5 s
- Markenbegriffe im ASR-Custom-Vocabulary
- Spracherkennung im ersten Turn
- Smart-Modell-Routing live (cheap by default)
- Audit-Log erfasst: Prompt, Retrieval, Modell, Zitate
- Mensch-Handoff mit dem aufnehmenden Agenten-Team getestet
- KI-Offenlegung in der Eröffnungszeile gerendert
- DSGVO-Einwilligung für die Anrufaufzeichnung erfasst
Über die Autorin / den Autor
helpcode research team
Research @ helpcode