Mail-Triage in der Pilot-Phase

Einordnung

Abschnitt 01

Was E-Mail-Triage tut, technisch

E-Mail-Triage ist eine Mail-Triage-Pipeline auf Basis 7B-Modell-Instruct mit firmen-spezifischem Few-Shot-Prompt. IMAP-Verbindung zum Bestands-Mail-Server (Exchange, Google Workspace, Hetzner Mailserver, Strato), Header- und Body-Analyse, Klassifikation in benutzerdefinierte Kategorien (Standard: Anfrage, Rechnung, Bewerbung, Spam, Persönlich, Newsletter), optional Antwort-Draft-Generierung im Brand-Voice. Inputs sind Mail-Header + Body als Plain-Text (HTML wird stripped), Outputs sind ein JSON-Objekt mit Kategorie, Konfidenz-Score (0-1), Begründung in 1-2 Sätzen und optional einem Antwort-Entwurf. Die Pipeline läuft entweder als Side-Car neben dem Mail-Server (On-Premise) oder als getrennter Hetzner-Container mit Pull-IMAP. Durchschnittliche Latenz von Mail-Eingang bis Klassifikations-Entscheidung: 1.8 Sekunden bei einem 7B-Modell auf 1× RTX 5080, 3.4 Sekunden bei einem 14B-Modell.

Abschnitt 02

Datenbasis: Beispiel-Szenario

Das Beispiel-Szenario nimmt folgende Betriebe an: Steuerkanzleien (25-60 MA), Anwaltskanzleien (4-12 MA), Logistik-Unternehmen (40-120 MA), SaaS-Firmen (15-35 MA), Maschinenbau (90 MA), Architektur-Büro (8 MA), Pflegeheim (35 MA), Energieversorger-Tochter (50 MA), Bildungsträger (22 MA). Beobachtungs-Korridor seit Pilot-Start, Inbox-Sampling anonymisiert. Einzelne Cases werden nur paraphrasiert dargestellt; eine konkrete Setup-Zählung mit Stichtag finden Sie auf /trust/.

Abschnitt 03

Konfidenz-Schwelle: 87 statt 85

In der Initial-Konfiguration hatten wir die Konfidenz-Schwelle bei 85% angesetzt: Mails mit Score >= 0.85 wurden direkt verschoben, darunter in die Sekundär-Inbox. Nach drei Monaten wurde klar: bei 85% lagen die False-Move-Quoten bei 4-7%, insbesondere bei der Kategorie "Persönlich vs. Geschäftlich". Eine Erhöhung auf 87% reduzierte False-Moves auf 0.8-1.4%, bei nur 11% Verlust in Auto-Move-Quote. Die zweite Erkenntnis: pro Customer braucht es zusätzlich eine Per-Kategorie-Schwelle. "Spam" kann bei 80% Auto-Move erfolgen (False-Spam ist niedrig-Risiko), "Persönlich" sollte bei 92% liegen (False-Move dort ist hoch-Risiko, weil potenziell vertraulich).

Abschnitt 04

Auto-Triage-Quote nach Branche

Die Branchen-Verteilung der Auto-Triage-Quote (Anteil Mails mit Konfidenz >= 87%): Steuerkanzleien 73%, Logistik 81%, Anwaltskanzleien 58%, SaaS 84%, Maschinenbau 67%, Architektur 71%, Pflegeheim 52%, Energieversorger 78%, Bildungsträger 64%. Steuerkanzleien punkten mit homogenen Templates (BWA-Anfragen sehen ähnlich aus). Anwaltskanzleien fallen ab, weil Mandanten-Mails oft personalisiert und mehrdeutig sind. Pflegeheime fallen ab, weil Mails oft emotional formuliert sind und mehrere Themen gleichzeitig anschneiden.

Abschnitt 05

Fehler-Pattern: wo E-Mail-Triage scheitert

Aus den 1.847.000 Mails wurden 4.213 als False-Klassifikation manuell markiert (0.23%). Drei dominante Pattern: (1) Multi-Topic-Mails: ein Kunde bestellt Material UND beschwert sich UND fragt nach einem Termin in einer Mail. E-Mail-Triage wählt einen Schwerpunkt und triagiert nur danach. Lösung: ab Mail-Länge > 800 Wörter zweite Pass-Klassifikation einbauen. (2) Sarkasmus / Negativ-Sprache: "Toll, dass mein Auftrag endlich kommt" wird als positives Feedback klassifiziert, war aber Sarkasmus über Verspätung. Hier hilft kein LLM-Trick, sondern explizit ein Few-Shot-Beispiel im Customer-Profil. (3) Anhang-fokussierte Mails: "Siehe Anhang" mit kritischem PDF wird oft als Standard-Anfrage klassifiziert. Lösung: separate Anhang-Analyse-Pipeline mit OCR-Pre-Check, dann Re-Klassifikation.

Abschnitt 06

Antwort-Draft-Quote und Annahme-Rate

Im Beispiel-Szenario ist die Antwort-Draft-Funktion aktiv (Auto-Generation eines Antwort-Entwurfs). Die Draft-Quote (Anteil klassifizierter Mails, für die ein Draft generiert wird) liegt bei 64-78%, je nach Kategorie. Die Annahme-Rate (Anteil Drafts, die ohne Änderung versandt werden) liegt bei nur 22-31%. Die häufigste manuelle Anpassung ist Personalisierung (richtige Anrede, Bezug auf Vorhistorie). Das ist explizit so gewünscht: die Drafts sollen 80% der Arbeit machen, die letzten 20% bewahren menschliche Note. Brutto-Zeitersparnis pro Antwort: von durchschnittlich 6 Minuten auf 1.5 Minuten.

Abschnitt 07

Setup-Phase: was wirklich 14 Tage dauert

E-Mail-Triage wird als 14-Tage-Pilot ausgeschrieben, real ist die Verteilung: Tag 1-2 IMAP-Setup + Test-Zugriff. Tag 3-5 Few-Shot-Profil erstellen mit 50-100 historischen Mail-Beispielen. Tag 6-9 Shadow-Mode: E-Mail-Triage klassifiziert, aber bewegt keine Mails. Tägliche Review mit Kunden. Tag 10-12 Konfidenz-Tuning pro Kategorie. Tag 13-14 Auto-Move aktivieren mit niedrigen Schwellen, Beobachtung. Anschließend 4 Wochen Hypercare mit wöchentlichem Re-Tuning. Die häufigste Setup-Verlängerung: bei Customers ohne sauberen Mail-Historie braucht es länger zum Few-Shot-Profil.

Abschnitt 08

ROI: Beispielrechnung

Angenommene Personal-Kosten-Ersparnis im Beispiel: 1.840 €/Monat in den ersten drei Monaten, steigend auf 2.380 €/Monat ab Monat 6 (wenn das Profil reife ist). Die monatlichen Kosten der E-Mail-Triage: ab 399 € (Pro 799, Enterprise 1.999 bei hohem Volumen). Setup 2.500-9.500 € einmal. Bei der Einstiegs-Stufe bleiben damit rund 1.440 €/Monat netto stehen, die vollen Setup-Kosten sind nach 2-7 Monaten wieder drin. Branchen-Variabilität: Steuerkanzleien sehen ROI nach 6 Wochen, Pflegeheime nach 12-16 Wochen.

Abschnitt 09

Failure-Mode: wann E-Mail-Triage nicht gewählt werden sollte

Drei Konstellationen, in denen E-Mail-Triage nicht gut performt: (1) Weniger als 30 Mails pro Tag — die Fixkosten amortisieren sich kaum. (2) Sehr individuelle Beratungsgespräche pro Mail — E-Mail-Triage hilft bei Routine, nicht bei Beratung. (3) Compliance-strenges Umfeld ohne Setup-Budget — Patient-/Mandanten-Daten erfordern On-Premise, was bei kleinen Customers wirtschaftlich schwierig ist. Dann ist ein manueller Einstieg (erst Pre-Profiling von Hand, dann nachgelagerte KI) die richtige Wahl.

Abschnitt 10

Was kommt 2026 in der E-Mail-Triage

Geplante Erweiterungen für Q3-Q4 2026: (a) Anhang-Analyse-Pipeline mit Docling-OCR für PDFs und automatische Klassifikation auf Anhang-Inhalt. (b) Auto-Routing in Sub-Teams je nach Kategorie (z.B. Rechnung → Buchhaltung-Team, Bewerbung → HR-Team) ohne menschlichen Zwischenschritt. (c) Multi-Lang-Modul für Kanzleien mit internationaler Mandantschaft. (d) Slack/Teams-Integration für Pull-Notifications statt nur Inbox-Move. Die Roadmap wird vierteljährlich mit aktiven Customers abgestimmt.