Zum Inhalt springen

Ursache

Version v2.0 · 1. August 2026

Ordnet eine Nachricht einem zweistufigen deutschen Ursachen-Katalog zu: Hauptkategorie und Detailursache, seit Version 2 mit 9 Haupt- und 27 Detailkategorien. Beide Ebenen werden gemeinsam entschieden, eine unmögliche Kombination aus beiden kann deshalb nicht entstehen. Nachrichten ohne Anliegen, also reines Lob, haben seit Version 2 eine eigene Kategorie, damit Beschwerden nicht darin verschwinden.

Messungen

Der waagerechte Balken ist die Konfidenzspanne, der senkrechte Strich der Messwert. Die Skala läuft immer von 0 bis 100 Prozent und wird nie beschnitten: Eine breite Spanne bedeutet eine kleine Stichprobe, und genau so soll sie aussehen.

Modell-Ebene

Handannotierte beziehungsweise kuratierte Referenzfälle der Modellentwicklung: eingefrorene Testsplits, Produktions-Testfälle, gezielt zusammengestellte Kohorten. Wenige hundert Fälle je Modell, von Menschen geprüft.

  • Beschwerden fälschlich als „kein Anliegen“ eingeordnet

    6,3 %

    FehlerrateNiedriger ist besser. Null ist das perfekte Ergebnis, und die Obergrenze des Intervalls ist die Aussage.

    Referenzsatz:
    Eingefrorenes Gegenprüfset, Teilmenge echter Kundentexte
    Umfang:
    n = 160 · Stand 1. August 2026
    95-%-Konfidenzintervall:
    3,4 % bis 11,1 % (Wilson, 95 %, auf einer Teilmenge des Referenzsatzes, n = 160)

  • Beschwerden fälschlich als „kein Anliegen“ eingeordnet, Teilmenge gewöhnlicher Beschwerden

    3,5 %

    FehlerrateNiedriger ist besser. Null ist das perfekte Ergebnis, und die Obergrenze des Intervalls ist die Aussage.

    Referenzsatz:
    Eingefrorenes Gegenprüfset, Teilmenge gewöhnlicher Beschwerden
    Umfang:
    n = 143 · Stand 1. August 2026
    95-%-Konfidenzintervall:
    1,5 % bis 7,9 % (Wilson, 95 %, auf einer Teilmenge des Referenzsatzes, n = 143)

  • Lob korrekt als „kein Anliegen“ erkannt

    82,3 %

    Referenzsatz:
    Eingefrorenes Lob-Prüfset
    Umfang:
    n = 147 · Stand 1. August 2026
    95-%-Konfidenzintervall:
    75,3 % bis 87,6 % (Wilson, 95 %, auf dem vollen Referenzsatz, n = 147)

  • Detailursache unverändert gegenüber der Vorversion

    94,4 %

    Referenzsatz:
    Nicht-Regressions-Satz der Vorversion
    Umfang:
    n = 107 · Stand 1. August 2026
    95-%-Konfidenzintervall:
    88,3 % bis 97,4 % (Wilson, 95 %, auf dem vollen Referenzsatz, n = 107)

  • Produktions-Testfälle bestanden

    40 von 40

    Referenzsatz:
    Kuratierte Produktions-Testfälle
    Umfang:
    n = 40 · Stand 1. August 2026
    95-%-Konfidenzintervall:
    91,2 % bis 100,0 % (Wilson, 95 %, auf den gezählten Fällen, n = 40)

  • Unmögliche Kombinationen aus Haupt- und Detailkategorie

    0 von 502

    FehlerrateNiedriger ist besser. Null ist das perfekte Ergebnis, und die Obergrenze des Intervalls ist die Aussage.

    Referenzsatz:
    Alle Vorhersagen der Abnahmemessung, alle Prüfsets zusammen
    Umfang:
    n = 502 · Stand 1. August 2026
    95-%-Konfidenzintervall:
    0,0 % bis 0,8 % (Wilson, 95 %, auf den gezählten Fällen, n = 502)

  • Beschwerden fälschlich als „kein Anliegen“ eingeordnet, Teilmenge Lob mit Mangel

    29,4 %

    FehlerrateNiedriger ist besser. Null ist das perfekte Ergebnis, und die Obergrenze des Intervalls ist die Aussage.

    Referenzsatz:
    Gegenprüfset, Teilmenge von Texten mit Lob und Mangel zugleich
    Umfang:
    n = 17 · Stand 2. August 2026
    95-%-Konfidenzintervall:
    13,3 % bis 53,1 % (Wilson, 95 %, auf einer Teilmenge des Referenzsatzes, n = 17)

Kalibrierung

Je Katalogebene eine eigene Temperatur. Beide Ebenen sind einzeln kalibriert, und jede Ebene hat ihren eigenen Kalibrierungsfehler.

Kalibrierungsfehler Hauptkategorie (ECE)
0,0143
Kalibrierungsfehler Detailursache (ECE)
0,0348

Niedriger ist besser: der ECE misst, wie weit die ausgegebene Konfidenz von der tatsächlichen Trefferquote abweicht.

Für dieses Modell ist keine Kalibrierungs-Grenze beschlossen. Die beiden Kalibrierungsfehler werden berichtet, nicht gegen eine Schwelle geprüft — ein erfundener Grenzwert wäre schlechter als keiner.

Versionshistorie

Die Kernmetrik einer Version ist Versionskontext, keine eigenständig belegte Messung: Sie nennt weder Referenzsatz noch Umfang. Die belegten Messungen stehen oben.

  1. v1.1

    22. März 2026

  2. v2.0

    1. August 2026

    aktuell

Die Abfolge zeigt Reihenfolge und Stand, keine Werte. Die Kernmetrik wechselt zwischen den Versionen: mal eine Zählung, mal ein Anteil, beim Risiko-Modell sogar die Richtung. Eine gemeinsame Achse gibt es dafür nicht, die Werte stehen deshalb einzeln darunter.

  • v2.0

    1. August 2026

    Beschwerden fälschlich als „kein Anliegen“ eingeordnet: 6,3 %Fehlerrate

    Was sich geändert hat

    • Der Katalog ist um zwei Kategorien gewachsen: Nachrichten ohne Anliegen, also reines Lob, und Verbandspolitik.
    • Beschwerden, die fälschlich als reines Lob eingeordnet wurden, sanken von 13,8 auf 6,3 Prozent; bei gewöhnlichen Beschwerden von 9,1 auf 3,5 Prozent.
    • Haupt- und Detailkategorie werden gemeinsam entschieden statt getrennt und nachträglich abgeglichen. Unmögliche Kombinationen sind damit ausgeschlossen.
    • Der veröffentlichte Trainingsstand wurde nach einer vorab festgelegten Regel ausgewählt, auf einem eigenen Satz, der von allen Prüfsets getrennt ist.

  • v1.1

    22. März 2026

    Produktions-Testfälle

    Was sich geändert hat

    • Nachschärfung der Erstversion. Seither unverändert im Einsatz.