Wie ein automatisierter Prozess leise schlechter wird, ohne dass es jemand merkt

Überwachen ist ein eigenes Handwerk, keine Haltung: Wer einen Prozess ausführt, bemerkt eine Abweichung nebenbei; wer ihn überwacht, bemerkt nur, was eine Kennzahl aufnimmt. Deshalb entscheidet die Auswahl der Kennzahlen darüber, welche Fehler eines Prozesses überhaupt sichtbar werden.

Fünf Kennzahlen tragen ein Dashboard, das das erste Quartal übersteht, weil sie ohnehin anfallen und je eine benannte Handlung auslösen. Die Beanstandungsquote steht an erster Stelle, weil an ihr die gesamte Prüfarchitektur hängt: Steigt sie über die vereinbarte Marke, ist die Aussage der Stichprobe hinfällig, und die Prüfung wird sofort verschärft. Anteil im automatisierten Pfad, Durchsatz, Bearbeitungs- und Prüfzeit sowie Kosten je Lauf ergänzen sie. Der teuerste Befund bleibt dabei unsichtbar, solange nur Durchsatz und Beanstandungsquote gemessen werden: Automatisierung rechnet sich, weil wenige Varianten den Großteil der Fälle abdecken – doch diese Verteilung verschiebt sich mit jeder neuen Richtlinie, fast immer weg von der Hauptvariante. Im Leitbeispiel des Buchs sinkt der Jahresnutzen um 22,5 Prozent, wenn der automatisierte Anteil von 80 auf 62 Prozent fällt, während Durchsatz und Beanstandungsquote unauffällig bleiben. Sichtbar wird das nur, wenn der Pfadanteil eine eigene Kennzahl im Dashboard ist.

Zwei Betriebsereignisse gehören trotzdem vor den Produktivgang entschieden, weil sie im Störungsfall nicht mehr entscheidbar sind. Der Modellwechsel ist funktional ein Werkzeugwechsel: Jede gemessene Fehlerrate gilt für eine Konfiguration aus Modell, Prompt und Kontext, und ein neueres Modell derselben Anbieterfamilie schneidet nicht automatisch besser ab. Der Ausfall des Dienstes stellt eine andere Frage: Wie lange darf der Prozess stehen, was geschieht mit wartenden Vorgängen, und wer arbeitet in dieser Zeit von Hand? Die erfreuliche Antwort auf die letzte Frage: Der Kontext-Ordner ist die beste Arbeitsanweisung, die dieser Prozess je hatte.

→ Mehr zum Buch und zum Kapitel „Betrieb: Überwachen statt Ausführen”