Trainingseffektivitäts-Agent

Laut IW-Weiterbildungserhebung 2023 investierten deutsche Unternehmen durchschnittlich 1.347 Euro pro Mitarbeiter und Jahr in Weiterbildung (46 Milliarden Euro gesamtwirtschaftlich). Gleichzeitig erreichen nur 10 bis 20 Prozent des Gelernten tatsächlich den Arbeitsplatz. Zwischen diesen beiden Zahlen liegt kein Qualitätsproblem. Es liegt ein Messproblem. Wer nicht weiß, was nach der Schulung passiert, kann nicht steuern, ob die Investition wirkt.

Die Evaluierungslücke ist gut dokumentiert: 95 Prozent aller L&D-Organisationen können ihre Lerndaten nicht mit Geschäftsergebnissen verknüpfen. ROI-Messungen finden bei nur 5 bis 8 Prozent aller Schulungsprogramme statt. Dazwischen liegen die Ebenen, auf die es ankommt - Wissenstransfer, Verhaltensänderung, Geschäftswirkung - und genau dort misst fast niemand.

Warum Zufriedenheit nichts über Wirksamkeit sagt

Nach jeder Schulung füllen Teilnehmende einen Feedback-Bogen aus. War der Referent gut? War das Catering in Ordnung? Würden Sie die Schulung weiterempfehlen? Diese sogenannten Smiley-Sheets sind nahezu universell verbreitet und nahezu universell wertlos für die Frage, die L&D eigentlich beantworten muss: Hat diese Schulung das Verhalten am Arbeitsplatz verändert?

Das Kirkpatrick-Modell beschreibt seit 1959 vier Evaluierungsebenen: Zufriedenheit, Wissen, Verhalten, Geschäftsergebnis. Die Ebenen sind keine Theorie. Sie sind der Industriestandard. Und trotzdem bleiben drei der vier Ebenen in den meisten Organisationen unbesetzt.

Ebene         Was gemessen wird              Wer es typischerweise misst
────────────  ─────────────────────────────  ────────────────────────────
Zufriedenheit Feedback-Bögen nach Schulung   Fast alle Organisationen
Wissen        Tests, Praxisaufgaben          Wenige, meist bei Compliance
Verhalten     Verhaltensänderung am Platz    Kaum jemand systematisch
Ergebnis      Korrelation mit Business-KPIs  5-8 Prozent aller Programme

Der Grund ist nicht Desinteresse. Der Grund ist strukturell. Jede Ebene erfordert eine andere Methode, einen anderen Zeitpunkt und einen anderen Verantwortlichen. Zufriedenheit lässt sich am Tag der Schulung erheben. Wissenstransfer braucht einen definierten Abstand - zwei bis vier Wochen - und ein Testformat. Verhaltensänderung zeigt sich erst nach 60 bis 90 Tagen und braucht die Beobachtung der Führungskraft. Geschäftswirkung erfordert die Verknüpfung von Schulungsdaten mit Performance-Kennzahlen, die in einem völlig anderen System liegen.

Kein L&D-Team mit drei Personalentwicklern für 1.500 Mitarbeitende kann das manuell leisten. Also bleibt es beim Smiley-Sheet.

Das Transferproblem ist ein Timing-Problem

Hermann Ebbinghaus hat in den 1880er Jahren dokumentiert, was jede Personalentwicklung instinktiv weiß: Innerhalb von 24 Stunden vergessen Menschen durchschnittlich 70 Prozent neuer Informationen. Nach einer Woche sind es 90 Prozent. Die Vergessenskurve ist keine Schwäche einzelner Teilnehmender. Sie ist eine neurologische Konstante.

Die Konsequenz für Schulungswirksamkeit ist radikal. Wenn die erste Wissensüberprüfung drei Monate nach der Schulung stattfindet - weil vorher niemand daran denkt oder die Kapazität fehlt - misst sie nicht Wissenstransfer. Sie misst die Vergessenskurve. Und wenn die Verhaltensbeobachtung nie stattfindet, weil die Führungskraft kein strukturiertes Feedback-Format hat, bleibt die entscheidende Frage offen: Hat der Mitarbeitende das Gelernte in den Arbeitsalltag übernommen oder nicht?

Das Transferproblem ist kein pädagogisches Problem. Es ist ein Architekturproblem. Wer nach welcher Methode zu welchem Zeitpunkt misst - diese Zuständigkeiten sind in den meisten Organisationen nicht definiert. Deshalb passiert es nicht.

Gestaffelte Messung als Architektur

Der Decision Layer löst das nicht durch ein besseres Tool, sondern durch eine andere Entscheidungsarchitektur. Jede Evaluierungsebene wird als eigenständiger Prozessschritt behandelt - mit definiertem Zeitpunkt, definierter Methode und definiertem Verantwortlichen.

Tag 0              Woche 2-4          Monat 2-3          Quartal+
Schulung endet     Wissenscheck       Verhaltens-FB      Korrelation
                                                         mit KPIs
┌──────────┐     ┌──────────┐      ┌──────────┐      ┌──────────┐
│ Feedback │     │ Test oder│      │ Führungs-│      │ Teilnahme│
│ automa-  │────▶│ Praxis-  │─────▶│ kraft    │─────▶│ vs. Per- │
│ tisiert  │     │ aufgabe  │      │ bewertet │      │ formance │
│ erfassen │     │ auswerten│      │ Verhalten│      │ abgleich │
└──────────┘     └──────────┘      └──────────┘      └──────────┘
     A                A                  H                 A

A = Agent/Automatisierung     H = Mensch entscheidet

Die Zufriedenheitserfassung am Tag der Schulung läuft vollautomatisch. Der Agent aggregiert Feedback-Bögen, identifiziert Ausreißer und erzeugt einen Bericht. Kein Mensch muss Freitext-Antworten lesen, um zu erkennen, dass ein Referent systematisch schlecht bewertet wird.

Der Wissenscheck nach zwei bis vier Wochen folgt einem Regelwerk: Schulungstyp bestimmt Prüfformat. Ein Compliance-Training hat einen Multiple-Choice-Test. Eine Führungskräfteentwicklung hat eine Reflexionsaufgabe. Ein technisches Training hat eine Praxisübung. Der Agent triggert den richtigen Check zum richtigen Zeitpunkt und wertet die Ergebnisse aus.

Die Verhaltensbeobachtung nach 60 bis 90 Tagen bleibt beim Menschen. Hier kommt die Führungskraft ins Spiel - nicht mit einem aufwendigen Assessment, sondern mit drei bis fünf gezielten Fragen: Wendet der Mitarbeitende die neuen Methoden an? In welchen Situationen? Was hat sich verändert? Der Agent stellt die Fragen zur richtigen Zeit, sammelt die Antworten ein und ordnet sie dem Schulungsprogramm zu.

Die ROI-Berechnung auf Programmebene ist Korrelationsanalyse, keine Kausalitätsbehauptung. Der Agent verknüpft Schulungsteilnahme mit Performance-Kennzahlen - Fehlerquoten, Kundenzufriedenheit, Produktivitätsentwicklung - und zeigt Zusammenhänge. Ob ein Zusammenhang kausal ist, interpretiert ein Mensch mit Kontextwissen. Denn wenn die Fehlerquote im Lager nach einem Sicherheitstraining sinkt, kann das am Training liegen - oder daran, dass gleichzeitig ein neues Regalsystem eingeführt wurde.

Was das für Budget-Gespräche verändert

Wenn eine L&D-Leitung vor der Geschäftsführung steht und das Budget für nächstes Jahr verteidigen muss, entscheidet die Datengrundlage über die Verhandlungsposition. Mit Smiley-Sheets sieht das Gespräch so aus: Die Teilnehmenden waren zufrieden. Wir glauben, dass die Schulungen sinnvoll waren. Bitte kürzen Sie uns nicht.

Mit gestaffelter Evaluierung sieht es anders aus: Das Führungskräfte-Programm zeigt nach 90 Tagen messbare Verhaltensänderung bei 72 Prozent der Teilnehmenden. Die Korrelation zwischen Teilnahme und Kundenzufriedenheit im Vertrieb liegt bei 0,4. Das Compliance-Training hat eine Wissensretention von 85 Prozent nach vier Wochen. Die Grundlagenschulung SAP zeigt keinen messbaren Effekt auf die Bearbeitungszeiten - hier brauchen wir ein anderes Format.

Das ist keine Budgetverteidigung mehr. Das ist eine Investitionsentscheidung auf Basis von Evidenz.

Der Unterschied liegt nicht in der Genauigkeit der Zahlen. Er liegt in der Fähigkeit, zwischen Schulungen zu unterscheiden, die wirken, und Schulungen, die beschäftigen. Organisationen, die diesen Reifegrad erreichen, verschieben ihr Budget nicht nach Gießkanne, sondern nach Wirksamkeit. Und sie können gegenüber dem Betriebsrat transparent machen, wie Evaluierungsdaten verwendet werden - aggregiert, auf Programmebene, ohne Rückschlüsse auf einzelne Teilnehmende.