Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit

Präsentation zum Thema: "Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit"—  Präsentation transkript:

1 Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit
Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit (Workshop B) Juni 2006 Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit (Workshop B) Juni 2006 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest) © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)

2 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)
Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit (Workshop B) Juni 2006 Wirksamkeit messen Juni 2006 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest) © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)

3 Was haben die TN gelernt? Wie fanden die TN das Seminar?
Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit (Workshop B) Juni 2006 4-Ebenen-Modell von Kirkpatrick Informa- tions- wunsch Welche Ergebnisse wurden erzielt? Stufe 4 Wenden die TN das Gelernte an? Stufe 3 Stufe 2 Was haben die TN gelernt? Stufe 1 Wie fanden die TN das Seminar? Praxis Juni 2006 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest) © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)

4 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)
Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit (Workshop B) Juni 2006 Was wird gemessen? - Auswirkungskette Stufe Was wird gemessen? Reaktion Messen der TN-Reaktion und Zufriedenheit mit der Fortbildung und Erfassen der geplanten Aktionen Lernen Messen von Veränderungen bei Wissen, Kenntnissen, Kompetenzen, Fähigkeiten und Einstellungen Anwendung am Arbeitsplatz Messen der Veränderungen des Verhaltens am Arbeitsplatz und der Fortschritte bei den geplanten Aktionen Veränderungen in der Schule Messen der Veränderungen in den Leistungsparametern/Kennzahlen 1 2 3 4 Juni 2006 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest) © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)

5 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)
Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit (Workshop B) Juni 2006 Wie und wann wird gemessen? - Stufe Wie? Wann? Reaktion z.B. Fragebogen, Direkt nach Abschluss des Trainings Lernen Pre-/Post-Test Während / zum Abschluss des Trainings, zeitnah im Anschluss an das Trainings Anwendung am Arbeitsplatz z.B. 360° Feedback 3 – 6 Mon. nach dem Training Veränderungen in der Schule Kennzahlen Mon. nach dem Training 1 2 3 4 Juni 2006 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest) © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)

6 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)
Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit (Workshop B) Juni 2006 Evaluationsinstrumente Fragebögen Tests Interviews Beobachtungen Dokumenten-Analyse Vereinbarungen, Aktionspläne, Kennzahlen Stufe 1 Stufe 2 Stufe 3 Stufe 4 Juni 2006 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest) © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)

7 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)
Return on Investment ROI= $ $ = 195% Finanzieller Ertrag? immaterielle Werte? Netto-Programmnutzen ROI (%) = x 100 Programmkosten Arbeitsausfall? Planung? Nachbereitung? Raumkosten? Honorare? Materialkosten? Juni 2006 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)

8 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)
Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit (Workshop B) Juni 2006 Evaluationsziel je Stufe Prozent aller Trainings 1 Reaktion 90 – 100% 2 Lernen 40 – 50% 3 Anwendung ca. 30% 4 Veränderungen 10 – 20% 5 ROI 5 – 10% (Phillips/Schirmer 2005) Juni 2006 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest) © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)

9 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)
Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit (Workshop B) Juni 2006 Isolierung der Effekte Kontrollgruppen Trendlinien-Analyse Prognose-Methoden Bewertung/Einschätzung durch Teilnehmende Vorgesetzte Management Expert/innen Andere Faktoren Kund/innen (Phillips/Schirmer 2005) Juni 2006 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest) © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)

10 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)
Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit (Workshop B) Juni 2006 Evaluationsplanung Stufe Bedarfsanalyse Programmziele Evaluation 5 Pot. Ergebnisse ROI-Ziele ROI 4 Erfordernisse (Schule) Auswirkungsziele Auswirkungen (Schule) 3 Anforderungen Arbeitsplatz Anwendungsziele Anwendung 2 Kompetenzen Wissen Bedürfnisse Lernziele Lernen 1 Bevorzugte did. Strategien Reaktions-, Zufr.-ziele Juni 2006 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest) (Phillips/Schirmer 2005) © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)

11 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)
Ergebnisorientierung in der Lehrerfortbildung: Wirksamkeit (Workshop B) Juni 2006 Qualität durch Evaluation Juni 2006 © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest) © Gisela Knaut, Landesinstitut für Schule/Qualitätsagentur NRW (Soest)