Evaluation computergestützter Lehr- und Lernmaterialien Vom Kriterienkatalog zur maßgeschneiderten Qualitätssicherung
Evaluation mit Hilfe von Kriterienkatalogen Pragmatisch-empirische Auswahl Bewertung des Vorhandenseins bzw. Nicht- Vorhandenseins einzelner Software- Merkmale Vorteile der Checklisten
Kriterienkataloge seit Beginn der 80er Jahre 21 Merkmale auf einer 5-stufigen Ratingskala: Evaluators Guide for Microcomputer-Based Instructional Packages Entwickelt im Rahmen des MicroSIFT- Projekts (Microcomputer Software Information for Teachers)
MEDA 1990 und 1997 Méthodologie dEvaluation des Didacticiels pour Adultes 3 Interessenbereiche: Erstellung, Verwendung, Vertrieb 15 Interessenschwerpunkte: z.B. Erfassung der Eigenschaften 70 Aspekte, z.B. Anwendungsbedingungen 500 Fragen
Welche Eigenschaften sind valide (lernwirksam)? Gibt es stabile Zusammenhänge zwischen Merkmalen der Lehr-Lernumgebung und dem Lernergebnis? Wie hoch ist die prognostische Validität bestimmter Lernumgebungsmerkmale?
Maßgeschneiderte Qualitätssicherung der Nutzer als Lernexperte (Mandl 2000:96) eine damit einhergehende Gesamtplanung der Qualitätssicherung und eine flexible Methodenauswahl
Planungsphase Eval.felderEval.gegenständeEval.verfahren Didaktische Konzeption fremdspr. Curricula Fachcurricula Dokumenten- analyse Experten- befragung Rahmenbe- dingungen StudienorganisationNutzer- befragung Technik und Gestaltung ProgrammierungKriterien
Entwicklungsphase Eval.felderEval.gegenständeEval.verfahren Realisierung der didaktischen Konzeption Fremdspr. und fachbezogene Inhalte Experten- befragung Honorararbeiten Gestaltung und Handhabbarkeit LernsystemNutzer- befragung Kriterien Technische Funktions- fähigkeit LernsystemTest
Einsatzphase EvaluationsfeldEvaluationsverfahren AkzeptanzBefragung von Anwendern und Nutzern HandhabbarkeitSelbstprotokolle LernprozessanalyseNutzerprotokolle
Lernerfolg (Selbst)kontrolle (Rückmeldungen durch das Programm oder/und durch die Lehrkraft) Selbstevaluation in Gruppendiskussionen (anhand von Aufgaben) Situative Tests (Simulationen) Prüfung nach standardisierten Vorgaben Vergleich mit den Ergebnissen einer Kontrollgruppe
Transfer Prüfungsergebnisse aus vergleichbaren Themenbereichen bei frankophonen Dozenten Nutzerbefragung nach Auslandsstudium