Evaluationskonzept für die Vorlesung „Einführung in die Medienpädagogik“ Vorschlag zur Untersuchung der Qualität, wie auch des Ausbaupotentials der Vorlesung

Sehr geehrte Frau Reinmann, wie Sie bereits wissen, hat sich die Hochschulleitung der Universität Augsburg vor einigen Wochen an Evalugrade Unternehmensberatung gewandt, mit der Bitte für einige Vorlesungen und Seminare ein Evaluationskonzept zu entwerfen. Neben Ihnen haben sich noch fünf weitere Professoren für eine Evaluationskonzeptsvorstellung durch Evalugrade entschieden. Wir wollen uns noch einmal recht herzlich für ihre Mitarbeit bedanken und Ihnen im Folgenden unser Evaluationskonzept für die Vorlesung „Einführung in die Medienpädagogik“ vorstellen.

Konzeptgliederung Über uns Was ist Evaluation Warum Evaluation Gegenstände der Evaluation Vorlesungsüberblick Medienpädagogik Evaluationsmethoden Befragung Dokumentenanalyse Test Beobachtung

Wer evaluiert? Im Folgenden wollen wir uns kurz vorstellen: Wir sind die Unternehmensberatung Evalugrade und führen schon seit über 4 Jahren externe Evaluationen für Hochschulen, verschiedene Unternehmen und auch Weiterbildungsakademien durch. Die Evaluationen werden von uns selbst geplant, organisiert und auch durchgeführt. Unser Ziel ist es so Stärken und Schwächen eines Bildungskonzepts herauszufinden und die Möglichkeiten der Verbesserung und des Ausbaus anhand der evaluierten Daten aufzuzeigen.

Was ist Evaluation? Da es in der Wissenschaft und auch in der Wirtschaft keinen Konsens darüber gibt, was Evaluation genau heißt und was sie alles leisten kann, möchten wir zuerst einmal klären, was wir unter Evaluation verstehen.

Warum ist eine Evaluation sinnvoll? Eine Evaluation stellt immer eine geplante Qualitätskontrolle dar. In diesem Sinne handelt es sich also um die Qualität von Studium und Lehre. Besonderes Augenmerk bei der Evaluation der Vorlesung „Einführung in die Medienpädagogik“ liegt auf dem vorhandenen Medieneinsatz und dessen Nutzen. Folgende Fragen scheinen uns dafür besonders relevant: Wie hoch ist die Akzeptanz der Studierenden über den Medieneinsatz in der Lehre? Welche unmittelbaren aber auch langfristigen Erfolge werden erzielt? Welche Lernprozesse werden mit der Veranstaltung angeregt? Worauf sind Erfolge und Misserfolge zurückzuführen?

Warum ist eine Evaluation sinnvoll? Die Idee der Evaluation einzelner Veranstal-tungen in verschiednen Studiengängen war eine Idee der Universität selbst um so den Ange-hörigen der Universität Augsburg eine Diskussionsgrundlage zu liefern, wie die Qualität der Lehre zu verbessern ist. Die Ergebnisse helfen Dozenten, Schwächen eigener Lehre zu erkennen und abzustellen und fördern die Kommunikation zwischen Lehrenden und Studierenden über die Lehre. Sie dient den Studenten bei der Kurswahl und hilft der Universitätsleitung bei der Mittelvergabe. Hierbei wird ersichtlich, dass sich Zweck und Adressat einer Evaluation nicht voneinander trennen lassen.

Was wird evaluiert? Evaluiert wird der Ablauf der Vorlesung „Einführung in die Medienpädagogik“ über das gesamte Semester. Dabei sollen nicht nur didaktische und inhaltliche Qualitäten eine Rolle spielen, sondern auch das Gesamtkonzept der Veranstaltung. Um dieses Konzept noch einmal klar vor Augen zu haben, hier ein kurzer Überblick: Die Vorlesung besteht einmal aus einem Präsenzelement in Form einer traditionellen Vorlesung an der Universität. Das zweite Element der Vorlesung ist ein sogenanntes offline Element in Form der BSCW Plattform im Internet.

Überblick über die Vorlesung „Einführung in die Medienpädagogik“ 24.10.03 Einführung 31.10.03 Vorstellung des Tutorensystems 07.11.03 Begriff, Richtungen und Ziele der Medienpädagogik 14.11.03 Entwicklungslinien der Medienpädagogik 21.11.03 Medienpädagogik als Studienfach (Exkurs I: Lernen und Studieren) 28.11.03 Medienpädagogik zwischen Wissenschaft und Praxis (Exkurs II: Wissenschaft und Forschung) 05.12.03 Medien und Kommunikation 12.12.03 Zwischenklausur 19.12.03 Neue Medien und Mediengesellschaft 09.01.04 Mediale Gewalt 16.01.04 Computerspiele 23.01.04 Medien und Sozialisation 30.01.04 Termin entfällt 06.02.04 Lernen mit Medien 13.02.04 Abschlussklausur

Überblick über die Vorlesung „Einführung in die Medienpädagogik“ Die Einführungsveranstaltung in die Medienpädagogik ist ausgelegt für Studierende im ersten Semester. Sie ist Grundbestandteil des Studiums der Medienpädagogik, dass sich in fünf Module gliedert. Die Vorlesung „Einführung in die Medienpädagogik“ gehört zum Grundlagenwissen und wird deshalb in Modul 1 behandelt. Modul 1: Medienpädagogische Grundlagen Wichtige Themen in diesem Modul sind: - Medienwirkungsforschung - Medientheorien - Grundlagen: Medienerziehung - Grundlagen: Mediendidaktik - Medienethik - Medien und Gewalt - Medien und Gesellschaft etc. Zu Modul 1 gibt es zwei im Wechsel angebotene Vorlesungen. Einmal die Einführungsveranstaltung meist im Wintersemester und die Semivirtuelle Vorlesung im Sommersemester.

Empirische Untersuchung Wie wird evaluiert? Die empirische Sozialforschung teilt die Methoden der Evaluation in fünf verschiedene Kategorien ein: Dokumentenanalyse Befragung Test Beobachtung Empirische Untersuchung Die in unserem Falle sinnvollen Methoden werden im Folgenden kurz vorgestellt und in direktem Bezug zur Vorlesung gesetzt.

Die Befragung Man unterscheidet bei Befragungen die mündliche Variante (Interviews) und die schriftliche Variante (Fragebogen). Aufgrund der hohen Teilnehmerzahl der Vorlesung bietet sich die Erstellung eines Fragenbogens an, welcher innerhalb des BSCW den Studenten zur Verfügung gestellt wird. Der Fragebogen besteht aus einer offenen Komponente (in welcher die Fragen frei beantwortet werden können) sowie einer geschlossenen Komponente (Vorgabe bestimmter Antworten zum ankreuzen/Skala für subjektive Bewertung)

Die Befragung Die geschlossenen Fragen des Fragebogens lassen sich in drei verschiedene Kategorien einteilen: Einschätzung der Lehrveranstaltung (Didaktik, Konzeption der Veranstaltung, Kompetenz der Lehrkraft, Qualität der Materialien) Selbsteinschätzung der Teilnehmer (Lernerfolge, Teilnahme, Motivation) Sonstiges (Räumlichkeiten, technische Ausstattung, Lernatmosphäre) Der offene Teil des Fragebogens bietet den Teilnehmern die Möglichkeit, allgemeine Kritik an der Vorlesung zu üben, Verbesserungsvorschläge zu formulieren und auch die Erfüllung der eigenen Erwartungen an die Veranstaltung zu bewerten.

Die Dokumentenanalyse Mit einer Dokumentenanalyse können die verschie-denen Dokumente nach unterschiedlichen Aspek-ten untersucht werden. Wie verändert sich die Qualität der Klausuren? Hat sich die Teilnahme an den allgemeinen Foren verändert?

Der Test Mit einem standardisierten (und anonymen) Test zu verschiedenen Zeitpunkten während des laufenden Semesters (und danach) kann der Output (die unmittelbaren Ergebnisse, z.B. Lernergebnisse, Verhaltens-Einstellungsänderungen) und der Outcome (die langfristige Lernerfolge, z.B. den Lerntransfer) durch die Teilnahme an der Vorlesung festgestellt werden.

Die Beobachtung Wissenschaftliches Beobachten ist allg. das aufmerksame, geplante und zielgerichtete Wahrnehmen von Ereignissen, Verhaltensweisen etc. in bestimmten Situationen. Man unterscheidet zu allererst zwischen Selbst- und Fremdbeobachtung. Letztere lässt sich wiederum unterteilen in die systematische und unsystematische Beobachtung. Schließlich werden noch künstliche (gestellte) Situationen von natürlichen unterschieden.

Die Beobachtung Bei einer Beobachtung … - wird unterschieden, ob der Beobachter selbst teilnimmt oder nicht - muss vorher unbedingt der Gegenstand der Beobachtung geklärt und definiert werden - muss sich der Forscher Notizen zu seinen Beobachtungen machen, welche im Nachhinein von weiteren Personen ergänzt/kritisiert werden sollten, um ein subjektives Urteil des Beobachters zu vermeiden muss nach bestimmten Kriterien ablaufen (was wird wann wie lange und wie oft beobachtet? festlegen auf best. Kriterien)

Literatur Helmke, Andreas Jahr: Unterrichtsqualität erfassen, bewerten, verbessern. Verlag Ort Lohnert, Beate 1997: Handbuch zur Evaluation von Lehre und Studium an Hochschulen. ZEvA Hannover Spiel, Christiane (Hrsg.) 2001: Evaluation universitärer Lehre – zwischen Qualitätsmanagement und Selbstzweck. Waxmann Verlag GmbH Münster Holtkamp, Rolf (Hrsg.) 1992: Evaluation des Lehrens und Lernens Ansätze, Methoden, Instrumente. HIS GmbH Hannover Vorlesung in der Uni Augsburg von Reinmann, Gabi 2003: Einführung in die Medienpädagogik