Die Präsentation wird geladen. Bitte warten

Die Präsentation wird geladen. Bitte warten

Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung 2012 24.05.2012 Summatives Assessment und formatives Progress Testing Kombination zweier Evaluationsformen.

Ähnliche Präsentationen


Präsentation zum Thema: "Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung 2012 24.05.2012 Summatives Assessment und formatives Progress Testing Kombination zweier Evaluationsformen."—  Präsentation transkript:

1 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Summatives Assessment und formatives Progress Testing Kombination zweier Evaluationsformen im Bereich der Dozentenrückmeldung, des Studierenden-Mentorings und der curricularen Weiterentwicklung Johann Arias Alexander Schiffel Sonja Finsterer Wolfgang Dott Melanie Simon

2 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Bausteine eines Evaluationsergebnisses

3 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Bausteine eines Evaluationsergebnisses

4 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Gründe – Erreichen des „Ziels“ – Curriculare Weiterentwicklung – Verpflichtung „… den gesetzlichen Anforderungen wird Genüge getan“ meist ohne Auswirkungen Evaluation in der Lehre

5 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Evaluation wird zum Selbstzweck? – Potential für die Qualitätssicherung wird nicht erkannt Evaluation wird zu Entscheidungen missbraucht? – Negatives Image – Opinion based vs. Evidence based Kromrey, H. [2005] Probleme der Lehrevaluation

6 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Ziele der Lehre Welche Ziele hat ein Studiengang? – „Ziel […] ist der wissenschaftlich und praktisch in der Medizin ausgebildete Arzt […]. Die Ausbildung soll grundlegende Kenntnisse, Fähigkeiten und Fertigkeiten in allen Fächern vermitteln, […]“ (ÄAppO, 2003) Wie sollen die Ziele erreicht werden? – Qualität in der Lehre (Identifizieren und Beheben von Problemen) – Vermittlung von Wissen und Kompetenzen der Absolventen Woran erkennt man die Zielerreichung? – Befragen der Zielgruppen und Prüfungsergebnisse Spiel, C. [2011]

7 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Studentische Lehrveranstaltungs-Evaluation – Vorteile bewährte standardisierte Fragebögen Hoher Erfahrungswert – Probleme Hoher Einfluss individueller Studienmotivation und Erwartungshaltung Image des/der Dozenten/Dozentin und keine Vergleichsmöglichkeit Positive Bewertung der Lehrveranstaltung nicht gleichbedeutend mit Lernerfolg Welche Formen der Evaluation stehen aktuell zur Verfügung? (1)

8 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Outcome-basierte Prüfungen – Summativ – Formativ – Messung von Wissenszuwachs und Kompetenz durch Prüfungen Kursnoten und sonstige Testergebnisse sind Indikatoren für Qualifikation – Herausforderungen Qualität der Prüfungsfragen (Relevanz, Aussagekraft) => Reviewprozess Welche Formen der Evaluation stehen aktuell zur Verfügung? (2)

9 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Aachener Modellstudiengang Medizin 1. Ärztl. Prüfung 2. Ärztl. Prüfung Studien- abschnitt 3. Studien- abschnitt & PJ Progress Tests 60 Kursprüfungensummativfachbezogen 2 Staatsexaminasummativallgemein 12 Progress Testsformativallgemein

10 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Idee entstanden in den 70er Jahren Vorreiter in NL und GB Organisiert von der Charité, Berlin (seit 1999) Kooperation zwischen 15 Medizinischen Fakultäten  Fakultätsvergleiche Zentrale Fragendatenbank  Reviewprozesse 200 MC-Fragen auf Absolventenniveau Blueprint 14 Organsysteme, 27 Fachgebiete Progress Test Medizin (PTM)

11 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Idee entstanden in den 70er Jahren Vorreiter in NL und GB Organisiert von der Charité, Berlin (seit 1999) Kooperation zwischen 15 Medizinischen Fakultäten  Fakultätsvergleiche Zentrale Fragendatenbank  Reviewprozesse 200 MC-Fragen auf Absolventenniveau Blueprint 14 Organsysteme, 27 Fachgebiete Progress Test Medizin (PTM)

12 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Synthese der Evaluationsformen Evaluations- Datenbank Progress Test Ergebnisse Summative Ergebnisse PTM Ergebnisse Stud. LV-Evaluation

13 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Bezüge zwischen summativen und formativen Ergebnissen Kurse Aachener Curriculum Progress Test Organsysteme Fachgebiete MC-Fragen 1 MC-Frage : 1 Organsystem + 1 Fachgebiet

14 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Bezüge zwischen summativen und formativen Ergebnissen Kurse Aachener Curriculum Progress Test Organsysteme Fachgebiete MC-Fragen 1 MC-Frage : 1 Organsystem + 1 Fachgebiet 1 Kurs : n Organsysteme + m Fachgebiete

15 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Bezüge zwischen summativen und formativen Ergebnissen Kurse Aachener Curriculum Progress Test Organsysteme Fachgebiete MC-Fragen 1 MC-Frage : 1 Organsystem + 1 Fachgebiet 1 Kurs : n Organsysteme + m Fachgebiete => 1 MC-Frage : x Kurse

16 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung ? Wissensentwicklung im Curriculum Vergleiche von Evaluationsformen Dozenten- Rückmeldung Studierenden- Rückmeldung

17 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Wissensentwicklung Gesamt

18 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Wissensentwicklung Atmungsorgane

19 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Wissensentwicklung Atmungsorgane

20 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Wissensentwicklung Atmungsorgane

21 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Wissensentwicklung Atmungsorgane WS 10/11

22 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung ? Wissensentwicklung im Curriculum Vergleiche von Evaluationsformen Dozenten- Rückmeldung Studierenden- Rückmeldung

23 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Gibt es übereinstimmende Tendenzen beider Evaluationsformen? – „Der persönliche Lerneffekt für mich war…“: – 1- sehr hoch bis 6- nicht vorhanden Fragestellungen an den Vergleich PTM/Studentische LV-Evaluation = ?

24 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Vergleich PTM/Studentische LV-Evaluation

25 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung „Der persönliche Lerneffekt für mich war…“: 1- sehr hoch bis 6- nicht vorhanden Vergleich PTM/Studentische LV-Evaluation

26 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung ? Wissensentwicklung im Curriculum Vergleiche von Evaluationsformen Dozenten- Rückmeldung Studierenden- Rückmeldung

27 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Rückmeldung an Dozenten

28 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Rückmeldung an Dozenten

29 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung ? Wissensentwicklung im Curriculum Vergleiche von Evaluationsformen Dozenten- Rückmeldung Studierenden- Rückmeldung

30 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Beratung in der Medizinischen Fakultät seit 2003  Ein Berater pro Jahrgang (jeweils ca. 250 Studierende)  Gruppen- und Einzelgespräche Ziele – Verbesserung der Prüfungsleistungen – Studiendauer reduzieren – Frühzeitiges Erkennen von Bedürfnissen, Problemen und Potentialen Studierende gezielter kontaktieren – Self-Assessment fördern Mentoring Konzept

31 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Student AStudent B Kurzübersicht

32 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Vergleich Summativ/Formativ

33 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Vergleich Summativ/Formativ

34 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Identifizierung vorhandener Evaluationsformen – Zusammenführung und Vergleich war weiterführend Neue Themen in der Studierendenberatung – Bessere Einschätzung von Stärken und Schwächen – Lerntypen identifizieren – Nachhaltigkeit von Gelerntem Zusammenfassung

35 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Fazit Stud. LV- Bewertung Summative Prüfungen Formative Prüfungen Evaluation

36 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Fazit

37 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Erstellung eines Lernzielkatalogs – Eigenes Curriculum daran ausrichten und überprüfen Kompetenzvermittlung durch angepasste Prüfungsformate Weg von reiner Bewertung anhand von Abschlussprüfungen – Datenlage zur Bewertung nach Studienabschluss nicht vorhanden Optimierung der Evaluationsformen – Mentoringbedarf erkennen – Zugang Mentoring-Tool für Studierende – Bedarfsorientiertes Dozentenfeedback – Studentische Lehrevaluation weiter analysieren – Reviewprozess der summativen Prüfungsfragen Ausblick

38 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung An das PTM Team der Charité Kollegen im Aachener Modellstudiengang Medizin Vielen Dank

39 AACHEN

40 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Evaluation – Von Lehrveranstaltungsevaluation zu Curriculumsentwicklung. Spiel, GMA – Zwischen Selbstzweck und Qualitätsmanagement. Quo vadis, Evaluatione? Spiel et al. In C. Spiel (Hrsg.), Evaluation universitärer Lehre - zwischen Qualitätsmanagement und Selbstzweck (S. 9-20). Münster: Waxmann., 2001 – Selbstevaluation in der Lehre. Beywel et al. Waxmann 2011 – Studierendenbefragung als Evaluation der Lehre? – Anforderung an Methodik und Design. Kromrey. Hg: Engel, Hochschulranking. Zur Qualitätsbewertung von Studium und Lehre, Campus Verlag, Frankfurt M., 2001 Literatur

41 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Progress Testing – Progress testing in German speaking countries. Nouns & Georg. Medical Teacher – Progress Testing- ein Verfahren zur detaillierten Leistungsdarstellung und Lehrevaluation auf Basis der Wissensentwicklung von Studierenden. Nouns & Brauns. Blickpunkt Hochschuldidaktik – Flexible electronic feedback using the virtues of progress testing. Muijtjens et al. Medical teacher – Medical Teacher. Progress Testing Themed Issue. Volume 32, Number 6, June 2010, AMEE Mentoring – Querschnittsevaluation des Medizinischen Curriculums München (MeCuM) mit Hilfe des Progress Tests Medizin (PTM). Schmidmaier et al. GMS Z Med Ausbild – Aufbau eines innovativen Mentorenprogramms für eine große Zahl Medizinstudierender nach quantitativer und qualitativer Bedarfsanalyse. von der Borch et al. GMS Z Med Ausbild 2011, Vol. 28(2) Literatur

42 Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung Welche Ziele hat ein Studiengang? Wie sollen die Ziele erreicht werden? Woran erkennt man die Zielerreichung? Sind die entsprechenden Ressourcen vorhanden? Evaluationsformen an Ihrer Fakultät? Progress Test in anderen Fachrichtungen? Lernzielkatalog für andere Fachrichtungen? Reviewprozesse für Kursprüfungsfragen? Diskussion


Herunterladen ppt "Jahrestagung Arbeitskreis Evaluation und Qualitätssicherung 2012 24.05.2012 Summatives Assessment und formatives Progress Testing Kombination zweier Evaluationsformen."

Ähnliche Präsentationen


Google-Anzeigen