Prozessmanagement und Qualitätssicherung bei elektronischen Prüfungen: Best Practice und Work in Progress Workshop elearn.nrw – 01.09.2017 Andreas Hoffmann,

Präsentation zum Thema: "Prozessmanagement und Qualitätssicherung bei elektronischen Prüfungen: Best Practice und Work in Progress Workshop elearn.nrw – 01.09.2017 Andreas Hoffmann,"—  Präsentation transkript:

1 Prozessmanagement und Qualitätssicherung bei elektronischen Prüfungen: Best Practice und Work in Progress Workshop elearn.nrw – Andreas Hoffmann, Marc Sauer, Gregor Hohenberg, Katharina Schulz, Jan Ehlers, Jonas vor dem Esche

2 Prozessmanagement bei Prüfungen und rechtliche Grundlagen
Jan Ehlers Prozessmanagement bei Prüfungen und rechtliche Grundlagen

3 Prüfungsdurchführung
Prozessmanagement und Qualitätssicherung bei elektronischen Prüfungen Prüfungsordnung Schulungen Blueprinterstellung Fragenerstellung Formaler Review Inhaltlicher Review Prüfungszusammenstellung Prüfungsdurchführung Frageneliminierung/ Gleitklausel? Evtl. Korrektur Fragenstatistik Post-Review Ergebnisfreigabe Prüfungseinsicht Einspruchsverfahren Fragenpool Archivierung

4 Prozesse PRÜFUNG FRAGENPOOL ARCHIVIERUNG
Prüfungsordnung  Schulungen  Blueprinterstellung  Fragenerstellung  Formaler Review  Inhaltlicher Review  Prüfungszusammenstellung  PRÜFUNG Korrektur  Fragenstatistik  Post-Review  Frageneliminierung  Gleitklauseleinsatz Ergebnisfreigabe Klausureinsicht  Einspruchsverfahren FRAGENPOOL ARCHIVIERUNG

5 Gruppenarbeit Markieren Sie die Teile des Gesamtprozesses, die schon an Ihrer Hochschule etabliert sind und diskutieren Sie ggf. einzelne Prozesspunkte in Ihrer Gruppe. Ergänzen Sie ggf. verantwortliche Institutionen oder Personen in dem Prozessdiagramm.

6 Best Practice, Hürden und Herausforderungen bei der Einführung: Erfahrungen an der HSHL
Übliche Hürden und Herausforderungen: Mangelnde Unterstützung der Hochschulleitung Fehlendes Budget, Personal, fehlende Infrastruktur, Prozesse Keine breite Unterstützung der Lehrenden Absicherung in den Gremien/Prüfungsordnungen Technisches Know-How (IT, Lehrende) Didaktische Kenntnisse Skepsis in der Studierendenschaft Workshop elearn.nrw · · Katharina Schulz, FH Bielefeld · Referentin im Serviceverbund MIND Ehemals Projektleitung E-Learning an der Hochschule Hamm-Lippstadt

7 Best Practice, Hürden und Herausforderungen bei der Einführung: Erfahrungen an der HSHL
Hochschulleitung Treiber der Digitalisierung Ausreichendes Budget Herausforderungen: Unterstützung der Lehrenden in der Breite sichern Prozesse abstimmen Absicherung in den Gremien, Prüfungsordnungen Workshop elearn.nrw · · Katharina Schulz, FH Bielefeld · Referentin im Serviceverbund MIND Ehemals Projektleitung E-Learning an der Hochschule Hamm-Lippstadt

8 Best Practice, Hürden und Herausforderungen bei der Einführung: Erfahrungen an der HSHL
Allgemeine Lösungsansätze: Unterstützung der Hochschulleitung sichern, z.B. durch Pilotprojekte Verankerung in der Hochschule durch breiten Prozess Gremien und Rechtsabteilung früh einbinden Lehrende (und Studierende!) informieren und schulen Erfahrung anderer nutzen Workshop elearn.nrw · · Katharina Schulz, FH Bielefeld · Referentin im Serviceverbund MIND Ehemals Projektleitung E-Learning an der Hochschule Hamm-Lippstadt

9 Best Practice, Hürden und Herausforderungen bei der Einführung: Erfahrungen an der HSHL
Vorgehen an der HSHL: Kerngruppe mit Vertretern des Präsidiums, der Lehrenden, Rechtsabteilung und zentraler Betriebseinheit zur Abstimmung der Prozesse Informationsveranstaltungen an beiden Standorten Parallel: IT-Projekt zur Schaffung der technischen Voraussetzungen Anpassung der Rahmenprüfungsordnung Workshop elearn.nrw · · Katharina Schulz, FH Bielefeld · Referentin im Serviceverbund MIND Ehemals Projektleitung E-Learning an der Hochschule Hamm-Lippstadt

10 Best Practice, Hürden und Herausforderungen bei der Durchführung: Erfahrungen an der Uni Siegen
Übliche Hürden und Herausforderungen: Räumliche Szenarien und erforderliches Personal Einbettung der Prozesse in die allgemeinen / bestehenden Prüfungsprozesse der Hochschule Erstellung und Anpassung von Schnittstellen zum Campus-Management-System Dozierende stellen Notwendigkeit formaler Prozesse und Deadlines in Frage Schulungen bzw. Testumgebungen für Studierende Workshop elearn.nrw · · Marc Sauer & Andreas Hoffmann Universität Siegen· Betriebssysteme und verteilte Systeme

11 Best Practice, Hürden und Herausforderungen bei der Durchführung: Erfahrungen an der Uni Siegen
Erfahrungen und Herausforderungen an der Uni Siegen: Mehrere einzelne Projekte im Bereich E-Assessment mit unterschiedlichen räumlichen und technischen Szenarien Interessierte und engagierte Lehrende sind in Anfängen treibende Kraft  Wichtig: „Machen!“ Ziel: Hochschulweiter professioneller Einsatz von E-Assessments für summative Prüfungen Fächervielfalt  Naturwissenschaftlich-technische Fächer mit besonderen Anforderungen Unterschiedliche Prüfungsprozesse der einzelnen Fakultäten Workshop elearn.nrw · · Marc Sauer & Andreas Hoffmann Universität Siegen· Betriebssysteme und verteilte Systeme

12 Best Practice, Hürden und Herausforderungen bei der Durchführung: Erfahrungen an der Uni Siegen
Vorgehen an der Uni Siegen: Evaluation und Beurteilung der bestehenden Aktivitäten im Bereich E-Assessment Pilotprojekt für Etablierung einer hochschulweiten professionellen und rechtsicheren Lösung Von Bottom-Up zu Top-Down (Rektorat, CIO-Gremium) Einsatz eines Dienstleisters für technische Durchführung inkl. Bereitstellung der Geräte Prozesse der Prüfungsplattform in Prüfungsprozesse der Fakultäten integrieren Workshop elearn.nrw · · Marc Sauer & Andreas Hoffmann Universität Siegen· Betriebssysteme und verteilte Systeme

13 Best Practice, Hürden und Herausforderungen bei der Durchführung: Erfahrungen an der Uni Siegen
Vorgehen an der Uni Siegen: Hausinterne Supportstelle für Koordination und Betreuung der Dozierenden Anfänglich Fokus auf rechtssicherer und technisch fehlerfreier Durchführung  Viele der genannten Teilprozesse noch im Hintergrund Workshop elearn.nrw · · Marc Sauer & Andreas Hoffmann Universität Siegen· Betriebssysteme und verteilte Systeme

14 Prüfungsdurchführung
Prüfungsordnung Schulungen Blueprinterstellung Fragenerstellung Formaler Review Inhaltlicher Review Prüfungszusammenstellung Prüfungsdurchführung Evtl. Korrektur Fragenstatistik Post-Review Frageneliminierung Ergebnisfreigabe Prüfungseinsicht Einspruchsverfahren Fragenpool Archivierung

15 Best Practice, Hürden und Herausforderungen bei der Durchführung: Erfahrungen an der Uni Siegen
Vorgehen an der Uni Siegen: Hausinterne Supportstelle für Koordination und Betreuung der Dozierenden Anfänglich Fokus auf rechtssicherer und technisch fehlerfreier Durchführung  Viele der genannten Teilprozesse noch im Hintergrund Im zweiten Schritt Einführung von formalen Prozessen (Pre- und Post-Review, Blueprints)  Akzeptanz der Dozierenden Aufnahme des elektronischen Prüfungsverfahrens in die Rahmenprüfungsordnung Workshop elearn.nrw · · Marc Sauer & Andreas Hoffmann Universität Siegen· Betriebssysteme und verteilte Systeme

16 Einzelarbeit / Partnerarbeit
Tragen Sie zu erwartende Probleme bei der Einführung des Prozesses bzw. einzelner Teilprozesse in das Schaubild ein. Ergänzen Sie ggf. nächste konkrete Schritte und mögliche Ansprechpartner für einzelne Prozessschritte.

17 Plenum Welche Situationen finden wir an den unterschiedlichen Hochschulen vor? Was sind mögliche Lösungen für individuelle Probleme?

18 Abschlussrunde Was kann ich meiner Hochschule aus dem Workshop konkret mitbringen?