potentiale und grenzen · assessment of learning assessment for learning • es ist mit einem...

37
E-Assessment an der Universität Duisburg-Essen Potentiale und Grenzen Dr. Jörg Stratmann

Upload: others

Post on 26-Oct-2019

0 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

E-Assessment

an der Universität

Duisburg-Essen

Potentiale und Grenzen

Dr. Jörg Stratmann

Page 2: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Agenda

• Ausgangspunkt

• Einrichtung Test-Center

• Gestaltung & Potentiale von Online Klausuren

• Erfahrungen mit computergestützten Prüfungen

• Fazit

Page 3: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Status Quo

32% 17%

Page 4: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

des Computers zum Lernen

Selbstverständlicher Gebrach

Page 5: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Digitale Unterstützung

des Student-Life-Cycle Angehöriger der UDE werden

Zu Veranstaltung an-/abmelden

Zu Prüfung an-/abmelden

Online studieren

Computergestützte Prüfung durchführen

Prüfungsergebnisse abrufen

UDE verbunden bleiben

Computergestützte Prüfung durchführen

UDE verbunden bleiben

Page 6: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

E-Assessment

E-Portfolio E-Klausuren

Assessment of Learning

Assessment for Learning

Page 7: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

• es ist mit einem erheblichen Anstieg an abzunehmenden

Prüfungsleistungen zu rechnen

• pro Semester sind im Schnitt 90.000 Prüfungen

durchzuführen, dies umfasst

• An- / Abmeldungen zu Prüfungen

• Verbuchung von Prüfungsleistungen

Bologna Prozess

manuell, fehleranfällig

Online An- / Ab-meldung zur Prüfung

autom. Zuordnung der jeweiligen Prüfung

Online Verbuchung der Noten

autom. Übergabe an HIS POS

Studierender Lehrender

Page 8: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Bedarfsanalyse

N=302

• Die Hälfte der Befragten möchte gerne computergestützte Prüfungen

einsetzen

• Damit würden 25.000 Studierende erreicht

Page 9: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

PC-Hall

Page 10: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester
Page 11: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester
Page 12: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester
Page 13: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Nutzungsvarianten

• Computergestützte Klausuren

• Stift-Klausuren

• Große Lehrveranstaltungen in denen PCs

genutzt werden

• Traditionelle Lehrveranstaltungen

• Freie Nutzung durch Studierende

• Vergabe des Raumes an externe Interessenten

Page 14: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

E-Klausur

open book

Zugriff auf Materialien

Eigenes Arbeitsgerät

closed book

Zugriff auf def. Materialien

Prüfungs-umgebung

vgl. Nicolas Apostolopoulos HIS 2008

Page 15: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Aufgaben

geschlossen

True/False

Multiple-Choice

Zuordnungs-aufgaben

Sortier-aufgaben

offen

Kurztext

Lückentext

Langtext

Page 16: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Lernziel Taxonomie nach Bloom et al. 1956

•Zu Beginn Lernziele festlegen

•Aufgaben-/ Prüfungsform muss zu den

gesetzten Lernzielen passen

•geschlossene Aufgaben v.a. gut

geeignet zur Erfassung deklarativen

Wissens

•bei geschlossenen Aufgaben wichtig:

gute Distraktoren zu formulieren

•Kompetenzen sind i.d.R mit

E-Klausuren nicht zu erfassen

Page 17: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Aufgabenarten Multiple-Choice

Page 18: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Aufgabenarten Kurztext

Page 19: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Aufgabenarten Sonderform einer geschlossenen Aufgabe

Page 20: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Aufgabenarten

Sören Huwendiek HIS 2008

Page 21: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Potentiale computer-

gestützter Prüfungen

Qualitätsverbesserung Effizienzsteigerung

Page 22: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

ZWH / DIHK

BMBF Verbundprojekt: „Innovative Prüfungsverfahren in

der beruflichen Aus- und Weiterbildung unter Nutzung

moderner Kommunikationstechniken“ mit ZWH / DIHK

01.08.2004 – 31.12.2007

n = 171 n = 192

Page 23: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

ZWH / DIHK

• für 81,1% sind Computerkenntnisse

Voraussetzung für die berufl. Tätigkeit

• für 72,8% ist der Umgang

selbstverständlicher Bestandteil des

berufl. Umfelds

• für 75,5% ist der Umgang

selbstverständlicher Bestandteil des

privaten Umfelds

• für 82,1% ist das Internet ein zentrales

Medium für Information und

Kommunikation

Page 24: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

ZWH / DIHK

• 75,3% der KandidatInnen empfinden die Beantwortung

der E-Klausur als kompfortabel

• 55,8% würde computergestützen Prüfungen den Vorzug

geben

• 80,0% der PrüferInnen erlebt auto-matisierte

Auswertung als Entlastung

• 73,9% der PrüferInnen empfindet die Auswertung der

Prüfung als angenehm

• dort wo Video zum Einsatz kam, wurde dies von den

KandidatInnen als Steigerung der Realitätsnähe erlebt

(72,5%)

Page 25: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Computergestützte

Prüfungen an der UDE • Befragung der Prüfungskandidaten von zwei

Prüfungsterminen im WS 09/10

• t 1: v.a. Studierende der Wirtschaftsinformatik,

Angewandten Informatik und Lehramt n = 94

(entspricht einem Rücklauf von 37%)

• t 2: v.a. Studierende der Wirtschaftsinformatik,

Angewandten Informatik und Lehramt n = 80

(entspricht einem Rücklauf von 18%)

Page 26: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester
Page 27: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester
Page 28: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester
Page 29: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester
Page 30: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

LPLUS

Programmierumgebung

Page 31: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

LPLUS

Page 32: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

LPLUS

Page 33: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

LPLUS

Page 34: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Programmierumgebung

Page 35: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

LPLUS

Programmierumgebung

Page 36: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Fazit • E-Klausuren bieten durch den Einbezug

unterschiedlicher Medien interessante Potentiale

• Qualitätsverbesserung: den Prüflingen kann eine

authentische und komplexe Ausgangslage präsentiert

werden

• Effizienzsteigerung: v.a. die automatiserte Auswertung

und der automatiserte Datenaustausch bieten

Effzienzvorteile

• E-Klausuren sind gut geeignet zur punktuellen und

summativen Erfassung von Leistungen (Assessment of

Learning)

• Zur Beurteilung der Kompetenzen von Studierenden

sollten weitere Assessmentformen angeboten werden

Page 37: Potentiale und Grenzen · Assessment of Learning Assessment for Learning • es ist mit einem erheblichen Anstieg an abzunehmenden Prüfungsleistungen zu rechnen • pro Semester

Workshop E-Learning NRW

• 16.11.2010 an der Universität Duisburg-Essen

• Schwerpunkt liegt auf hochschulübergreifender Lehre

• Erfahrungen in der UAMR

• Erfahrungen in der Zusammenarbeit mit der

Virtuellen Hochschule Bayern

Weitere Informationen unter: elearningnrw.de