aufbau einer evaluationskultur an hochschulen · 2018-09-11 · aufbau einer evaluationskultur an...

Aufbau einer Evaluationskultur an Hochschulen

Mise sur pied d’une culture d’évaluation dans lesHautes Écoles

Tipps im Umgang mit externen Anforderungen und internen Realitäten

Astuces pratiques avec les exigences externes et les réalités internes

Input: Dr. Désirée Donzallaz, ProCert, Bern

Moderation: Michele Balmelli, Università della Svizzera Italiana, USI

SEVAL & argev Kongress 2018 Evaluationskulturen in der Bildung – Workshop 3 – 7.09.

Inhalt des Workshops – contenu de l’atelierUnser Input

▪ Evaluation – Teil eines QMS

▪ Welches sind häufige Schwierigkeiten/Problemfelder?

▪ Was können wir (nicht) beeinflussen?

▪ Worauf ist bei der (Weiter-)Entwicklung einer Evaluationskultur zu achten?

Gemeinsame Diskussion & Reflexion

▪ Welche Tipps gibt es für die Kommunikation und die Partizipation im Kontext von Evaluation?

Input

▪ Evaluation – part d’un système qualité

▪ Quelles sont des difficultés/problématiquesfréquentes?

▪ Qu’est-ce que nous (ne) pouvonsinfluencer?

▪ A quoi faire attention lors d’un déploiementd’une culture d’évaluation?

Discussion & réflexion commune

▪ Quelles astuces existent pour la communication et la participation dans le contexte de l’évaluation?

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 2

Evaluation – Teil eines QMSL’évaluation composant d’un système qualité

Annahmen

▪ Evaluation ist Teil eines QMS/Organisationsentwicklung

▪ Evaluation wird an Hochschulen formativ und summativ eingesetzt

Hypothèses

▪ L’évaluation fait partie d’un système qualité/développement organisationnel

▪ L’évaluation est utilisée de manière formative et sommative dans les HE

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 3

L’évaluation – composant d’un système qualitéEvaluation - Komponente eines QMS

EVALUATION

FORMATIV

ENTWICKLUNG

SUMMATIV

KONTROLLE

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 4

L’évaluation – composant d’un système qualitéEvaluation - Komponente eines QMS

EVALUATION

FORMATIV

ENTWICKLUNG

SUMMATIV

KONTROLLE

Contrat de prestation

accréditation

Amélioration de l’enseignement

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 5

Problemfeld Wirkungen – problématique de l’impact

Qu’est-ce qui se passe avec les résultats?

EVALUATION

«souventbrumeux…»

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 6

Problemfeld Misstrauen – problématique «manque de confiance»

EVALUATION

LERNKULTUR

FORMATIV

ENTWICKLUNG

MONITORING-KULTUR

SUMMATIV

KONTROLLE

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 7

Mit der Evaluation zu vermeiden…

Evaluation erzielt wenig sichtbare Wirkung.

Es wird zu häufig evaluiert.

Was geschieht mit den Ergebnissen?

Wo sind Verbesserungen sichtbar?

Der Zweck der Evaluation ist nicht eindeutig.

Warum werden wir schon wieder evaluiert?

Wir wissen doch, was gut läuft/nicht gut läuft?

Wir möchten nicht mehr!

Geringer Erkenntnisgewinn!

Oft nur Wirkungsdiskussion!

Regelkreise werden nicht systematisch geschlossen.

Welchen Zweck verfolgt die Evaluation wirklich?

Dürfen wir vertrauen?

Es wird Entwicklung fokussiert, aber Kontrolle ausgeübt!

Wir haben wenig Vertrauen!

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 8

Was können wir (nicht) beeinflussen?Qu’est-ce que nous (ne) pouvons influencer?Ansprüche der Gouvernance

▪ Richtungsänderung

▪ Evaluation als Teil der Hochschul- und Personalentwicklung

▪ Evaluation als Entwicklung und/oder Kontrolle

Evaluation als Teil einer Organisationskultur

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 9

Elements d’une culture d’évaluation encourageanteElemente einer fördernden Evaluationskultur

Systemkonzeption▪ Einbettung des Evaluationssystems in

das QMS sicherstellen.

▪ Zweck der Evaluation klären und erklären. Nutzen aufzeigen!

▪ Ressourcen festlegen für interne und externe Ansprüche.

▪ Verantwortlichkeiten klären.

Umsetzung▪ Systematische, schrittweise und

bedürfnisorientierte Operationalisierung des Evaluationssystems in der Organisation.

▪ Instrumente/Häufigkeit: Variation einbauen –eine andere Perspektive einnehmen!

▪ Genügend Zeit für die Umsetzung/Optimierung

▪ Milestones festlegen!

▪ Bipolare Strategie (top down und bottom up) in Kombination mit «multiple nucleus» Strategie

Fördernde Faktoren, die Vertrauen schaffen

▪ Partizipation – ja, aber geleitet!

▪ Kommunikation – so viel wie möglich!

▪ Sichtbarkeit – Evaluation ein Gesicht geben!

▪ Dienstleistungsorientierung und Fachkompetenz – Unterstützen Sie die Hochschulmitglieder!

Werte – Einstellungen/Überzeugungen – Beziehungen/Koalitionen – fachspezifisch, individuell, kollektiv-Verhalten

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 10

Implementierungsstrategien (Schönwald 2007)

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 11

Innovationstypen (Rogers 2003)

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 12

Widerstände und Interventionsformen (Schönwald 2007)

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 13

Discussion & réflexionQuelles astuces existent pour la communication et la participation dans le contexte de l’évaluation?

Diskussion & ReflexionWelche Tipps gibt es für die Kommunikation und die Partizipation im Kontext der Evaluation?

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 14

Gruppenarbeit – travail de groupe

Kommunikation

▪ Erstellen Sie eine Tabelle mit Kommunikationsanlässen und möglichst konkreten Beispielen aus Ihrem Kontext, wie Sie regelmässig über die Wirkungen und den Nutzen von Evaluation berichten können.

▪ Denken Sie dabei an konkrete interne Evaluationsinstrumente (Evaluation der Lehre, Evaluation der Forschung, Evaluation von Einheiten und Abläufen, DL…) und auch externe Instrumente (Akkreditierung, Audit, Peer Review…)

▪ Berücksichtigen Sie dabei verschiedene Bedürfnisse!

Zeit: 30’

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 15

Gruppenarbeit – travail de groupe

Partizipation

▪ Erstellen Sie eine Tabelle mit Partizipationsanlässen und möglichst konkreten Beispielen aus Ihrem Kontext, wie Sie mit Partizipation die Wirkungen und den Nutzen von Evaluation optimieren können.

▪ Denken Sie dabei an konkrete interne Evaluationsinstrumente (Evaluation der Lehre, Evaluation der Forschung, Evaluation von Einheiten und Abläufen…) und auch externe Ansprüche (Akkreditierung, Audit, Peer Review…)

▪ Berücksichtigen Sie dabei verschiedene Bedürfnisse!

Zeit: 30’

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 16

Bibliografische Angaben & Kontakt

Dr. Désirée Donzallaz

Verantwortliche Learning & Development

ProCert

Marktgasse 65

3011 Bern

www.procert.ch

d.donzallaz@procert.ch

desireedonzallaz@gmail.com

++41 79 503 66 52

▪ Donzallaz, D. (2014). Vom «Schwachsinn» zur

Qualitätskultur. Tipps für den Umgang mit Problemen beim Aufbau von QM-Systemen in Universitäten. In: S. Nickel (Hrsg.), Implementierung von Qualitätsmanagementsystemen. Erfahrungen aus der Hochschulpraxis. (S. 27-38) Gütersloh: CHE. http://www.che.de/downloads/CHE_AP_163_Qualitaetsmanagementsysteme_2014.pdf

▪ Loukkola, T. & Zhangh, T. (2010). Examining Quality Culture: Part 1 – Quality Assurance Processes in Higher Education Institutions. EUA. http://aic.lv/bolona/2010/Reports/Examining%20Quality%20Culture%20Part%201.pdf

▪ Rogers, E.M. (2003). Diffusion of innovations (5th ed.). New York: Free Press.

▪ Schönwald, I. (2007). Change Management in Hochschulen. Die Gestaltung soziokultureller Veränderungsprozesse zur Integration von E-Learning in die Hochschullehre. Lohmar-Köln: Josef Eul.

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 17