aufbau einer evaluationskultur an hochschulen · 2018-09-11 · aufbau einer evaluationskultur an...

17
Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles Tipps im Umgang mit externen Anforderungen und internen Realitäten Astuces pratiques avec les exigences externes et les réalités internes Input: Dr. Désirée Donzallaz, ProCert, Bern Moderation: Michele Balmelli, Università della Svizzera Italiana, USI SEVAL & argev Kongress 2018 Evaluationskulturen in der Bildung – Workshop 3 – 7.09.

Upload: others

Post on 17-Jul-2020

3 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Aufbau einer Evaluationskultur an Hochschulen

Mise sur pied d’une culture d’évaluation dans lesHautes Écoles

Tipps im Umgang mit externen Anforderungen und internen Realitäten

Astuces pratiques avec les exigences externes et les réalités internes

Input: Dr. Désirée Donzallaz, ProCert, Bern

Moderation: Michele Balmelli, Università della Svizzera Italiana, USI

SEVAL & argev Kongress 2018 Evaluationskulturen in der Bildung – Workshop 3 – 7.09.

Page 2: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Inhalt des Workshops – contenu de l’atelierUnser Input

▪ Evaluation – Teil eines QMS

▪ Welches sind häufige Schwierigkeiten/Problemfelder?

▪ Was können wir (nicht) beeinflussen?

▪ Worauf ist bei der (Weiter-)Entwicklung einer Evaluationskultur zu achten?

Gemeinsame Diskussion & Reflexion

▪ Welche Tipps gibt es für die Kommunikation und die Partizipation im Kontext von Evaluation?

Input

▪ Evaluation – part d’un système qualité

▪ Quelles sont des difficultés/problématiquesfréquentes?

▪ Qu’est-ce que nous (ne) pouvonsinfluencer?

▪ A quoi faire attention lors d’un déploiementd’une culture d’évaluation?

Discussion & réflexion commune

▪ Quelles astuces existent pour la communication et la participation dans le contexte de l’évaluation?

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 2

Page 3: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Evaluation – Teil eines QMSL’évaluation composant d’un système qualité

Annahmen

▪ Evaluation ist Teil eines QMS/Organisationsentwicklung

▪ Evaluation wird an Hochschulen formativ und summativ eingesetzt

Hypothèses

▪ L’évaluation fait partie d’un système qualité/développement organisationnel

▪ L’évaluation est utilisée de manière formative et sommative dans les HE

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 3

Page 4: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

L’évaluation – composant d’un système qualitéEvaluation - Komponente eines QMS

EVALUATION

FORMATIV

ENTWICKLUNG

SUMMATIV

KONTROLLE

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 4

Page 5: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

L’évaluation – composant d’un système qualitéEvaluation - Komponente eines QMS

EVALUATION

FORMATIV

ENTWICKLUNG

SUMMATIV

KONTROLLE

Contrat de prestation

accréditation

Amélioration de l’enseignement

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 5

Page 6: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Problemfeld Wirkungen – problématique de l’impact

Qu’est-ce qui se passe avec les résultats?

EVALUATION

«souventbrumeux…»

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 6

Page 7: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Problemfeld Misstrauen – problématique «manque de confiance»

EVALUATION

LERNKULTUR

FORMATIV

ENTWICKLUNG

MONITORING-KULTUR

SUMMATIV

KONTROLLE

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 7

Page 8: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Mit der Evaluation zu vermeiden…

Evaluation erzielt wenig sichtbare Wirkung.

Es wird zu häufig evaluiert.

Was geschieht mit den Ergebnissen?

Wo sind Verbesserungen sichtbar?

Der Zweck der Evaluation ist nicht eindeutig.

Warum werden wir schon wieder evaluiert?

Wir wissen doch, was gut läuft/nicht gut läuft?

Wir möchten nicht mehr!

Geringer Erkenntnisgewinn!

Oft nur Wirkungsdiskussion!

Regelkreise werden nicht systematisch geschlossen.

Welchen Zweck verfolgt die Evaluation wirklich?

Dürfen wir vertrauen?

Es wird Entwicklung fokussiert, aber Kontrolle ausgeübt!

Wir haben wenig Vertrauen!

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 8

Page 9: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Was können wir (nicht) beeinflussen?Qu’est-ce que nous (ne) pouvons influencer?Ansprüche der Gouvernance

▪ Richtungsänderung

▪ Evaluation als Teil der Hochschul- und Personalentwicklung

▪ Evaluation als Entwicklung und/oder Kontrolle

Evaluation als Teil einer Organisationskultur

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 9

Page 10: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Elements d’une culture d’évaluation encourageanteElemente einer fördernden Evaluationskultur

Systemkonzeption▪ Einbettung des Evaluationssystems in

das QMS sicherstellen.

▪ Zweck der Evaluation klären und erklären. Nutzen aufzeigen!

▪ Ressourcen festlegen für interne und externe Ansprüche.

▪ Verantwortlichkeiten klären.

Umsetzung▪ Systematische, schrittweise und

bedürfnisorientierte Operationalisierung des Evaluationssystems in der Organisation.

▪ Instrumente/Häufigkeit: Variation einbauen –eine andere Perspektive einnehmen!

▪ Genügend Zeit für die Umsetzung/Optimierung

▪ Milestones festlegen!

▪ Bipolare Strategie (top down und bottom up) in Kombination mit «multiple nucleus» Strategie

Fördernde Faktoren, die Vertrauen schaffen

▪ Partizipation – ja, aber geleitet!

▪ Kommunikation – so viel wie möglich!

▪ Sichtbarkeit – Evaluation ein Gesicht geben!

▪ Dienstleistungsorientierung und Fachkompetenz – Unterstützen Sie die Hochschulmitglieder!

Werte – Einstellungen/Überzeugungen – Beziehungen/Koalitionen – fachspezifisch, individuell, kollektiv-Verhalten

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 10

Page 11: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Implementierungsstrategien (Schönwald 2007)

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 11

Page 12: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Innovationstypen (Rogers 2003)

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 12

Page 13: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Widerstände und Interventionsformen (Schönwald 2007)

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 13

Page 14: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Discussion & réflexionQuelles astuces existent pour la communication et la participation dans le contexte de l’évaluation?

Diskussion & ReflexionWelche Tipps gibt es für die Kommunikation und die Partizipation im Kontext der Evaluation?

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 14

Page 15: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Gruppenarbeit – travail de groupe

Kommunikation

▪ Erstellen Sie eine Tabelle mit Kommunikationsanlässen und möglichst konkreten Beispielen aus Ihrem Kontext, wie Sie regelmässig über die Wirkungen und den Nutzen von Evaluation berichten können.

▪ Denken Sie dabei an konkrete interne Evaluationsinstrumente (Evaluation der Lehre, Evaluation der Forschung, Evaluation von Einheiten und Abläufen, DL…) und auch externe Instrumente (Akkreditierung, Audit, Peer Review…)

▪ Berücksichtigen Sie dabei verschiedene Bedürfnisse!

Zeit: 30’

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 15

Page 16: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Gruppenarbeit – travail de groupe

Partizipation

▪ Erstellen Sie eine Tabelle mit Partizipationsanlässen und möglichst konkreten Beispielen aus Ihrem Kontext, wie Sie mit Partizipation die Wirkungen und den Nutzen von Evaluation optimieren können.

▪ Denken Sie dabei an konkrete interne Evaluationsinstrumente (Evaluation der Lehre, Evaluation der Forschung, Evaluation von Einheiten und Abläufen…) und auch externe Ansprüche (Akkreditierung, Audit, Peer Review…)

▪ Berücksichtigen Sie dabei verschiedene Bedürfnisse!

Zeit: 30’

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 16

Page 17: Aufbau einer Evaluationskultur an Hochschulen · 2018-09-11 · Aufbau einer Evaluationskultur an Hochschulen Mise sur pied d’une culture d’évaluation dans les Hautes Écoles

Bibliografische Angaben & Kontakt

Dr. Désirée Donzallaz

Verantwortliche Learning & Development

ProCert

Marktgasse 65

3011 Bern

www.procert.ch

[email protected]

[email protected]

++41 79 503 66 52

▪ Donzallaz, D. (2014). Vom «Schwachsinn» zur

Qualitätskultur. Tipps für den Umgang mit Problemen beim Aufbau von QM-Systemen in Universitäten. In: S. Nickel (Hrsg.), Implementierung von Qualitätsmanagementsystemen. Erfahrungen aus der Hochschulpraxis. (S. 27-38) Gütersloh: CHE. http://www.che.de/downloads/CHE_AP_163_Qualitaetsmanagementsysteme_2014.pdf

▪ Loukkola, T. & Zhangh, T. (2010). Examining Quality Culture: Part 1 – Quality Assurance Processes in Higher Education Institutions. EUA. http://aic.lv/bolona/2010/Reports/Examining%20Quality%20Culture%20Part%201.pdf

▪ Rogers, E.M. (2003). Diffusion of innovations (5th ed.). New York: Free Press.

▪ Schönwald, I. (2007). Change Management in Hochschulen. Die Gestaltung soziokultureller Veränderungsprozesse zur Integration von E-Learning in die Hochschullehre. Lohmar-Köln: Josef Eul.

Désirée Donzallaz I Kongress 2018 I argev SEVAL I Evaluationskulturen I Workshop 3 17