methoden der psychologie entwicklung eines online-evaluationssystems 09. november 2005

Methoden derPsychologie

Entwicklung einesOnline-Evaluationssystems

09. November 2005


Das Seminar im Wintersemester gliedert sich in fünf Blöcke

• Block 1: Inhaltliches zur Lehrevaluation

• Block 2: Grundzüge und Anwendung der klassischen Testtheorie (KTT)

• Block 3: Befragung zu Kriterien guter Lehre, Auswertung der Daten, Itemgenerierung

• Block 4: Ein wenig Statistik

• Block 5: Testkonstruktion, Probeerhebung und Analyse der gesammelten Daten

Überblick


Das Seminar im Wintersemester gliedert sich in fünf Blöcke

• Block 2: Grundzüge und Anwendung der klassischen Testtheorie (KTT)

• Block 3: Befragung zu Kriterien guter Lehre, Auswertung der Daten, Itemgenerierung

• Block 4: Ein wenig Statistik

• Block 5: Testkonstruktion, Probeerhebung und Analyse der gesammelten Daten

Überblick

• Block 1: Inhaltliches zur Lehrevaluation

• Was sind Kriterien guter Lehre

• Welche Urteilsverzerrungen und Biasvariablen gibt es bei der Lehrevaluation

• Erstellung einer Kurzbefragung zu Kriterien guter Lehre und Biasvariablen


Heute: Was sind Merkmale guter Lehre?

• Kurze Einführung in Lehrevaluation (Begriffe, Geschichte)

• Welche Merkmale werden in der Literatur diskutiert?

• Selbst überlegen und diskutieren

Überblick

Methoden derPsychologieHistorischer Überblick

1920 1968 1990 1998

erste publizierte studentische Evaluationsfragebögen: Herman H. Remmers (1927): Purdue Rating Scale for Instructors

Studentenbewegung: Studenten forderten bessere Lehre


Lehrevaluation an 97% der US-amerikanischen Universitäten (Queis 1991)

Spiegel 1989:„Welche Uni ist die beste?“ Erstes Uni-Ranking

1920 1968 1990 1998

Historischer Überblick


Hochschulrahmengesetz: §6: „Die Arbeit der Hochschulen in Forschung und Lehre...soll regelmäßig bewertet werden. Studierende sind bei der Bewertung der Qualität der Lehre zu beteiligen.[..]“

Internationale Vergleichsstudie Letzter Platz für Deutschland in der Lehrevaluation

1920 1968 1990 1998

Historischer Überblick


• Ausbildungsinhalte • Bibliotheksausstattung• Studienzeiten• Absolventenchancen• Lehrveranstaltungsevaluati

onLehrveranstaltungsevaluation

Veranstaltungs- und dozentenübergreifend

Evaluation von Vorlesungen, Seminaren und anderen Lehrveranstaltungen

Lehrevaluation

Begriffe


• Einzelnen Dozenten über Feedback zu helfen, ihre Lehre zu verbessern

• Die Kommunikation zwischen Lehrenden und Studierenden über die Lehre zu fördern

• Den Studierenden als Informationsgrundlage bei der Kurswahl oder Universitätswahl zu dienen

• Als ein Qualifikationsmaß bei Bleibe-, Gehalts- und Berufungsverhandlungen neben Forschungsleistungen herangezogen zu werden

Lehrevaluation werden von Hochschulen eingesetzt, um…

Funktionen


Stellt Euch bitte einen (fiktiven) guten Dozenten / eine gute Dozentin vor. Durch welche Charakteristika zeichnet sich diese Person und ihr Lehrstil aus?

Stellt Euch bitte eine (fiktive) gute Veranstaltung vor. Durch welche Aspekte zeichnet sich eine solche Veranstaltung abgesehen von den in Frage 1 genannten aus?

Bitte bildet aus Euren Antworten maximal 10 Kategorien und nummeriert diese nach ihrer Wichtigkeit (1=„am wichtigsten“, 2=„am zweitwichtigsten“ etc.)

Ihr habt 20 Minuten Zeit!

Merkmale guter Lehre


Präsentation der Ergebnisse

Merkmale guter Lehre


Merkmale guter Dozenten (Rindermann, 1999b)

Interaktion und MotivierungPersönlichkeitsfaktoren

Didaktische KompetenzenFachkompetenz

Engagement

Sprache

Themenbehandlung

Struktur

Material und Medien

Anforderungen

Interaktion und MotivierungFachkompetenz

Persönlichkeitsfaktoren

Didaktische KompetenzenEngagement

Themenbehandlung

Sprache

Struktur

Material und Medien

Anforderungen

Studierende Dozenten

Anzahl der Nennungen:






Engagement

Sprache

Themenbehandlung

Struktur

Material und Medien

Anforderungen

1

10

6

3

9 Interaktion und MotivierungFachkompetenz


Didaktische KompetenzenEngagement

Themenbehandlung

Sprache

Struktur

Material und Medien

Anforderungen

1

9

3

7

5


Themenbehandlung

Struktur

Anforderungen

Sprache


Engagement

Material und Medien


Themenbehandlung

Sprache

Fachkompetenz

Didaktische KompetenzenInteraktion und MotivierungEngagement

Anforderungen

Material und Medien


Struktur



Relevanz


Themenbehandlung

Struktur

Anforderungen

Sprache


Engagement

Material und Medien


Themenbehandlung

Sprache

Fachkompetenz

Didaktische KompetenzenInteraktion und MotivierungEngagement

Anforderungen

Material und Medien


Struktur


Relevanz


Methoden derPsychologieMerkmale guter Veranstaltungen (Rindermann,

1999b)

Didaktische KompetenzenThemenbehandlung

Material und Medien

Interaktion mit Doz. / unter Studierenden

Äußere räumliche Gegebenheiten

Struktur

Student. Fähigkeiten und Beiträge

Äußere zeitliche Gegebenheiten

Anforderungen


Material und Medien



Struktur



Anforderungen



Didaktische Kompetenzen

Themenbehandlung

Material und Medien



Struktur



Anforderungen


Material und Medien



Struktur



Anforderungen

Merkmale guter Veranstaltungen (Rindermann, 1999b)



Beobachtung und Beschreibung realer Veranstaltungen

Verständlichkeit

Lebendigkeit

Struktur

Stoffmenge

Tempo

Mediale Unterstützung

Verhalten der Studierenden

Häufigkeit von Beispielen

Fachliche Qualifikation

Persönlichkeit des Dozenten

Didaktik und Organisation

Inhalt des Kurses

Organisatorische Rahmenbedingungen

Henninger & Balk, 1997 Spiel & Gössler, 1998

Methoden derPsychologieKonzeption eines

Evaluationsfragebogens

• Synkretistischer Ansatz– Orientierung an bereits existierenden Instrumenten

• Befragungs-Ansatz– Befragung Studierender und /oder Lehrender als

Experten nach Kennzeichen des „idealen Dozenten“, der „idealen Veranstaltung“

• Theoretischer Ansatz– Ableitung aus hochschuldidaktischen Theorien / Theorien

über den Lehr- bzw. Lernprozess


Auswertung von Lehrevaluationsbögen (Abrami & d‘Appolina 1990)

Synkretistischer Ansatz

Klarheit und Verständlichkeit

Generelle Dozentenbeurteilung

Allgemeinbeurteilung des Kurses

Ermutigung zur Diskussion

ArbeitsbelastungVorbereitung/Organisation des Dozenten

Stimulation von Interesse

KlimaHilfsbereitschaft

Feedback

Classroom managementKlare Kursziele

Notenfairness

Methoden derPsychologieKonzeption eines

Evaluationsfragebogens

• Synkretistischer Ansatz– Orientierung an bereits existierenden Instrumenten

• Befragungs-Ansatz– Befragung Studierender und /oder Lehrender als

Experten nach Kennzeichen des „idealen Dozenten“, der „idealen Veranstaltung“

• Theoretischer Ansatz– Ableitung aus hochschuldidaktischen Theorien / Theorien

über den Lehr- bzw. Lernprozess

Methoden derPsychologieTheoretischer Ansatz

Westermann et al 1993, 1996:

• Konzept der Arbeitszufriedenheit

• Person-Environment-Fit-Theorie– Zufriedenheit ist abhängig von der subjektiven Passung

zwischen Bedürfnissen, Einstellungen, Fähigkeiten und den Merkmalen der studienbezogenen Umwelt


Zufriedenheit der Studierenden

=Gute Lehre

?

methoden der psychologie entwicklung eines online-evaluationssystems 09. november 2005

Documents