|
|||||||||||
Nur auf weissem Papier ausdrucken
Das gilt für sämtliche Formulare => Gefahr fehlerhafter Daten bei Verwendung von Umweltpapier.
Status 5.1.2007
Inhaltsverzeichnis
1) Allgemeine Informationen »»
a) Zweck dieses Handbuchs »»
b) Weisungssammlung des Rektorats (WSR) »»
c) Für Auskünfte wenden Sie sich bitte an ... »»
2) Operative Durchführung »»
a) Bestimmung der zu beurteilenden Dept./Studiengänge und Kontaktpersonen »»
b) Zuständigkeitsbereich der Dept./Studiengänge »»
c) Zuständigkeitsbereich des LET »»
3) Organisatorische Abläufe und Termine »»
a) Grafische Gesamtübersicht »»
b) Zeitpunkt für die Unterrichtsbeurteilung »»
c) Chronologische Übersicht »»
4) Auftretende Fälle bei der Datenerhebung »»
a) Lehrveranstaltung (LV) mit einem/einer DozentIn »»
b) LV mit mehreren Dozierenden »»
c) Beurteilung von Assistierenden (gesamthaft) »»
d) Beurteilung von Assistierenden (personenbezogen) »»
e) Service-Lehrveranstaltungen »»
f) Zu häufige Beurteilungen »»
5) Ausfüllen und Verarbeitung der der Fragebogen »»
a) Wie sind die ausgefüllten Antwortformulare zu kennzeichen? »»
b) Wie sollen Antwortblätter dem LET zugestellt werden »»
c) Zustellung der Auswertungen »»
d) Beispiel für die Kennzeichnung von eingelesenen Daten und Auswertungen »»
e) Archivierung der Daten »»
6) Beschreibung der Auswertungen »»
a) Einzelauswertung »»
a1) Alle-Set »»
a2) Subset »»
b) Mittelwertsvergleich »»
c) Übersicht der Mittelwerte (kleine Version) »»
d) Übersicht der Mittelwerte (grosse Version) »»
e) Daten eigener Studierender in fremden Studiengängen »»
f) Spezielle Auswertungen »»
g) Schutz der Anonymität von Studierenden »»
h) Beurteilung von LVs mit total weniger als 5 Studierenden »»
7) Beschreibung des Fragebogens »»
a) Allgemein »»
b) Gliederung des Fragebogens »»
b1) Angaben zur Lehrveranstaltung »»
b2) Persönliche Fragen an die Studierenden »»
b3) Fragen des Rektors / der Rektorin »»
b4) Fragen des Studiengangs »»
b5) Fragen des/der Dozierenden / verschiedene Fragen »»
b6) Zusätzlicher Kommentar »»
b7) Freiwillige Beurteilungen »»
8) Technisches Verfahren »»
Das LET richtet sich mit diesem Handbuch an die Stellen der Departemente, die für die konzeptionelle und operative Durchführung der Unterrichtsbeurteilung durch die Studierenden an der ETH Zürich zuständig sind.
Es bietet u.a. Informationen ...
Die Durchführung der Unterrichtsevaluation erfolgt gemäss der Weisung "Unterrichtsevaluation durch die Studierenden" des Rektors vom 1. Oktober 2003.
Es sind die Weisungen über den Datenschutz aus der
Weisungssammlung des Rektorats (WSR) zu beachten.
Bei konzeptionellen Fragen (inhaltliche Beratung der Unterrichtskommissionen und von Dozierenden): Dr. Leonard Lutz
bei operativen Fragen (Datenverarbeitung): Ludwig Niederer
Seit dem WS03/04 steht ein neues System für die Erstellung der Fragebogen und für deren Erfassung und Auswertung im Einsatz.
Die zu beurteilenden Dept./Studiengänge werden durch den/die
Prorektor/in für das Bachelor/Master-Studium im vorhergehenden Semester
bestimmt und informiert.
Turnus der Beurteilungen »» Turnusliste
Der Dept.-Vorsteher/die Dept.-Vorsteherin nimmt mit der am LET für die Unterrichtsbeurteilung zuständigen Person zwecks der Organisation der Unterrichtsbeurteilung Kontakt auf. Er/Sie bestimmt eine sog. Kontaktperson. Diese ist zusammen mit dem LET für die operative Durchführung der Unterrichtsbeurteilung zuständig.
Die Dept./Studiengänge ...
Das LET ...
Flussdiagramm »»
Das Ausfüllen der Antwortformulare der Unterrichtsbeurteilung durch die Studierenden findet in der Regel in der dritt- und viertletzten Woche vor dem Semesterende statt. Einerseits soll möglichst viel des durchgeführten Unterrichts der Lehrveranstaltungen in die Befragungen eingehen, andererseits müssen die Dozierenden die Möglichkeit haben, ihre Resultate mit den Studierenden noch während des laufenden Semesters zu besprechen. Die Zeitdauer, welche für die Verarbeitung der zeitkritischen Einzelauswertungen zu kalkulieren ist, ist unter 3c) beschrieben.
| Termin | Aktion | |
| Bestimmung der zu beurteilenden Dept./Studiengänge und der Kontaktpersonen | ||
| Auswertung allfälliger vorgezogener Beurteilungen | ||
Informationsschreiben des DiZ zuhanden der Departemente mit folgenden Punkten:
|
||
| Unterrichtsbeurteilung: Woche 4 und 3 vor Semesterende |
Die beiden Wochen, während derer die Fragebogen ausgefüllt werden sollen, sind
angegeben. »» Es können auch ausserhalb dieses Zeitraumes
Unterrichtsbeurteilungen durchgeführt werden. Wenn möglich sollen sie
möglichst frühzeitig angesetzt werden, damit für die Auswertung der
Formulare und die Besprechung der Resultate mit den
Studierenden den Dozierenden im laufenden Semester genügend Zeit bleibt. Die ausgefüllten Antwortformulare sind dem LET möglichst rasch zuzustellen. Bei grossem Aufkommen ausgefüllter Fragebogen können diese dem LET auch von verschiedenen Lehrveranstaltungen, gut separiert, zusammen zugestellt werden. |
|
|
Die
Verarbeitungszeit für das Erstellen der Einzelauswertungen
beträgt typ. 2-3 Arbeitstage. Für den
Postversand der ausgefüllten Formulare ans LET sind zusätzlich 2
Arbeitstage einzukalkulieren. Die Zustellung der Resultate erfolgt an
die Kontaktpersonen per E-Mail-Anhang. |
||
| Semesterende |
Sind die Einzelauswertungen sämtlicher Lehrveranstaltungen
(LV) eines Studiengangs erstellt, werden nach Absprache mit den
Kontaktpersonen die folgenden Auswertungen erstellt (ausstehende
Einzelauswertungen anderer Dept. gehen vor):
|
Unter
"Angaben zur Lehrveranstaltung" ist bei der LV-ID
(Lehrveranstaltungs-Identifikation) des Formulars die Kodierung oder
die Nummer der Lehrveranstaltung gemäss Vorlesungsverzeichnis
einzutragen. Für die Verarbeitung der Formulare ist nur die Angabe auf
dem ersten ausgefüllten Fragebogen massgebend und muss dort einwandfrei
sein. Trotzdem wird aus Sicherheitsgründen empfohlen, die LV-ID durch
die Studierenden auf jedem, d.h. ihrem eigenen, Formular ausfüllen zu
lassen.
Für
die einwandfreie Verarbeitung von Formularen mit verschiedenen
Dozierenden muss eine unterschiedliche Kodierung im Feld "LV-ID"
verwendet oder das Feld "Optional" mit den Initialen der Dozierenden
oder einer sonstigen Kennzeichnung versehen werden. In beiden Fällen
müssen die Formulare aber manuell separiert und dem LET getrennt
zugestellt werden. So werden bereits beim Einscannen der Formulare
allfällige Kommentare mit der unterschiedlichen "LV-ID" oder der
Ergänzung gemäss dem Feld "Optional" gekennzeichnet und können den
verschiedenen Dozierenden zugeordnet werden. Wird die Beurteilung von
verschiedenen Dozierenden zur gleichen Zeit und am gleichen Ort gemacht,
muss jede/r Studierende sein/ihr eigenes Formular mit einer
entsprechenden "LV-ID" oder Kennzeichnung "Optional" versehen.
Unter "Angaben zur Lehrveranstaltung" wird die
Verwendung der Felder A-J nicht mehr empfohlen. Da diese erst bei der
Auswertung der eingescannten Daten zur Verfügung stehen und zur
automatischen Trennung der Daten nach Dozierenden verwendet werden
können, sind aber allfällige Angaben im Bereich " Zusätzlicher
Kommentar" dann nicht nach Dozierenden unterscheidbar, da diese beim
Einscannen der Formulare gekennzeichnet werden müssen.
Für eine Gesamtbeurteilung aller Assistierenden einer Lehrveranstaltung
zusammen können die Fragen unter "Fragen des
Studiengangs" gestellt werden.
Wird eine personenbezogene Beurteilung der Assistierenden gewünscht, empfehlen wir zusätzlich zum Fragebogen für die Beurteilung der Lehrveranstaltung die Verwendung eines separaten Formulars. Die Verwendung der Felder A-J zur Unterscheidung von Assistierenden ist aus verschiedenen Gründen nicht empfehlenswert.
Muster für einen Fragebogen zur Beurteilung von Assistierenden.
|
Hauptregel:
Es wird jede Lehrveranstaltung, unabhängig von der Nummer, die im
Semesterverzeichnis eines Studiengangs aufgeführt ist, beurteilt. In der Weisung Unterrichtsbeurteilung durch die Studierenden des Rektors/der Rektorin, Punkt 6, heisst es diesbezüglich: Ist ein Departement an der Reihe, so wird jede Lehrveranstaltung evaluiert. Über Ausnahmen entscheidet auf Antrag des Departementsvorstehers/der Departementsvorsteherin der Rektor/die Rektorin. |
| Bei den sogenannten Service-Lehrveranstaltungen können sich bei der Evaluation Probleme betreffend der Zuständigkeit für die Durchführung der Beurteilung ergeben. Wir sprechen von einer Service-LV, wenn eine Lehrkraft, z.B. aus D-MATH (service-leistend. Dept./Studiengang) für einen Studiengang aus einem anderen Departement, z.B. D-UMNW (service-empfangend. Dept./Studiengang) eine Lehrveranstaltung durchführt. |
|
Für alle Service-LV (vgl. die nachfolgenden Beispiele) gilt: Die Evaluation einer Service-LV wird von einem service-empfangenden Studiengang immer mit seinem Fragekatalog durchgeführt, normalerweise von dem, dessen Nummer sie trägt (Fall 1 und 2). Ist diese Zuordnung nicht möglich (Fall 3) oder nicht eindeutig (Fall 4), haben sich die Studiengänge untereinander abzusprechen, damit die Beurteilung nur einmal erfolgt. Der Studiengang, der die Beurteilung durchführt, stellt den anderen Studiengängen die Auswertungen betreffend ihrer Studierenden (Subsets) unaufgefordert zu. |
|
Fall 1: LV trägt Nummer von UMNW: service-leistend: MATH - service-empfangend: UMNW, AGRL, ERDW Fall 2: LV trägt Nummer von INFK: service-leistend: INFK - service-empfangend: INFK, ELEK, BEPR, RW Fall 3: LV trägt Nummer von MATH: service-leistend: MATH - service-empfangend: INFK, ELEK Fall 4: LV trägt Nummer von BAUG, UMNW: service-leistend: BAUG - service-empfangend: BAUG, UMNW |
Es
kann vorkommen, dass eine Lehrveranstaltung in aufeinanderfolgenden
Semestern für verschiedene Dept./Studiengänge immer wieder zur Beurteilung (z.B. bei Service-Veranstaltungen oder bei
Veranstaltungen D-GESS) vorgesehen wird. Hier sei auf die Punkte 4, 5 und 12a der Weisung
Unterrichtsbeurteilung durch die Studierenden des Rektors verwiesen. Wird aus diesem Grund auf die Beurteilung
einer Lehrveranstaltung verzichtet, sind von den Dept./Studiengängen,
die eine Evaluation dieser LV durchgeführt haben, den Dept./Studiengängen, die
jetzt auf eine erneute Beurteilung verzichten, die entsprechenden
Auswertungen zuzustellen.
In der Regel wird eine Lehrveranstaltung des Bachelor-Studiums alle drei Semester einmal evaluiert.
Für die Verarbeitung der Formulare ist nur die Angabe auf dem ersten ausgefüllten Fragebogen massgebend und muss dort einwandfrei sein. Trotzdem wird aus Sicherheitsgründen empfohlen, die LV-ID durch die Studierenden auf jedem, d.h. ihrem eigenen, Formular ausfüllen zu lassen.
Achtung: Ohne die Angabe der LV-ID kann eine Auswertung nicht erstellt werden.
Dem LET sind nur die ausgefüllten Fragebogen zuzustellen. Leere Antwortformulare, zusätzliche Schreiben und Notizen, Büroklammern etc. sind vor der Zustellung ans LET zu entfernen. Die Formulare müssen nicht gleich ausgerichtet werden.
Die ausgefüllten Fragebogen können dem Let pro Lehrveranstaltung (LV) oder in einer Sendung mit mehreren LV zusammen zugestellt werden. In jedem Falle müssen sie einwandfrei gekennzeichnet (siehe 5a) und die einzelnen LV einwandfrei gegeneinander separiert sein.
Achtung:
Alle ausgefüllten Formulare einer Lehrveranstaltung sind dem let
zusammen in derselben Sendung zur Auswertung zuzustellen. Alles andere
verursacht einen grossen administrativen Aufwand.
Da die Verarbeitung maschinell erfolgt, dürfen die Formulare nicht gefaltet und die Kanten nicht beschädigt sein.
Das let stellt die Auswertungen den Kontaktstellen der Dept./Studiengänge per E-Mail zu. Diese leiten die Auswertungen (Einzelauswertung, Mittelwertvergleich, Kommentare) den Dozierenden, dem Dept.-Vorsteher/der Dept.-Vorsteherin, der UK und dem Rektor/der Rektorin zu.
Die ausgefüllten Antwortformulare der einzelnen Lehrveranstaltungen (LV) bleiben im LET mindestens 3 Monate über das Semesterende hinaus archiviert, so dass bei allfälligen Unstimmigkeiten der Datenfluss rekonstruiert werden könnte. Nach Ablauf dieser Frist werden die Formulare vernichtet.
Sämtliche elektronischen Daten werden semesterweise archiviert. Die Schlüssel mit den Kodierungen von Lehrveranstaltungen befinden sich nur bei den Kontaktstellen der Dept./Studiengänge.
Diese Auswertungen müssen noch im laufenden Semester von den Dozierenden mit den Studierenden besprochen werden (gemäss Punkt 10 der Weisung Unterrichtsbeurteilung durch die Studierenden).
Diese Auswertung enthält für alle Fragen:
Mittelwert und Standardabweichung der gültigen Antworten, Anzahl der
gültigen und ungültigen Antworten (Zahl- und Prozentwert), Grafik mit
Verteilung der gültigen Antworten, bei Rektors- und Studiengangsfragen mit Fragetext (Beispiel INFK »»).
Enthält die Daten sämtlicher auswertbaren Antwortformulare einer Lehrveranstaltung (Beispiel INFK »»)
Bei Studierendengruppen (gemäss Frage "Immatrikuliert am Studiengang") wird automatisch ein Subset erstellt, wenn die Anzahl der Studierenden dieser Gruppe >=5 ist oder die Anzahl aller übrigen Formulare gleich oder grösser der Quadratwurzel aus dem Total aller Formulare dieser Lehrveranstaltung ist.
Wichtig:
Ohne
Beantwortung der Frage "Immatrikuliert am Studiengang" kann ein
Fragebogen keiner Studierendengruppe zugeordnet werden. Er wird nur in
der "Alle"-Auswertung verarbeitet und erlaubt somit ev. keinen
Rückschluss auf einen speziellen Studiengang.
Der Mittelwertvergleich eines Dept./Studiengangs wird am Semesterende nach terminlicher Absprache mit den entsprechenden Kontaktstellen erstellt.
Diese Auswertung enthält:
Für den gesamten Studiengang: Mittelwerte der Rektors- und Studiengangs-Fragen
Für die einzelne Lehrveranstaltung: Mittelwerte und Standardabweichung der Rektors- und Studiengangs-Fragen
Seit dem Wintersemester 00/01 werden für den Mittelwertsvergleich nur noch
die Daten der Alle-Auswertungen verwendet, d.h. keine allfälligen
Subsets mehr.
Diese Auswertung ist als Schnellübersicht für die Verwendung innerhalb der Departemente (Datenschutzbestimmungen) vorgesehen und enthält:
Mittelwerte der Rektors- und Studiengangsfragen, Anzahl ausgewerteter
Formulare über den ganzen Studiengang und pro Lehrveranstaltung, LV-ID
Diese Auswertung ist für eine Publikation im Intranet (Datenschutzbestimmungen) geeignet und enthält:
Mittelwerte und Standardabweichung der Rektors- und Studiengangsfragen,
Anzahl Formulare über den ganzen Studiengang und pro Lehrveranstaltung,
Zahl der gültigen und ungültigen Antworten für jede Frage, Häufigkeiten
der einzelnen Skalenwerte pro Frage, LV-ID
Das Excel-Dokument kann als HTML- oder GIF-Datei abspeichert werden.
Das Didaktikzentrum gibt nur Daten an die gemäss Fragenkatalog zuständigen Kontaktstellen ab. Es ist Sache der Dept./Studiengänge gewünschte Informationen direkt bei den Kontaktstellen anderer Dept./Studiengänge einzuholen.
Nebst den standardisierten Auswertungen werden auch nach speziellen Kriterien Auswertungen durch das LET angefertigt. Diese können aber normalerweise erst nach Abschluss der ordentlichen Unterrichtsbeurteilung erstellt werden. Ferner besteht für die Kontaktstellen die Möglichkeit, die Dateien mit den eingescannten Daten oder Metadaten zu erhalten (5d).
Aus Gründen des Schutzes der Anonymität von Studierenden werden keine Subsets mit weniger als 5 Formularen erstellt.
Es
wird immer eine Alle-Auswertung erstellt, auch wenn die Gesamtzahl der
bei der Beurteilung teilnehmenden Studierenden kleiner als 5 ist.
Mit dem Formular UB01 und den zugehörigen Auswertungsprogrammen (Excel) können unterschiedliche Bedürfnisse bei Umfragen abgedeckt werden. Reicht die vorhandene physische Gliederung gemäss 7b) aus, kann das Layout (Text und Position der Fragen) in der Regel mit vertretbarem Aufwand für beliebige Projekte angepasst werden.
Die R-, S- und D-Fragen haben eine 5-teilige Likertskala (und Feld "keine Äusserung").
Bei den R- und S-Fragen ist techn. nur eine Antwort auswertbar, bei den D-Fragen können Multiple Choice Antworten ausgewertet werden.
Es gilt folgende Zuordnung, falls nicht anders angegeben:
Die Aussage ... trifft zu:
k.Ä.:keine Äusserung; 1:überhaupt nicht; 2:in geringem Masse; 3:teils, teils; 4:grösstenteils; 5:in höchstem Masse
Die
mit (1) bezeichneten Daten werden vom ersten Blatt eines Batches beim
Einscannen zur Kennzeichnung der Daten manuell übertragen.
Zwei Fragen des Rektors / der Rektorin. Diese werden über sämtliche Dept./Studiengänge gleich gestellt:
Es sind max. 24 Fragen möglich (Beispiele).
Es sind max. 24 Fragen möglich.
Der
Bereich "Zusätzlicher Kommentar" wird, sobald min. 1 Zeile ausgefüllt
wurde, beim Einscannen in eine sog. Multi-TIF-Datei (dateiname.TIF)
abgelegt. Diese kann z.B. mit Acrobat geöffnet werden. Dann kann durch
alle Kommentare durchgescrollt werden.
Freiwillige
Beurteilungen können prinzipiell genau gleich wie die
Unterrichtsbeurteilung mit den vorhandenen Formularen jederzeit
durchgeführt werden. Die Angabe einer LV-ID muss midestens auf dem oberstem
Formular eines Stapels auzuwertender Formulare vorhanden sein. Sie kann
jede alphanumerische Zeichenfolge aufweisen. Diese ist nicht auf die
vorhandenen 11 Felder begrenzt. Um Verwechslungen mit Auswertungen der
Unterrichtsbeurteilung zu vermeiden, deren Auswertungen an die
zuständigen Dept.-Sekretariate versandt werden, ist in der Regel die
Verwendung nur der LE-Bezeichnung nicht optimal (gut ist z.B. LE-Nr. +
Name Doz.). Die LV-ID wird nicht automatisch eingelesen, deshalb kann
über die Felder hinaus geschrieben werden.
Auf einem Begleitzettel sollte die E-Mail-Adresse vermerkt sein, an die die Auswertung zugestellt werden soll.
Weitere Informationen »»
Es wird empfohlen, die Fragebogen nicht selbst auszudrucken sondern von der Reprozentrale zu beziehen. Angeforderte Fragebogen gehen typischerweise innert 24 Stunden in die Post. Werden die Formulare selbst hergestellt, ist der Hinweis unter Bestellinfo zu beachten.
Seit
dem WS03/04 wird ein neues technisches Verfahren angewendet. Die
Fragebogen müssen nicht mehr im Blindfarbendruck (lila) erstellt und
können somit in der Reprozentrale der ETH Zürich
hergestellt werden. Jeder Studiengang hat seine eigenen Formulare mit
integriertem Bereich für handschriftliche Kommentare. Diese werden beim
Einscannen der Formulare automatisch in eine Multi-TIF-Datei
abgelegt, die entsprechend der Bezeichnung der Lehrveranstaltung
gekennzeichnet ist.
Für
die Unterrichtsbeurteilung durch die Studierenden dient das Formular UB01 als Vorlage. Es wird durch das LET gemäss den Angaben der Dept. auf die jeweiligen Bedürfnisse angepasst.
Werden auf dem Formular im Bereich der Eckwinkel oder der 10-stelligen Nummer unten rechts Notizen angebracht, kann es nicht mehr verarbeitet werden.
Wichtiger Hinweis:
Diese Website wird in älteren Versionen von Netscape ohne
graphische Elemente dargestellt. Die Funktionalität der
Website ist aber trotzdem gewährleistet. Wenn Sie diese
Website regelmässig benutzen, empfehlen wir Ihnen, auf
Ihrem Computer einen aktuellen Browser zu installieren. Weitere
Informationen finden Sie auf
folgender
Seite.
Important Note:
The content in this site is accessible to any browser or
Internet device, however, some graphics will display correctly
only in the newer versions of Netscape. To get the most out of
our site we suggest you upgrade to a newer browser.
More
information