Bearbeiten von „KIF420:Evaluierung Optimal/Resolution“

Hallo,

Der AK Evaluierung Optima hat sich drei mal mehrere Stunden getroffen und über optimale Abläufe zu Evaluierungen diskutiert. Die Ergebnisse sind in ein Grundsatzpapier geflossen. Das Grundsatzpapier soll wesentliche Fragen bei der Durchführung von Evaluierungen beantworten, aber auch die Möglichkeit bieten von zukünftigen KIF oder anderen BuFaTa aufgegriffen und weiterentwickelt zu werden. Evaluierung begegnet und mittlerweile flächendecken, aus Sicht des AK ist es nicht sinnvoll dafür das Rad immer wieder neu zu erfinden. Runder wird es dadurch nicht.

Der AK hat eine ausführliche Mitschrift der Diskussion im Wiki mit jeweils Nennung von Argumenten wieso sich für eine bestimmte Variante entschieden wurde. Bitte berücksichtigt vor Fragen oder Änderungswünschen.

Die 42,0. Konferenz der Informatikfachschaften fordert die Umsetzung des folgenden Grundsatzpapiers zu Evaluationen.


'''Defintion''': Eine Evaluierung ist ein Instrument zur Qualitätssicherung durch sach- und fachgerechte Bewertung. Das Ziel einer Evaluierung ist es zu einem bestimmten Zeitpunkt den Erfüllungsgrad von Zielen zu überprüfen.

Es gibt unterschiedliche Arten von Evaluierungen im Hochschulbereich welche Studierende betreffen: Lehrveranstaltungsevaluierung, Studieneinstiegsevaluierung, Absolventenevaluierung, Studiengangserfolgsevaluierung, Fachschaftsevaluierung, "Produktevaluierungen" (Campus Management Systeme, Software, Technik), Klausur/Übungsaufgabenevaluierung.

Anstatt von Evaluierungen können auch andere Instrumente benutzt werden. Z.B. kann auch ein dokumentiertes Gespräch (Datum, Anwesende nach Funktion, festgestellte Punkte, Maßnahmen, Wirkung) den Erfüllungsgrad von Zielen und daran anschließende Maßnahmen feststellen.

'''Lehrveranstaltungsevaluierungen'''
Lehrveranstaltungsevaluierungen sind an vielen Stellen ein zentrales Element der Qualitätssicherung. Nach mehreren Jahrzehnten Erfahrung mit diesem Instrument haben sich einige Vorgehensweise als Vorteilhaft erwiesen.

'''Anonymität''': Evaluierungen sind so zu gestalten, dass keine Zuordnung der Bögen und Ergebnisse zu den Evaluierenden möglich ist. Dabei ist auch die Gruppengröße und deren Zusammensetzung zu berücksichtigen.

'''Zeitpunkt''': Zu 2/3 des Semesters, sodass die Lehrenden die Ergebnisse mit den Studierenden besprechen können. Die Hochschule sollte in Projekten auch mit anderen Zeitpunkten experimentieren. Für spezielle Veranstaltungen können verschiedene Zeitpunkte notwendig sein. Die Möglichkeit eines ständigen Rücklaufkanals ist zu überprüfen.

'''Häufigkeit''': Jede Hochschule muss die Häufigkeit in Rücksprache mit den Studierenden anhand ihrer Qualitätskultur selbst festlegen. Möglichst alle Veranstaltungen jedes Semester wird als vorteilhaft gesehen, insbesondere für die ersten Semester. Eine Drittelevaluierung ist auch ein gangbarer Weg. Dabei sollte ein Plan erstellt werden sodass für jede etablierte Veranstaltung innerhalb von 3 Semestern Abstand eine Evaluierung vorliegt. Bei neuen Veranstaltungen, neuen Lehrenden, Änderungen oder auf gezielt bei Wunsch (der Lehrenden oder der Studierenden) ist häufiger zu evaluieren.

'''Allgemeinheit der Bögen'''': Es sind spezielle Bögen zu erstellen und gezielt zu nutzen (Übung, Vorlesung, Labor, …). Ein bestimmter Basisteil kann gleich sein (z.B. überall Freitextfeld).

'''Umfang''': Maximal eine Din A4 Seite bei sinnvoller Schrift und Freitext.
Besonderheit digital: Vertiefungsblöcke bei Bedarf. Z.B. bei Übung nur gezieltere Fragen anzeigen wenn eine Eingangsfrage negativ beantwortet wurde.

'''Form''': Sowohl Papierform als auch die digitale Form haben ihre Stärken. Die Besonderheiten der verschiedenen Formen sind zu kommunizieren. Bei Papier ist zu erwarten dass alle ausgeteilten Bögen ausgefüllt werden. Bei digital ist die Rücklaufquote geringer (Mögliche Reaktion: Digital, aber zur Vorlesung mit Laptops oder Labor mit Rechnern). Bei digital sind die Rückmeldungen negativer, da eher diejenigen Studierenden evaluieren, bei denen als Motivation Gründe vorliegen die sie weitergeben wollen. Die Form ist so zu wählen, sodass möglichst viele erreicht werden (im Sinne einer Evaluierung, d.h. den Zeitraum für Rückmeldungen zu dehnen ist nicht hilfreich, da dies die Rahmenedingungen ändern kann).

'''Freitext''': Freitextfelder zur Rückmeldung sind generell mitaufzunehmen.

'''Verwendung''': Ergebnisse sind hochschulöffentlich in digitaler Form bereitzustellen. Sie enthalten die Ergebnisse der Veranstaltung (Für alle Items wenn möglich Mittelwert, Standard-Abweichung, Anzahl). Sie enthalten die Namen der jeweils Lehrenden und die Kommentare der Freitextfelder. Die Freitextfelder sind redaktionell aufzubereiten vor der Weitergabe an die Lehrenden (Handschrift zu Text, Ehrverletzende Kommentare entfernen, Mehrfachnennungen mit Angabe der Anzahl zusammenfassen). Den Lehrenden ist vor der Veröffentlichung die Möglichkeit zu geben das zu veröffentlichende Dokument mit einer Stellungnahme zu ergänzen.

'''Entscheidung über Formale und Spielräume'''':  Basis für Evaluierungen ist eine Hochschulweite Evaluationsordnung/Satzung. Basis für Festlegung von offenen Punkten, Spielräume und zu treffende Entscheidungen (Wann wird die Evaluation genau durchgeführt, welche Veranstaltungen genau, wie lange Frist für Stellungnahme, etc) ist ein Fachbereich/Fakultätsweites Arbeitsgremium welches paritätisch besetzt ist. Diese sollten sich auf in bestimmten Abständen hochschlweit über die Arbeit austauschen. Je nach Größe der Hochschule ist auch ein hochschulweites Gremium zielführend.

'''Verantwortung zur Durchführung der Evaluierung'''': Die Verantwortung zur Durchführung (Verteilung Bögen, Erfassung Ergebnisse) der Evaluierung liegt bei der Hochschule. Insbesondere werden die Kosten von der Hochschule getragen. Wenn die Hochschule andere beauftragt, sind diese finanziell für die Arbeit zu entschädigen.

'''Interpretation der Ergebnisse und Maßnahmen''': Mit den Evaluationsergebnissen beschäftigt sich ein paritätisch besetztes Arbeitsgremium.
Optimalerweise wird den Ergebnissen eine Kurzinterpretation durch Fachpersonal beigefügt.

'''Studieneinstiegsevaluierungen''': Keine Besonderheiten aus studentischer Sicht.
Absolventenevaluierung: Ergebnisse von Absolvenbefragungen sind hochschulöffentlich. Mit den Ergebnissen beschäftigt sich ein paritätisch besetztes Arbeitsgremium.
Studiengangserfolgsevaluierungen:  Bei Notwendigkeit sind punktuell Studiengangserfolgsevaluierungen durchzuführen.

'''Produkevaluierungen''': Bei Notwendigkeit sind punktuell Produkevalierungen durchzuführen
Klausur/Übungsaufgabenevaluierung: Für die Evaluierungen von Klausuren und Übungsaufgaben ist eine Experimentierklausel zu schaffen.

'''Fachschaftsevaluierungen''': Die Etablierung von Evaluierungen bei studentischen Vertretungen ist voranzutreiben. Auch wir haben den Anspruch qualitativ gute Arbeit zu leisten. Ob wir das machen wissen wir erst wenn wir die Erreichung unserer Ziele prüfen. Die Ziele der studentischen Vertretung finden sich typischerweise in den Landeshochschulgesetzen, können aber auch lokal definiert werden. Z.B. hat auch eine Orientierungs-Woche diverse Ziele deren Erfüllung sich am Ende durch eine Evaluierung festhalten lassen.