Teaching Analysis Poll
Teaching Analysis Poll (TAP) ist ein Verfahren der qualitativen Lehrveranstaltungsevaluation an Hochschulen. Eine Person, die nicht an der Veranstaltung beteiligt ist und meist aus der Hochschuldidaktik oder dem Qualitätsmanagement der Hochschule kommt, moderiert etwa zur Mitte der Vorlesungszeit in Abwesenheit der Lehrperson eine Gruppendiskussion mit den Studierenden. Diese beschreiben, was ihr Lernen in der Veranstaltung fördert, was es behindert und welche Verbesserungen sie vorschlagen. Die Moderation fasst die mehrheitlich geteilten Rückmeldungen zusammen und bespricht sie mit der Lehrperson, die sie in der nächsten Sitzung mit den Studierenden aufgreift. Änderungen sind so noch im laufenden Semester möglich.[1][2]
Das Verfahren steht in der Tradition der Zwischenevaluationen, die seit den 1980er Jahren an amerikanischen Hochschulen entwickelt wurden, beginnend mit der Small Group Instructional Diagnosis.[2][3] Zahlreiche Hochschulen im deutschsprachigen Raum bieten das TAP als Ergänzung zur fragebogengestützten Lehrveranstaltungsbewertung an.[1][4]
Verfahren
[Bearbeiten | Quelltext bearbeiten]Ein TAP findet nur auf Wunsch der Lehrperson statt, und die Ergebnisse gehen ausschließlich an sie.[2][5] Die Lehrperson meldet ihre Veranstaltung an und vereinbart einen Termin in der Mitte der Vorlesungszeit. An diesem Tag beendet sie die Sitzung meist 30 Minuten früher, stellt die Moderation vor und verlässt den Raum. Die Studierenden besprechen in Kleingruppen, wodurch sie in der Veranstaltung am meisten lernen, was ihr Lernen erschwert und welche Verbesserungsvorschläge sie für die hinderlichen Punkte haben. Die Fragen zielen damit nicht auf eine Bewertung der Lehrperson, sondern auf den Lernprozess der Studierenden. Im Plenum klärt die Moderation unklare Aussagen durch Nachfragen und lässt abstimmen, welche Punkte die Mehrheit der Anwesenden teilt.[2][1][4] An einzelnen Hochschulen werden die Fragen im Vorgespräch an das Anliegen der Lehrperson angepasst oder um eine vierte Frage ergänzt.[6][7]
Die Moderation fasst die mehrheitsfähigen Rückmeldungen anonymisiert zusammen und bespricht sie möglichst vor der nächsten Sitzung mit der Lehrperson. Dabei wird auch überlegt, wie mit den Anregungen umgegangen werden kann. In der folgenden Sitzung erläutert die Lehrperson den Studierenden, welche Konsequenzen sie zieht und warum sie einzelne Vorschläge nicht aufgreift.[2][4]
Die Moderation übernehmen meist Mitarbeitende der Hochschuldidaktik, der Evaluation oder des Qualitätsmanagements.[1] Einige Hochschulen schulen dafür auch Studierende.[8][9] Die Verortung bei der Hochschuldidaktik oder beim Qualitätsmanagement hat jeweils Vorteile und Nachteile. Hochschuldidaktisch geschulte Moderierende können die Rückmeldungen didaktisch einordnen und eine Beratung anschließen, während eine Anbindung außerhalb der Hochschuldidaktik als anonymer und ergebnisoffener gilt.[4] An der Technischen Hochschule Köln ist das Verfahren in der Evaluationsordnung von 2018 als Alternative zur Fragebogenerhebung verankert.[5]
Geschichte
[Bearbeiten | Quelltext bearbeiten]Das TAP gehört zu einer Familie amerikanischer Verfahren der Zwischenevaluation, als deren Ausgangspunkt die Small Group Instructional Diagnosis (SGID) gilt.[2][3] D. Joseph Clark und Mark V. Redmond entwickelten sie Anfang der 1980er Jahre an der University of Washington. Sie sah bereits ein Vorgespräch, eine Befragung der Studierenden in Kleingruppen, ein Rückmeldegespräch mit der Lehrperson und die Besprechung der Ergebnisse mit den Studierenden vor. Das Verfahren wurde in über 130 Lehrveranstaltungen erprobt. In einer Begleitstudie verbesserte sich die Lernmotivation der beteiligten Studierenden bei 10 von 18 Variablen signifikant, in der Kontrollgruppe dagegen nicht.[10] Später entstanden an amerikanischen Hochschulen weitere Varianten wie die Group Instructional Feedback Technique und die Bare Bones Questions.[3] Unter dem Namen Teaching Analysis Poll wird das Verfahren an mehreren amerikanischen Hochschulen angeboten. Nach Angaben in der Fachliteratur wurde diese Form am Teaching Ressource Center der University of Virginia entwickelt.[2][9]
Die Universität Bielefeld gehörte zu den ersten Hochschulen in Deutschland, die das Verfahren einsetzten.[11] Ihr Team „Lehren und Lernen“ erprobte das TAP im Wintersemester 2010/11, nachdem es die Methode von Dorothe J. Bach von der University of Virginia kennengelernt hatte.[2][12] Bis zum Sommersemester 2011 wurden TAPs in 22 Veranstaltungen durchgeführt, von Seminaren mit 20 bis zu Vorlesungen mit über 300 Teilnehmenden. Rund die Hälfte der teilnehmenden Lehrenden waren Professorinnen und Professoren.[2] Die Hochschulrektorenkonferenz nahm das Bielefelder Verfahren 2017 in die Beispielsammlung ihres Projekts nexus auf.[8] Etwa zur gleichen Zeit führte die Universität Regensburg das Verfahren ein.[13] In den folgenden Jahren übernahmen es zahlreiche weitere Hochschulen. Eine Übersicht der Deutschen Gesellschaft für Hochschuldidaktik (dghd) nannte 2019 mehr als ein Dutzend Anbieter, darunter die Universitäten Leipzig, Oldenburg, Paderborn, zu Köln und St. Gallen sowie die Ruhr-Universität Bochum und die Technische Hochschule Köln.[1] Seit 2019 befasst sich in der dghd auch eine Arbeitsgruppe zu qualitativen Feedbackmethoden und Evaluationsmethoden mit dem Verfahren. Mehrere Hochschulen rechnen ein TAP auf hochschuldidaktische Zertifikate an.[4][14] Außerhalb des deutschsprachigen Raums wird das TAP unter anderem an der Universität Bergen eingesetzt.[9]
Varianten
[Bearbeiten | Quelltext bearbeiten]Für große Vorlesungen gibt es das big TAP, bei dem die Studierenden ihre Antworten vorab online abgeben, sodass die Zeit in der Veranstaltung vollständig für Klärung und Abstimmung zur Verfügung steht.[4] TAPs werden auch in Videokonferenzen angeboten, teils mit elektronischen Abstimmungssystemen.[7][15] Die Universität Regensburg verzichtet auf die Frage nach Verbesserungsvorschlägen, erfasst vorab die Lernziele und wertet die Rückmeldungen mit einem Kodierleitfaden aus.[16] Die an der Technischen Universität Berlin beschriebene Formative Teaching Analysis Poll kommt ohne externe Moderation aus und wird von der Lehrperson selbst durchgeführt.[17] An der Universität Bergen wird das Verfahren auch auf ganze Studiengänge angewendet.[9] An anderen Hochschulen dient es zu Semesterbeginn als Erwartungsabfrage.[1]
Auswertung und Forschung
[Bearbeiten | Quelltext bearbeiten]Für die Auswertung der Rückmeldungen entwickelte Birgit Hawelka an der Universität Regensburg ab 2016 einen Kodierleitfaden mit neun Kategorien, die von der Interaktion in der Veranstaltung über die Motivation und die Lernstrategien der Studierenden bis zu den Rahmenbedingungen reichen. Er soll die studentischen Aussagen nach didaktischen Kriterien ordnen und dem Beratungsgespräch eine einheitliche Grundlage geben. In einer Erprobung ließen sich fast alle Aussagen zuordnen, und die Kodierenden stimmten hoch überein.[16] Der Leitfaden liegt seit 2019 auch auf Englisch vor.[9]
Birgit Hawelka und Stephanie Hiltmann begründen die Wirksamkeit des Verfahrens vor allem damit, dass es studentisches Feedback mit einer Beratung verbindet. Für diese Kombination hat eine Metaanalyse von Angela Penny und Robert Coe einen mittleren bis großen Effekt auf die Qualität der Lehre ermittelt, während Evaluation ohne anschließende Beratung nach der Literaturübersicht der beiden Autorinnen kaum Wirkung entfaltet.[16][18] Eine Studie zur SGID zeigte, dass Lehrende nach der Rückmeldung ihre Veranstaltungen veränderten.[19]
Kritik und Grenzen
[Bearbeiten | Quelltext bearbeiten]Das TAP gilt als Ergänzung der quantitativen Lehrveranstaltungsevaluation, nicht als Ersatz.[4] Da auch die Studierenden freiwillig teilnehmen, kann in Vorlesungen ein Teil der Anwesenden den Raum verlassen, sodass die Ergebnisse vor allem die Sicht der engagierten Studierenden wiedergeben.[4] In sehr kleinen Gruppen kann die Abstimmung per Handzeichen durch Gruppendruck beeinflusst werden.[9] Methodisch wird an der Grundform kritisiert, dass sie die Lernziele der Veranstaltung nicht berücksichtigt, dass spontan entwickelte Verbesserungsvorschläge zu verkürzten Lösungen führen können und dass die Qualität der Analyse ohne einheitliche Kriterien stark von der moderierenden Person abhängt.[16] Wegen des Moderationsaufwands eignet sich das Verfahren nicht für eine flächendeckende Lehrveranstaltungsevaluation, und einzelne Hochschulen begrenzen die Zahl der angebotenen TAPs.[8][6][17]
Literatur
[Bearbeiten | Quelltext bearbeiten]- Andrea Frank, Melanie Fröhlich, Swantje Lahm: Zwischenauswertung im Semester: Lehrveranstaltungen gemeinsam verändern. In: Zeitschrift für Hochschulentwicklung. Band 6, Nr. 3, 2011, S. 310–318, doi:10.3217/zfhe-6-03/25.
- Andrea Frank, Svenja Kaduk: Lernen im Fokus von Lehrveranstaltungsevaluation. Teaching Analysis Poll (TAP) und Bielefelder Lernzielorientierte Evaluation (BiLOE). In: Wolff-Dietrich Webler, Helga Jung-Paarmann (Hrsg.): Zwischen Wissenschaftsforschung, Wissenschaftspropädeutik und Hochschulpolitik. Hochschuldidaktik als lebendige Werkstatt. Festschrift für Ludwig Huber zum 80. Geburtstag. UniversitätsVerlagWebler, Bielefeld 2017, S. 203–218.
- Melanie Franz-Özdemir, Jürgen Reimann, Karin Wessel: Teaching Analysis Poll (TAP). Konzept und Umsetzung einer aktuellen Methode an der Schnittstelle von Evaluation und Lehrentwicklung. In: Brigitte Berendt u. a. (Hrsg.): Neues Handbuch Hochschullehre. DUZ Verlags- und Medienhaus, Berlin 2019, S. 37–64 (Griffmarke I 1.17).
- Birgit Hawelka, Stephanie Hiltmann: Teaching Analysis Poll – ein Kodierleitfaden zur Analyse qualitativer Evaluationsdaten. In: Martina Schmohr, Kristina Müller, Julia Philipp (Hrsg.): Gelingende Lehre: erkennen, entwickeln, etablieren. Beiträge der Jahrestagung der Deutschen Gesellschaft für Hochschuldidaktik (dghd) 2016 (= Blickpunkt Hochschuldidaktik. Band 132). wbv, Bielefeld 2018, ISBN 978-3-7639-5941-9, S. 73–92 (PDF [abgerufen am 22. September 2026]).
- Thies Johannsen, Henning Meyer: Improving Teaching Quality in Higher Education: A Practitioner’s Guide to Using Formative Teaching Analysis Poll. In: Proceedings of the 51st Annual Conference of the European Society for Engineering Education (SEFI 2023). 2023, S. 2222–2233, doi:10.21427/8REM-2V61.
- Robert Kordts, Mahaut de Vareilles, Kjersti Daae, Eirun Gandrud, Anne D. Årvik, Mirjam S. Glessmer: TAP: Teaching Analysis Poll for Student Feedback. In: Oceanography. Band 38, Nr. 2, 2025, S. 83–85, doi:10.5670/oceanog.2025.305.
Weblinks
[Bearbeiten | Quelltext bearbeiten]- Teaching Analysis Poll (TAP) Beschreibung des Verfahrens durch die Arbeitsgruppe Qualitative Feedback- und Evaluationsmethoden der Deutschen Gesellschaft für Hochschuldidaktik
- TAP Toolkit des Zentrums für Hochschul- und Wissenschaftsdidaktik der Universität Regensburg mit Kodierleitfaden und Vorlagen
Einzelnachweise
[Bearbeiten | Quelltext bearbeiten]- 1 2 3 4 5 6 Petra Weiß: Teaching Analysis Poll (TAP). In: Beitrag der Arbeitsgruppe Qualitative Feedback- und Evaluationsmethoden. Deutsche Gesellschaft für Hochschuldidaktik, 7. November 2019, abgerufen am 22. September 2026.
- 1 2 3 4 5 6 7 8 9 Andrea Frank, Melanie Fröhlich, Swantje Lahm: Zwischenauswertung im Semester: Lehrveranstaltungen gemeinsam verändern. In: Zeitschrift für Hochschulentwicklung. Band 6, Nr. 3, 2011, S. 310–318, doi:10.3217/zfhe-6-03/25.
- 1 2 3 Margaret K. Snooks, Sue E. Neeley, Kathleen M. Williamson: From SGID and GIFT to BBQ: Streamlining Midterm Student Evaluations to Improve Teaching and Learning. In: To Improve the Academy. Band 22, 2004, S. 110–124, doi:10.1002/j.2334-4822.2004.tb00405.x.
- 1 2 3 4 5 6 7 8 Joana Eichhorn, Ivanessa Mirastschijski, Julia Philipp, Anna-Linda Sachse, Petra Weiß: Rückmeldung erwünscht. In: DUZ Magazin für Wissenschaft und Gesellschaft. Nr. 12/2019, 2019, S. 64–67 (PDF [abgerufen am 22. September 2026]).
- 1 2 Klara Groß-Elixmann: Warum Lehre evaluieren – und wie geht das mit TAP? In: Lehrpfade. Zentrum für Lehrentwicklung der Technischen Hochschule Köln, 20. Oktober 2022, abgerufen am 22. September 2026.
- 1 2 Zwischenevaluation – Teaching Analysis Poll. Hochschule für Technik und Wirtschaft Berlin, Lehrenden-Service-Center, abgerufen am 22. September 2026.
- 1 2 Teaching Analysis Poll – qualitative Zwischenevaluation. Universität Paderborn, Stabsstelle Bildungsinnovationen und Hochschuldidaktik, abgerufen am 22. September 2026.
- 1 2 3 Evaluation der Lehre durch Reflexion des Lernens: Teaching Analysis Poll (TAP). In: Gute Beispiele und Konzepte. Hochschulrektorenkonferenz, Projekt nexus, 21. November 2017, abgerufen am 22. September 2026.
- 1 2 3 4 5 6 Robert Kordts, Mahaut de Vareilles, Kjersti Daae, Eirun Gandrud, Anne D. Årvik, Mirjam S. Glessmer: TAP: Teaching Analysis Poll for Student Feedback. In: Oceanography. Band 38, Nr. 2, 2025, S. 83–85, doi:10.5670/oceanog.2025.305.
- ↑ D. Joseph Clark, Mark V. Redmond: Small Group Instructional Diagnosis: Final Report. University of Washington, Seattle 1982 (ERIC ED217954 [abgerufen am 22. September 2026]).
- ↑ Teaching Analysis Poll: Konzeption, Umsetzung und Erfahrungen. Evaluationsagentur Baden-Württemberg (evalag), abgerufen am 22. September 2026.
- ↑ Angebot für Lehrende: Zwischenauswertung im Semester. In: uni.intern. Universität Bielefeld, 1. Februar 2011, abgerufen am 22. September 2026.
- ↑ Birgit Hawelka: Teaching Analysis Poll (TAP) – mehr als qualitative Evaluation. In: Lehrblick. Zentrum für Hochschul- und Wissenschaftsdidaktik der Universität Regensburg, 18. November 2021, abgerufen am 22. September 2026 (DOI:10.5283/ZHW.20211118.DE).
- ↑ Teaching Analysis Poll. Universität Regensburg, Zentrum für Hochschul- und Wissenschaftsdidaktik, abgerufen am 22. September 2026.
- ↑ Teaching Analysis Poll – Qualitatives Zwischenfeedback. Universität Bamberg, Zentrum für Hochschuldidaktik, abgerufen am 22. September 2026.
- 1 2 3 4 Birgit Hawelka, Stephanie Hiltmann: Teaching Analysis Poll – ein Kodierleitfaden zur Analyse qualitativer Evaluationsdaten. In: Martina Schmohr, Kristina Müller, Julia Philipp (Hrsg.): Gelingende Lehre: erkennen, entwickeln, etablieren. Beiträge der Jahrestagung der Deutschen Gesellschaft für Hochschuldidaktik (dghd) 2016 (= Blickpunkt Hochschuldidaktik. Band 132). wbv, Bielefeld 2018, ISBN 978-3-7639-5941-9, S. 73–92 (PDF [abgerufen am 22. September 2026]).
- 1 2 Thies Johannsen, Henning Meyer: Improving Teaching Quality in Higher Education: A Practitioner’s Guide to Using Formative Teaching Analysis Poll. In: Proceedings of the 51st Annual Conference of the European Society for Engineering Education (SEFI 2023). 2023, S. 2222–2233, doi:10.21427/8REM-2V61.
- ↑ Angela R. Penny, Robert Coe: Effectiveness of Consultation on Student Ratings Feedback: A Meta-Analysis. In: Review of Educational Research. Band 74, Nr. 2, 2004, S. 215–253, doi:10.3102/00346543074002215 (zitiert nach Hawelka und Hiltmann 2018).
- ↑ Miriam Rosalyn Diamond: The usefulness of structured mid-term feedback as a catalyst for change in higher education classes. In: Active Learning in Higher Education. Band 5, Nr. 3, 2004, S. 217–231, doi:10.1177/1469787404046845.