Computer-Adaptives Testen (CAT) (Linacre 2000) behebt zwei grundlegende Probleme traditionellen Prüfens und Testens: Zum einen sind erzielte Ergebnisse aus unterschiedlichen Tests, wie z.B. zwei Klausuren aus verschiedenen Semestern, stets direkt miteinander vergleichbar. Zum anderen ist mittels CAT durch eine dynamisch auf die Fähigkeit der einzelnen Teilnehmenden abgestimmte Fragenauswahl eine Verkürzung der Testzeit um 50 Prozent oder mehr möglich (Kreiter et al., 1999; Weiss, 1982), ohne dabei Einbuße an diagnostischer Genauigkeit in Kauf nehmen zu müssen.

Im Gegenzug müssen die eingesetzten Fragen zunächst psychometrisch charakterisiert werden. Dieser Prozess der Pilotierung gestaltet sich häufig aufwendig und erfordert tiefer gehende Kenntnisse der statistischen Verfahren.

In diesem Workshop stellen wir das Konzept des Computer-Adaptiven Testens anhand der Umsetzung im ALiSe-Plugin im Detail vor. Dazu wird im Rahmen des Workshops das Plugin weniger aus Sicht der Studierenden als vielmehr der CAT-Erstellenden und einsetzender Lehrender begutachtet.

Wir legen anhand eigener Daten dar, wie sich die Versprechen von CAT einlösen und zeigen, wie die Software Anwendende bei der Erstellung und Pilotierung von Tests unterstützt.

Anschließend wird die Zeit im Workshop darauf verwendet, Anwendungsfälle und Anwendungsmöglichkeiten in anderen als dem ALiSe-Kontext zu entwickeln und auf deren Umsetzbarkeit hin zu diskutieren.

Literatur

Kreiter, K. D., Ferguson, K., Gruppen, L. D. (1999). Evaluating the Usefulness of Computerized Adaptive Testing for Medical In-course Assessment. Academic Medicine, 74(10), 1125-1128. https://doi.org/10.1097/00001888-199910000-00016.

Linacre, J. M. (2000). Computer-Adaptive Testing: A Methodology Whose Time Has Come (No. 69, S. 58). MESA Memorandum.

Weiss, D.J. (1982). Improving Measurement Quality and Efficiency with Adaptive Testing. Applied Psychological Measurement, 6(4), 473–492.