Die Optimierung von Online-Mathematiktests durch Itemrevision
Ein Verfahren auf der Grundlage der Analyse statistischer Daten und Fehlertypen
Jana Thiele
Diese Publikation zitieren
Jana Thiele, Die Optimierung von Online-Mathematiktests durch Itemrevision (2023), WTM-Verlag, Münster, ISBN: 9783959872683
7
Accesses
Accesses
Beschreibung / Abstract
In der vorliegenden Arbeit wird ein Online-Mathematiktest aus dem mathe-meistern-Projekt über mehrere Jahre mittels Itemrevisionen so optimiert, dass er den Testgütekriterien genügt und raschkonform ist. Bei dem Test handelt es sich um einen Multiple-Choice-Test für den Bereich Technik an Berufskollegs in NRW, denn insbesondere an Berufskollegs zeigt sich eine deutliche Diskrepanz zwischen den defizitären Bildungsvoraussetzungen der Schülerinnen und Schüler und den Bildungsplänen.
Im ersten Schritt der Arbeit wird untersucht, durch welche Itemrevisionen die Testgütekriterien (Reliabilität, Trennschärfe, globale Modelltests, …) beeinflusst werden. Bei der Aufgaben- und Distraktorenanalyse werden Fehlertypen mathematischer Fertigkeiten in den einzelnen Inhaltskategorien Arithmetik, Algebra, Geometrie, Bruchrechnung, Funktionen, Dreisatz & Prozente, Diagramme & Tabellen, Einheiten und Gleichungssysteme sowie den mathematischen Kompetenzen Darstellungen verwenden, Mathematik anwenden, Probleme lösen und symbolisch/formal Rechnen zum Ende der Sekundarstufe I mit den Distraktoren der Testitems verglichen und Revisionsansätze aufgezeigt.
Im zweiten Schritt wird der optimierte Test auf Item-, Konstrukt- und Modellebene mit der klassischen Testtheorie und der probabilistischen Testtheorie hinsichtlich der Testgütekriterien überprüft.
Mit dem raschkonformen Test werden im dritten Schritt die mathematischen Kompetenzniveaus von Berufskollegschülerinnen und -schülern hinsichtlich der Inhaltskategorien diagnostiziert, um anschließend eine individuelle Förderung zu initiieren.
Im ersten Schritt der Arbeit wird untersucht, durch welche Itemrevisionen die Testgütekriterien (Reliabilität, Trennschärfe, globale Modelltests, …) beeinflusst werden. Bei der Aufgaben- und Distraktorenanalyse werden Fehlertypen mathematischer Fertigkeiten in den einzelnen Inhaltskategorien Arithmetik, Algebra, Geometrie, Bruchrechnung, Funktionen, Dreisatz & Prozente, Diagramme & Tabellen, Einheiten und Gleichungssysteme sowie den mathematischen Kompetenzen Darstellungen verwenden, Mathematik anwenden, Probleme lösen und symbolisch/formal Rechnen zum Ende der Sekundarstufe I mit den Distraktoren der Testitems verglichen und Revisionsansätze aufgezeigt.
Im zweiten Schritt wird der optimierte Test auf Item-, Konstrukt- und Modellebene mit der klassischen Testtheorie und der probabilistischen Testtheorie hinsichtlich der Testgütekriterien überprüft.
Mit dem raschkonformen Test werden im dritten Schritt die mathematischen Kompetenzniveaus von Berufskollegschülerinnen und -schülern hinsichtlich der Inhaltskategorien diagnostiziert, um anschließend eine individuelle Förderung zu initiieren.
Inhaltsverzeichnis
- BEGINN
- Danksagung
- Abkürzungsverzeichnis
- Inhaltsverzeichnis
- I EINLEITUNG
- 1. Einleitung
- II THEORETISCHE GRUNDLAGEN
- 2. Mathematische Anforderungen am Berufskolleg in NRW
- 3. Inhalte und Fehlertypen der Inhaltskategorien
- 4. Das Projekt mathe-meistern
- III METHODOLOGISCHE GRUNDLAGEN
- 5. Psychologische Tests
- 6. Klassische Testtheorie
- 7. Probabilistische Testtheorie
- 8. Kompetenzmodelle mathematischer Diagnosetests
- 9. Aspekte der Testoptimierung
- IV FORSCHUNGSSTAND
- 10. Forschungsstand
- 11. Studien zu Einflussfaktoren der Test- und Itemqualität
- V EMPIRISCHE UNTERSUCHUNG
- 12. Forschungsfragen und Ziel der Untersuchung
- 13. Untersuchungsdesign
- VI ERGEBNISSE
- 14. Pilotierung 2015
- 15. Testung I 2016
- 16. Testung II 2017
- 17. Testung III 2018
- 18. Kompetenzanalyse
- VII ZUSAMMENFASSENDE ANALYSEN UND DISKUSSION
- 19. Wirksamkeit der Testoptimierung
- 20. Modellgüte des Tests im Bereich Technik
- 21. Mathematische Grundfertigkeiten von Berufskollegschülerinnen und -schülern im Bereich Technik
- VIII ZUSAMMENFASSUNG UND AUSBLICK
- 22. Zusammenfassung und Fazit
- 23. Ausblick
- Tabellenverzeichnis
- Abbildungsverzeichnis
- Anhangsverzeichnis
- Literaturverzeichnis