180 likes | 464 Views
Validität, Reliabilität und Objektivität. Präsentation im Kurs Wissensdiagnostik: Leistungsfeststellung in beruflichen Schulen. Referenten: Andreas Brill Kerstin Groß Edi Hansen. Validität Reliabilität Objektivität. Seminar SS 2005
E N D
Validität, Reliabilität und Objektivität Präsentation im Kurs Wissensdiagnostik: Leistungsfeststellung in beruflichen Schulen Referenten: Andreas Brill Kerstin Groß Edi Hansen
ValiditätReliabilitätObjektivität • Seminar SS 2005 Wissensdiagnostik:Leistungsfeststellung in beruflichen Schulen Dozent: Werner Barkey Thema: Validität Referentin: Kerstin Groß Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität • Gütekriterien eines Testes Validität Reliabilität Trennschärfe Objektivität Schwierigkeitsgrad Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität • Gütekriterien eines Testes Validität Reliabilität Objektivität Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität • Validität • Die Validität eines Testes gibt den Grad der Genauigkeit an, mit dem der Test das Persönlichkeitsmerkmal, das er messen soll, tatsächlich mißt. (Lienert, 1969) • Die Validität gibt den Grad an, in dem der Test fähig ist, bestimmte Ziele zu erreichen. (American Psychological Association, 1966) Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität • Validität eines Testes: Prüft ein Test > überhaupt die Verhaltensmerkmale > auch nur die Verhaltensmerkmale die er prüfen soll? Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität Validität Kontentvalidität Konstruktvalidität Kriteriumsvalidität Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität • Kontentvalidität > Prüfung ist inhaltlich valide, wenn die Aufgaben eine repräsentative Auswahl aus dem Unterrichtsstoff darstellen. > Abschluß- und Zwischenprüfungen: Menge der Aufgaben wird durch jeweilige Ausbildungsordnung festgelegt Lehrzielvalidität! Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität • Konstruktvalidität > übergeordnete Lehrziele = Konstrukt > ob und in welchem Umfang ein bestimmter Aufgabensatz übergeordnete Lehrziele erfassen kann > Konstruktvalidität ist im Bereich der Berufsausbildung von geringer Bedeutung Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität • Kriteriumsvalidität > Kriterium = zukünftige Verhalten > Prüfung zukünftige Verhalten prognostizieren > prädikative Validität: Schüler mit guten Prüfungsergebnissen zeigt später bessere Leistungen > Kriteriumsvalidität ist für Prüfungspraxis von geringer Bedeutung Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität • Validität Lehrzielvalidität = Konkretisierung der Kontentvalidität Stoffkataloge: + listen alle nach der jeweiligen Ausbildungsordnung zulässigen Prüfungsinhalte auf + legen Anteile an Aufgaben aus den einzelnen Teilbereichen der Prüfungsgebiete prozentual fest Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität Experten bestimmen mittels des Stoffkatalogs, welche Aufgaben geeignet sind: + unabhängig voneinander urteilen sie, inwieweit eine Aufgabe ein bestimmtes Lehrziel repräsentiert (Rating-Verfahren) + Ausmaß ihrer Übereinstimmung wird als Validitätsmaß genommen (Korrelationskoeffizient) Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität • Aufgabenplanungsraster • Ausbildungsberuf: Industriekaufmann,Fach Industriebetriebslehre Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität • Programmierte Prüfungen im Vergleich zu anderen Prüfungsformen • offenen Antwortaufgaben Erfordernis der freien Ausformulierung; Verzerrung des Prüfungsergebnisses • Multiple-choice-Aufgaben keine Beeinträchtigung der Validität Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität • persönliches Eignungs- und aufgabenbezogenes Anforderungsprofil Personalpraxis: AC komplexe Aufgabenstellung Kann ein AC auf Prüfungspraxis übertragen werden? > außerordentlich großer Aufwand > Koeffizienten für Kriteriumsvalidität (Vorhersagegültigkeit) sehr niedrig Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität Gegenwärtige System der Abschlußprüfungen kann eine vergleichbare und objektive Überprüfung nahezu aller kognitiven Anforderungen ermöglichen Andreas Brill, Kerstin Groß, Edi Hansen
ValiditätReliabilitätObjektivität • Literaturverzeichnis • Fehm, K.: Theorie und Praxis programmierter Prüfungen, 2. verbesserte Auflage, IHK Nürnberg, Nürnberg 1996 • Fricke, R.: Gütekriterien von Tests, in: Klauer, K.J. (Hrsg.), Handbuch der Pädagogischen Diagnostik, Band 1, 1. Auflage, Pädagogischer Verlag Schwann, Düsseldorf 1978 • Lienert, G.: Testaufbau und Testanalyse, 3. Auflage, Verlag Julius Beltz, Weinheim 1969 • Rütter, T.: Formen der Testaufgabe, Verlag C. H. Beck, München 1973 Andreas Brill, Kerstin Groß, Edi Hansen