110 likes | 282 Views
Betrouwbaarheid van Competentie Assessments. Saskia Wools ORD 2010 - Enschede. Betrouwbaarheid. De inspectie acht het van belang dat scholen betrouwbare, valide en genormeerde toetsen gebruiken.
E N D
Betrouwbaarheid van Competentie Assessments Saskia Wools ORD 2010 - Enschede
Betrouwbaarheid • De inspectie acht het van belang dat scholen betrouwbare, valide en genormeerde toetsen gebruiken. • De Commissie Testaangelegenheden Nederland (COTAN) van het NIP beoordeelt toetsen aan de hand van criteria als testconstructie, handleiding en testmateriaal, betrouwbaarheid en validiteit.
Competentie assessment • Criterium georiënteerd • Mastery testing • Meerdere toetsen • Decision accuracy
Onderzoeksdoel • Misclassificatie en competentie beoordeling • Proef op de som: • Schatting betrouwbaarheid examenprogramma
All-round politiemedewerker (4) • Cohort 2004-2005 – afgestudeerd in 2008 • N = 1406 • 22 kernopgaven
Structuur Examenprogramma School Korps Examen
Analyse 1 • Analyse per toets: • Erg makkelijk • Cruciale punten • Dus: weinig variantie • Slaagt iedereen?
Analyse 2 • Analyse op examenprogramma • toets = item • Veel missings • Hoeveel dimensies? • Betrouwbaarheidsschatting erg laag
Conclusie • Nog geen resultaat over de kwaliteit • Hoe gaan we om met gebrek aan variantie? • Is betrouwbaarheid numeriek uit te drukken? Moeten we naar een ander model? Wordt vervolgd…
Voor slides en meer informatie: www.rcec.nl Voor vragen, opmerkingen, of suggesties: saskia.wools@cito.nl