260 likes | 369 Views
SALSA. Studie naar Achtergronden van Lees- en Schrijfontwikkeling bij Adolescenten. Tekstbegrip van vmbo-leerlingen. Identificatie van deelvaardigheden en impact van taakeffecten. Project SALSA. Onderwijscontext De Milliano. Buitenschoolse context Van Kruistum. Lees-/schrijfontwikkeling
E N D
SALSA Studie naar Achtergronden van Lees- en Schrijfontwikkeling bij Adolescenten Tekstbegrip van vmbo-leerlingen Identificatie van deelvaardigheden en impact van taakeffecten
Project SALSA Onderwijscontext De Milliano Buitenschoolse context Van Kruistum Lees-/schrijfontwikkeling Van Steensel Individuele attributen Trapman
Achtergrond SALT (SAlsa Literacy Test)
Achtergrond Validiteit van een (taal)toets (Bachman, 2002): • Construct-based: voldoende dekking van relevante aspecten van het construct. • Task-based: voldoende dekking van taken die relevant zijn voor het constructdomein.
Aannamen Aannamen: • Met een toets als de SALT kun je deelvaardigheden van leesbegrip meten. • De scores op de taken in de SALT geven tesamen een consistent beeld van het leesbegrip van leerlingen.
Deelvaardigheden leesbegrip Drie typen vaardigheden: • Retrieving: lokaliseren van relevante detailinformatie. • Interpreting: lokale inferenties maken (bijv. oorzaak-gevolgrelaties). • Reflecting: globale inferenties maken (bijv. hoofdgedachte). Cerdán et al. (2009); Cummings (1982); Davis (1968); Goldman & Durán (1988); OECD (2003); Pearson & Johnson (1978); Rosenshine (1980); Song (2008)
Deelvaardigheden leesbegrip Eerder onderzoek: • Geen overtuigend bewijs voor de mogelijkheid met toetsen deelvaardigheden te identificeren. Cummings (1982); Meijer & Van Gelderen (2002); Song (2008); Spearitt (1972); Thorndike (1973-74) • Maar: mogelijk wel onderscheidbaar bij zwakke lezers. Alderson (2000); Carr & Levy (1990); Cummings (1982)
Generaliseerbaarheid • Leestoetsen bestaan doorgaans uit meerdere taken: ‘across task generalizability’ wordt aangenomen. Bachman & Palmer (1996) • Maar: onderzoek naar schrijf- en spreekvaardigheid duidt op taakeffecten door variatie in onderwerp, genre, doel en publiek. Lee (2006); Sawaki (2007); Schoonen (2005); Xi (2007) • Datzelfde geldt zeer waarschijnlijk ook voor leestoetsen. Francis et al. (2005); Pearson & Hamm (2005); Lynch (2003)
Onderzoeksvragen • Kunnen de deelvaardigheden retrieving, interpreting en reflecting worden onderscheiden m.b.v. de SALT? • Hoe groot is de impact van taakeffecten op de betrouwbaarheid van de SALT?
Methode • Steekproef: 200 eerstejaars vmbo-leerlingen (basis/kader). • SALT: • 9 taken. • Verschillende media: (school)boeken, kranten/tijdschriften, ‘officiele documenten’, internet. • Verschillende genres: verhalend, informatief, instructief, argumentatief. • Verschillende formats: continu, discontinu. • Verschillende items: 21 retrieving, 26 interpreting, 18 reflecting.
Methode Analyses: • Identificatie deelvaardigheden: confirmatieve factoranalyse m.b.v. SEM (EQS 6.1 for Windows, Bentler & Wu, 2002). • Identificatie taakeffecten: Generalizability (G) theory analysis: • G study: schatting van de grootte van de errorcomponent die is geassocieerd met taakeffecten. • D study: effect van variatie in het aantal taken op de betrouwbaarheid.
Resultaten: deelvaardigheden • 3-factormodel (toets meet 3 deelvaardigheden)
Resultaten: deelvaardigheden • 3-factormodel (toets meet 3 deelvaardigheden) vergeleken met 1-factormodel (toets meet 1 vaardigheid).
Resultaten: deelvaardigheden • 3-factormodel (toets meet 3 deelvaardigheden) vergeleken met 1-factormodel (toets meet 1 vaardigheid). 3-factormodel is geen significante verbetering t.o.v. 1-factormodel (difference test = 0.96, df=1, p>.05)
Resultaten: taakeffecten • G-study:
Resultaten: taakeffecten • G-study: Aanzienlijke taakeffecten!
Resultaten: taakeffecten D-study: 9 taken = .75
Resultaten: taakeffecten D-study: 12 taken = .80
Conclusies Vraag 1: deelvaardigheden konden niet worden vastgesteld: • Sluit aan bij cognitieve modellen van leesbegrip: lezers construeren 1 mentale representatie. • Tests als deze zijn niet geschikt voor diagnostisch gebruik o.g.v. deelvaardigheden.
Conclusies Vraag 2: er zijn aanzienlijke taakeffecten: • Taken kunnen niet goed naar elkaar worden gegeneraliseerd. • Er zijn veel taken nodig voor een voldoende betrouwbare toets.
Contact Roel van Steensel R.C.M.vanSteensel@uva.nl Kijk ook eens op: http://salsa.socsci.uva.nl/