Grammaticatoets en -remediëring voor opleidingen Moderne Talen

1. Grammaticatoets en -remediëring voor opleidingen Moderne Talen Els Rose, Departement Moderne Talen Universiteit Utrecht

2. Voorbeeld taalkundig ontleden Tot welke woordsoort behoort het vetgedrukte deel van de onderstaande zin? De wiskundige vergaapte zich aan de rijkdom en complexiteit van de Mandelbrotverzameling • vragend voornaamwoord • onbepaald voornaamwoord • wederkerend voornaamwoord • wederkerig voornaamwoord

3. Voorbeeld redekundig enkelvoudig ontleden Wat is de functie van het vetgedrukte deel van de onderstaande zin? Als je jezelf iets meer tijd zou hebben gegund dan liep je nu niet in de ziektewet. • lijdend voorwerp • meewerkend voorwerp • bijwoordelijke bepaling • bijvoeglijke bepaling

4. Voorbeeld redekundig samengesteld ontleden Wat is de functie van het vetgedrukte deel van de onderstaande zin? Wie deze zinnen niet kan ontleden, raad ik een opfriscursus aan. • meewerkend voorwerpszin • bijwoordelijke bijzin • bijvoeglijke bijzin • lijdend voorwerpszin

5. Programma • Aanleiding en doelstelling • De grammaticatoets • Resultaten pilot • Blackboard als toetsomgeving • Implementatie grammaticatoets

6. Achtergronden project Aanleiding • Onvoldoende kennis elementaire grammaticale begrippen bij eerstejaars studenten moderne talen • Belemmeringen op het gebied van taalverwerving in doeltaal:  Cursus aanpassen aan niveau studenten?

7. Maatregelen voor eerstejaarsstudenten • Diagnostische grammaticatoetsToetsing van instromende eerstejaars op hun kennis van elementaire grammaticale begrippen • RemediëringsmodulesStudenten die onvoldoende scoren op de toets moeten kennis bijspijkeren/opfrissen • Materiaal Blackboard • Aanbevolen literatuur • BezemklasVoor studenten die toets bij herkansing niet hebben gehaald

8. De grammaticatoets • Alle eerstejaarsstudenten die een opleiding aan DMT volgen, alsook studenten Nederlands en TCS • Deelname 2010/2011 (nog) niet verplicht • Toets bestaat uit 100 vragen • Studenten krijgen een uur de tijd om toets te maken • Gehanteerde norm 70%

9. Inhoudelijke uitgangspunten • Er wordt getoetst op de toepassing van grammaticale kennis die leerlingen aan het eind van de onderbouw van het VO dienen te hebben • De toets is gericht op de toepassing van het grammaticale begrippenapparaat bij het benoemen van woordsoorten en zinsdelen • begrippen op woord-/zinsniveau kunnen benoemen • i.p.v. concrete invuloefening • Toets is gericht op het heractiveren van grammaticale kennis

10. Voorbeeld algemene taaltoets VU Selecteer het juiste woord."Het feit dat zij hoger op de sociale ladder staat dan ______ geeft haar nog niet het recht zich zo arrogant op te stellen." 0 hij0 hem

11. Inhoudelijke uitgangspunten • Er wordt getoetst op de toepassing van grammaticale kennis die leerlingen aan het eind van de onderbouw van het VO dienen te hebben • De toets is gericht op de toepassing van het grammaticale begrippenapparaat bij het benoemen van woordsoorten en zinsdelen • begrippen op woord-/zinsniveau kunnen benoemen • i.p.v. concrete invuloefening • Toets is gericht op het heractiveren van grammaticale kennis

12. Logistieke uitgangspunten De toets moet: • in 2010/2011 onder alle eerstejaars die een opleiding aan DMT volgen, worden afgenomen • ontwikkeld worden uit bestaand materiaal VU Amsterdam/ Universiteit Leiden • ontwikkeld worden binnen bestaande systemen UU (Blackboard) • QMP materiaal via Respondus converteren naar Blackboard • individuele toetsresultaten per toetscategorie kunnen genereren

13. Inhoud grammaticatoets 100 meerkeuzevragen in de categorieën • Taalkundig ontleden (30) • Enkelvoudig redekundig ontleden (40) • Samengesteld redekundig ontleden (30)

14. Pilot grammaticatoets • 22 en 26 maart 2010 • Afgenomen onder in totaal 114 studenten, die zich niet hadden voorbereid op de toets • Afkomstig uit opleidingen: • Engels (83) • Italiaans (6) • Literatuurwetenschap (25)

15. Resultaten pilot grammaticatoets

16. Resultaten pilot per onderdeel

17. Conclusies n.a.v. pilot • Toets voorbereiden is essentieel • Kennis grammaticale begrippen van groot belang  Toepassen kunnen studenten wel • Extra aandacht grammatica is nodig • Bij verplichtstelling toets moet ondersteuning worden geboden • Aandachtspunt: eenduidigheid gehanteerde grammaticale begrippen

18. Blackboard als toetsomgeving In essentie leeromgeving • Toetsmogelijkheden • Inhoudelijk: Wat heb je in BB wel en niet kunnen realiseren qua toetsing, feedback en resultaten? • Praktisch: • Vragen makkelijk bewerken? • Resultaten makkelijk te bewerken? • Hoe werkt randomisatie van vragen? • Voldoet dit aan vooraf gestelde eisen? • Evt. technische problemen?

19. Bewerken vragen in BlackBoard • In BlackBoard kunnen vragen eenvoudig worden bewerkt

20. Bewerken vragen in BlackBoard • Per categorie kunnen vragen worden toegevoegd of verwijderd, al bestaande vragen kunnen worden aangepast

21. Bewerken resultaten in BlackBoard • In BlackBoard kunnen alle resultaten van alle studenten worden gevonden in het Grade Center

22. Bewerken resultaten in BlackBoard • Alle resultaten kunnen gedownload worden in een Excelbestand • Deze resultaten zijn eenvoudig te sorteren, bijvoorbeeld op totaal resultaat of het resultaat van een deeltoets • Zo is ook te zien welke student de toets nog niet gemaakt heeft

23. Bewerken resultaten in BlackBoard

24. Randomisatie van vragen in BlackBoard • Met een “random block” maakt BlackBoard een willekeurige selectie uit het beschikbare materiaal: • Drie random blocks: taalkundig, redekundig enkelvoudig, redekundig samengesteld • Per random block aangeven hoeveel vragen uit welke categorieën • Overkoepelende pool met handmatig geselecteerde vragen uit verschillende categorieën waaruit BB een willekeurige toets genereert • Elke student krijgt een andere, gerandomiseerde toets • Hierdoor is het mogelijk dat uit een groep vragen zowel oefen- als toetsmateriaal gehaald kan worden

25. Uitbreiding van de toetsmogelijkheden in BlackBoard • Op het moment bestaat de toets uit drie delen • De toets kan eenvoudig worden uitgebreid: • Nieuwe vragen toevoegen binnen de drie delen • Nieuwe delen toevoegen, zodat de toets uit meer dan 3 delen bestaat. • Voor elke nieuwe categorie kan een nieuwe pool gemaakt worden • Het nieuwe testdeel bestaat uit een random block met vragen uit de nieuwe categorieën

26. Wat ziet de student? • Bij het maken van een test kun je een instructie schrijven die studenten te zien krijgen bij het maken van de toets • Denk aan algemene instructie; tijdslimiet; benodigde score • Er loopt een timer mee die aangeeft hoeveel tijd is verstreken • De toets bestaat uit drie delen; de student vult alle vragen van een deel achter elkaar in en stuurt het geheel in • Terugkijken naar eerdere vragen binnen een deel is dus mogelijk • Terugkijken naar vragen uit een eerder deel is niet mogelijk

27. Wat ziet de student?

28. Blackboard als toetsomgeving Nadelen BB: • Resultaten alleen per toetsonderdeel, niet op niveau van vraag • Resultaten per grammaticaal onderdeel kunnen niet direct worden teruggekoppeld • Deze informatie is niet op studentniveau en niet op groepsniveau te verkrijgen • Systeem schiet tekort als het gaat om direct terugkoppelen van resultaten naar bijspijkermateriaal

29. Implementatie grammaticatoets • September 2010 • Alle instromende eerstejaars ontvangen brief met aankondiging toets en voorbereidingsmateriaal • Toets 2010/2011 nog niet verplicht • Bestuurlijke overwegingen verplichtstelling 2011/2012