“ Digitaal toetsen en toets gestuurd leren ” Voorstellen Toetsen (soorten)

1. “Digitaal toetsen en toets gestuurd leren” • Voorstellen • Toetsen (soorten) • Het proces van digitale toetsafname • Voordelen digitaal toetsen (incl. vraagtypen en analyse) • Nadelen digitaal toetsen • Praktische aspecten • Discussieenquete.hszuyd.nlgebruikersnaam en ww: das Presentatie DAS-Conferentie 03-02-2011

2. Karel Lemmens (1977)Docent(natuurkunde)  (1990) management taak (HLO/CT)  (2001)docent (wiskunde en statistiek) Ingangstoetsen, voortgangstoetsen etc  (te)veel tijd nodig voor toetsen opstellen en corrigeren 2004: Andere manier van toetsen ? Digitale toetsafname via Blackboardvoor wiskunde t/m diff en int. Statistiek t/m betrouwbaarheidsintervallen Presentatie DAS-Conferentie 03-02-2011

3. Toetsen In elke fase kunnen digitale toetsen (beeldschermafname) hier een rol in spelen. Presentatie DAS-Conferentie 03-02-2011

4. Proces van digitaal toetsen Docent/auteur -Maken en testen vragen -Maken en testen toetsen student Afname toets en verzenden van toets Poortwachter/BO Publiceren op internet voor studenten Wat is belangrijk Poortwachter/BO Rapportagecijfer – analyse kwaliteit Scholing -Bouwen vragen/testen -Omdenken in digitale vraagvormen -bouwen van Toetsgestuurd leertraject -voldoende digitale infrastructuur aanwezig: PC’s en draadloos netwerk -goed werkende studenten laptops -beveiligde toetsomgeving • Vraagbaak voor auteurs • Zorgen voor koppeling met TIS • Zorgen voor instructie surveillanten Presentatie DAS-Conferentie 03-02-2011

5. Voordelen digitaal toetsen • Er zijn veel verschillende vraagtypen mogelijk (ook binnen één toets) die automatisch worden nagekeken • Er kunnen multimedia in de toetsen verwerkt worden: simulaties, video, geluid, grafieken, foto’s • Er is de mogelijkheid om hints, tips of verdiepende vragen aan te bieden. • Er kan een databank met mogelijk toetsvragen opgesteld worden, waardoor toetsen automatisch gegenereerd kunnen worden en dus ook sneller opgesteld zijn. De vragen en/of antwoorden op vragen van een digitale toets kunnen voor elke student in een andere volgorde gezet worden zodat het spieken bemoeilijkt wordt. Presentatie DAS-Conferentie 03-02-2011

6. Voordelen digitaal toetsen • Deze databank kan gedeeld worden met collega’s. Dit bevordert de kwaliteit van de vragen en maak een snelle uitbreiding van de toetsbank mogelijk. Uit die databank kunnen oefentoetsen of diagnostische toetsen gegenereerd worden • Toetsen worden meestal via het internet aangeboden. Zo kunnen studenten formatieve toetsen maken waar en wanneer het hen het beste uitkomt. • De studenten kunnen direct een beoordeling en automatisch feedback over hun toets verkrijgen • Levert op termijn tijdwinst en betere toetsvragen op • Toets en vragenevaluatie kan in het algemeen snel gebeuren. Presentatie DAS-Conferentie 03-02-2011

7. Nadelen digitaal toetsen • Digitale vragen en toetsen ontwikkelen kost veel tijd. - Scholing - nadenken over structuur van de itembank - bestaande vragen moet je creatief ombouwen naar een van de vele vraagtypen binnen het digitale toetsprogramma • Vragen en toetsen moeten in iedere fase van de toetsontwikkeling worden uitgetest. • De itembank vraagt een continu versiebeheer. • De digitale afname via het internet vraagt een goede en stabiele infrastructuur. • Essay-vragen zijn nog steeds niet (goed) automatsich na te kijken. Presentatie DAS-Conferentie 03-02-2011

8. Praktische aspecten: • Goed scholingstraject nodig voor auteurs/docenten • Voldoende, goed bereikbare ondersteuning organiseren • Een testtraject voor nieuwe studenten in plannen • Discipline bij studenten om hun laptop op orde te houden • Veel aandacht besteden aan het aspect veiligheid • Kiezen voor een programma dat secured testen mogelijk maakt • Extra zekerheid in de toets inbouwen zoals: - een vraag naar een code die alleen in het toetslokaal bekend is - de score op een presentielijst laten noteren - speciale template-kleur Presentatie DAS-Conferentie 03-02-2011

9. Praktische aspecten: • Er moet heel gestructureerd en gedisciplineerd worden gewerkt. - in alle fasen moet er worden getest - je kunt niet zomaar snel nog een verandering aanbrengen in een vraag • veel PC’s nodig of een verplichte studentlaptop • Bijscholing voor surveillanten • Goede koppeling nodig tussen een toetsaanmeldsysteem en het deel van het digitale programma waarin toetsen voor studenten worden gereed gezet. • Ondersteuning vanuit een ict-omgeving nodig (functioneel en technisch beheer) Presentatie DAS-Conferentie 03-02-2011

10. Stand van zaken:Summatief: -Structureel bij wiskunde en statistiek bij vrij veel opleidingen -Veel basisvakken bij werktuigbouwkunde -Veel toetsen bij NID -Gestart bij FM, CM, HJO, MMD, biometrie, TBK -Faculteit LS: Wiskunde, statistiek Celbiologie, fysiologie, SPBC, bacteriën in de fabriek, genetica, ONDV, chromatografie, pH, electrochemie, UV-VIS, veiligheid, praktijk chemie, biomaterialen, nanotechnologie, natuur v.d. mens, reactiekinetiek, VEST -Al vele jaren gebruikt als databank bij faculteit gezondheid -Enquêtes afnemen Presentatie DAS-Conferentie 03-02-2011

11. Formatief: sinds 2 jaar voor wiskunde in de technische opleidingen. (600 studenten) Lesweek 3 t/m 9 Gebruik formatief lesmateriaal met vragenuren en tussentoetsen en eindtoets 1e lesweek Ingangstoetsing 35% + Uiteindelijk 75% + Ontwikkeling en bijstelling form.toetsmateriaal: 250 ku Studenten werken gemiddeld ongeveer 18x in de formatieve toets Zonder (summatieve) tussentoetsen resultaat beduidend minder Presentatie DAS-Conferentie 03-02-2011

12. Vragen ? Discussie Presentatie DAS-Conferentie 03-02-2011

13. Numerieke vragen Presentatie DAS-Conferentie 03-02-2011

14. Numerieke vragen Beoordeling: 1.Exact antwoord 2. Antwoord binnen bepaalde marge Presentatie DAS-Conferentie 03-02-2011

15. Drag and Drop Presentatie DAS-Conferentie 03-02-2011

16. Drag and Drop Presentatie DAS-Conferentie 03-02-2011

17. Drag and Drop Creativiteit is belangrijk Presentatie DAS-Conferentie 03-02-2011

18. Ja/Nee Goed/ Fout Alle vormen van meerkeuze Multiple choice Multiple response Pull Down Knowledge matrix Select a blank Likertscale Presentatie DAS-Conferentie 03-02-2011

19. Multiple choice Keuzevolgorde kan voor iedere student (random) anders zijn. Presentatie DAS-Conferentie 03-02-2011

20. Multiple response = MPC met meerdere goede antwoorden Keuzevolgorde kan voor iedere student (random) anders zijn. Presentatie DAS-Conferentie 03-02-2011

21. Pull Down -Uitkomst 1 -Uitkomst2 -Uitkomst 3 -Uitkomst 4 -Geen van deze uitkomsten Presentatie DAS-Conferentie 03-02-2011

22. Select a blank Achter de knop zitten de antwoordmogelijkheden Fill in blanks Likert scale = de vraagvorm voor evaluaties Presentatie DAS-Conferentie 03-02-2011

23. Matching Achter de knoppen zitten de antwoordmogelijk-heden -aceton -ether -water -butaan -ethanol Presentatie DAS-Conferentie 03-02-2011

24. Content Terug naar presentatie Presentatie DAS-Conferentie 03-02-2011

25. Terug naar presentatie Presentatie DAS-Conferentie 03-02-2011