Workshop Formatief toetsen in het onderwijs 26 Maart 2013 Rubrics Carel Burghout

1. Workshop Formatieftoetsen in het onderwijs26 Maart 2013RubricsCarel Burghout

2. Rubrics

3. Rubrics en assessment Watzijn rubrics? Waarom rubrics? Rubrics gebruikenvoorformatievedoeleinden (assessment for learning) Rubrics gebruikenvoor summative doeleinden (beoordeling) Hoe maak je een rubric? Voorbeeldenvan effecten rubrics bij M Ed Engels Wat mag ikeventueelalsbekendveronderstellen?

4. WAT IS EEN RUBRIC? Een rubric maakt gebruik van precieze criteria om prestaties te evalueren of te beoordelen. Analytische rubrics hebben meestal een vaste vorm: verticaal: een overzicht van criteria waaraan de prestatie moet voldoen horizontaal: een aantal (meestal vier) niveaus van beheersing (van zeer zwak tot uitstekend, van beginner tot expert) DIT SOORT RUBRICS LAAT JE KIJKEN NAAR AFZONDERLIJKE DELEN DIE SAMEN HET GEHEEL VORMEN

5. HOLISTISCHE RUBRIC HOLISTISCHE RUBRICS ANALYSEREN HET WERK ALS EEN GEHEEL. GEBRUIK VAN ANALYTISCH OF HOLISTISCH HANGT AF VAN JE DOEL. MEESTAL MEER GERICHT OP HET (EIND) PRODUCT DAN OP HET PROCES

6. Waarom Rubrics? • Assessment for Learning and Assessment of Learning werken in elkaarsverlengde met hetzelfde instrument • Belangaangeduid door Hattie and Timperley van feedback, feed up and feed forward • Transparantie, objectiviteit en betrouwbaarheidbetergeborgdvoor‘the untestable’ • Navraagbijstudenten en in het veld wekt de indrukdat rubrics in het voortgezetonderwijs al meerzijningeburgerddanaanonzelerarenopleiding

7. Rubrics en Assessment for Learning • Geeft de docentenvoorafeenraamwerkvoorbeoordeling en doelenom met studententebespreken (feed up) • Raamwerk is ookgeschiktomoordelenaanlerentekoppelen (feedback) • Docent kan student vertellenwelkniveau van beheersing is behaald en naarwelkniveaugestreefdmoetworden ,de ‘gap’ (feed forward)

8. Rubrics en Assessment for Learning Duidelijke criteria and leerdoelenstellenstudenten in staatomzelf de rubric tehanteren (individueel of met peers) en zonodigverbeteringenaantebrengen Instrument omsterkten en zwaktenduidelijkteverwoorden Rubrics samen met studentenontwikkelenkanmotiveren en zorgenvooreenkritischehouding ten opzichte van het televerenwerk

9. Rubrics en beoordelen Transparantie: je gebruikt het zelfde instrument voorbeoordelingdat je voor feedback hebtgebruikt Geefthouvastbijmeerderebeoordelaars Student is van meet afaanbekend met criteria en gewenstniveau Student kanmedeverantwoordelijkgemaaktwordenvoor criteria Gewichtdataan de verschillende criteria gegevenwordtzonodiginzichtelijkgemaakt (scoring rubric)

10. Stappenplanmaken rubric : • Benoemleerdoelen en waarneembare criteria die wilt zien (en eventueelkenmerken die je niet wilt zien) Ditwordt je linkerkolom • Brainstorm kenmerkenvoor elk criterium en zoekuit hoe je voor elk criteriumniveauszoukunnenbeschrijven • Formuleerpreciezedescriptorenvoor het laagsteen voor het hoogsteniveau • Schrijfdescriptorenvoor de overgeblevenniveaus • Bespreekde rubric (collega , studenten) om vast testellen of alleshelder is beschreven • (Tijdens de cursus) Verzamelbewijzen van werk op elk van de niveausom later tegebruikenalsijkpunten 7. Evalueer. Herzie de rubric indiennodig

11. Eersteopzet: alleen criteria /

12. Rubric deelsgevuld

13. De complete rubric

14. Maakeen rubric • Maakeen rubric op basis van het sjabloon in de hand-outs samen met de persoon / de personennaast je. • Volg het stappenplan in de hand-out of op het scherm • Focus van de rubric is omeenworkshop sessiealsdezetebeoordelen • Je kuntookals je criteria etc. bij de hand hebtwerkenaaneen rubric op maatvooreeneigencursus

15. Effectenintroductie rubric bij Academic Writing • Studentenverplichtomhunwerkeerstteijkenaan de rubric, eventueelverbeteren en dan pas inleveren • Eerste effect: minder benauwdheidomtrent het schrijven en minder vragen over hoe het werkbeoordeeldwerd • Later effect: beteringeleverdwerk met veelmeeraandachtvoor de feedback en grotereinspanningenom het werktestructureren • Rubric Arthur & Chappius, aangepast C. Burghout

16. Rubric Writing na twee jaar • Hogeacceptatie en waarderingals instrument voor assessment • Ingevoerd in eigenlespraktijk van studenten • Moeilijkaantegevenwaar rubric kwaliteitheeftverbeterd, genoemd: ‘diepgang’ • Rubric helpt feedback teverwerken, zetaan tot nadenken over watbelangrijk is • Na driejaar ‘vanzelfsprekend’

17. Rubric Poetry File 2012 • Groep met ervaring rubric writing gevraagdom rubric temakenvoorcursuspoëzie (zie hand-outs) • Rubric gebruiktvoorsamenstelling dossier met daarineenkeuze van gedichtenomtedidactiseren • Input relevantedoelenuitkennisbasis en studiegids • Rubric samengesteld in les met groepn.a.v. input van driestudenten en feedback van de groep • Groepkan al op goedniveaumeepraten over rubrics • Studenten: samenstelling dossier en feedback peers • Docent: feedback en uiteindelijkoordeel

18. Poetry file rubric 2012-2013 • Helderheid criteria geenprobleem (respons 12 van de 20 in groep) • Indeling rubric welprobleem. Oude opzetwerktwelvoorselectie, nietvoor het didactiseren • Vaagtaalgebruik, zoals‘other sources’waarmeeliteratuurstudies en essays werdenbedoeld • Wens omcijferindicatieaan de kolommen toe tevoegen Responsverwerkt in nieuweopzet met aangepasteformulering (zie hand-outs)

19. Effect tot nu toe Studentengaanbewusterom met feedback Studentenzijnbewuster van het belang van transparante, objectieve en betrouwbarebeoordeling Studentenvertrouwd met criteria, ‘rubric literate’, in staatom rubric teverbeteren Meedenken, meewerkenaanontwerpenmotiveert.

20. Bronnen en vindplaatsen Rubrics maken met internet tools: RubiStar
Recipes4Success
Rubric Machine
Teachnology Rubrics toegelicht: http://webdidactiek.kennisnet.nl/webactiviteiten/web-basedtoetsen/rubrics http://www.leermiddelenvo.nl/subpage/rubrics http://www.platformdigitaaltoetsen.nl/?p=909