180 likes | 314 Views
Naar een indicatorenstelsel. Jim Allen Ger Ramaekers Rolf van der Velden Researchcentrum voor Onderwijs en Arbeidsmarkt. Achtergrond. Met accreditatiekader meer aandacht voor de resultaten van onderwijs: behoefte aan indicatoren
E N D
Naar een indicatorenstelsel Jim Allen Ger Ramaekers Rolf van der Velden Researchcentrum voor Onderwijs en Arbeidsmarkt DAIR Indicatorenstelsel
Achtergrond • Met accreditatiekader meer aandacht voor de resultaten van onderwijs: behoefte aan indicatoren • Er wordt wel veel onderzoek verricht naar de resultaten van onderwijs, maar een integrerend kader ontbreekt • Dit paper is een aanzet voor een indicatorenstelsel op basis van bestaande data in HBO- en WO-Monitor DAIR Indicatorenstelsel
Eisen indicatorenstelsel • Wetenschappelijk: gebaseerd op relevante inzichten • Absolute maatstaf: niet alleen rangordening • Differentiatie: dekkend voor alle dimensies • Vergelijkbaarheid: mogelijkheid tot benchmarking tussen instellingen en opleidingen • Inzichtelijkheid • Efficiëntie: eenvoudig te verzamelen DAIR Indicatorenstelsel
Wat is kwaliteit • Twee aspecten: doeltreffend en doelmatig • Doeltreffendheid (of effectiviteit): vervult het onderwijs de functies die ze moet vervullen? • Doelmatigheid (of efficiëntie): mate van kostenefficiëntie waarmee deze functies vervuld worden DAIR Indicatorenstelsel
Drie functies van onderwijs • Kwalificatiefunctie: het bijbrengen van relevante kennis, vaardigheden en houdingen • Selectiefunctie: beoordelen van studenten op aanwezige competenties en op grond hiervan certificeren • Allocatiefunctie: toeleiden naar functies op de arbeidsmarkt DAIR Indicatorenstelsel
Elke functie heeft een doelmatigheidsaspect • Kwalificatiefunctie: leerrendement (groei in kennis afgezet tegen instructiekosten) • Selectiefunctie: intern rendement (aantal diploma’s afgezet tegen verblijfsduur van gediplomeerden én ongediplomeerden) • Allocatiefunctie: extern rendement (opbrengsten en kosten voor individu of samenleving) DAIR Indicatorenstelsel
Werkwijze • Data ontleend aan HBO- en WO-Monitor: landelijk onderzoek onder afgestudeerden 1½ jaar na afstuderen • Per component zijn indicatoren ontwikkeld • Voor elke indicator is een rapportcijfer berekend • Dit rapportcijfer is gebaseerd op het percentage afgestudeerden dat boven een bepaalde norm zit • Het totaal oordeel per component is het gemiddelde van de onderliggende indicatoren DAIR Indicatorenstelsel
Indicatoren kwalificatiefunctie • % afgestudeerden dat over de competenties beschikt die vereist zijn in het kerndomein: 23 verschillende aspecten m.b.t. • Professionele expertise • Flexibiliteit • Innovatie en kennismanagement • Mobilisering van menselijk kapitaal • Internationale oriëntatie • Oordeel of opleiding voldoende basis biedt om te starten op de arbeidsmarkt • Oordeel of opleiding voldoende basis biedt voor verdere ontwikkeling van competenties • Oordeel over breedte van opleiding • Oordeel over diepgang van opleiding DAIR Indicatorenstelsel
Voorbeeld WO-economie DAIR Indicatorenstelsel
Indicatoren selectiefunctie • Twee aspecten: worden de juiste mensen geselecteerd en wordt voldoende streng geselecteerd? • Moeilijk om goede indicatoren te vinden • Verschilscores doctoraal cijfers WO en eindexamencijfers VO • Oordeel over zwaarte van de opleiding • Opleiding opnieuw kiezen DAIR Indicatorenstelsel
Voorbeeld WO-economie DAIR Indicatorenstelsel
Allocatiefunctie • Oordeel over beroepsvoorlichting • Functieniveau sluit aan bij opleidingsniveau • Oordeel over aansluiting opleiding-beroep • Oordeel over benutting capaciteiten in huidige functie • Tevredenheid met huidige baan DAIR Indicatorenstelsel
Voorbeeld WO-economie DAIR Indicatorenstelsel
Indicatoren extern rendement • Werkloosheidspercentage na 1½ jaar • Bruto uurloon • Oordeel over carrièremogelijkheden huidige functie DAIR Indicatorenstelsel
Voorbeeld WO-economie DAIR Indicatorenstelsel
Rapportcijfers • Kwalificatiefunctie: 7.9 • landelijk: gem. 7.3, min. 7.0, max. 7.9 • Selectiefunctie: 7.4 • landelijk: gem. 7.6, min. 7.2, max. 8.1 • Allocatiefunctie: 6.1 • landelijk: gem. 5.6, min. 5.0, max. 6.2 • Extern rendement: 7.5 • landelijk: gem. 7.4, min. 7.2, max. 7.6 DAIR Indicatorenstelsel
Overwegingen bij de interpretatie • Niet elk aspect is even belangrijk; prioriteit bij kwalificatiefunctie, maar ook afhankelijk van eigen doelstellingen • Niet alles is toe te rekenen aan de opleiding, maar … • sommige indicatoren hebben wel een belangrijke signaalwaarde • Indicatoren in onderlinge samenhang bestuderen DAIR Indicatorenstelsel
Hoe verder? • Dit is een aanzet! • Inhoudelijke onderbouwing: verder bespreken met NVAO, NQA, QANU, DAIR etc. • Methodologische onderbouwing: bepaling norm, verschillen tussen opleidingen, etc. • Testen proefopzet dit jaar DAIR Indicatorenstelsel