340 likes | 514 Views
Evaluatie van onderzoek in de rechtswetenschappen. VLIR Subwerkgroep Onderzoek Rechten Alain Verbeke - Voorzitter Ronde van de Vlaamse rechtsfaculteiten Oktober 2005. Agenda. 1. Model voor integrale kwaliteitsevaluatie: snelle opfrissing 2. Ranking van tijdschriften: werkwijze
E N D
Evaluatie van onderzoek in de rechtswetenschappen VLIR Subwerkgroep Onderzoek Rechten Alain Verbeke - Voorzitter Ronde van de Vlaamse rechtsfaculteiten Oktober 2005
Agenda • 1. Model voor integrale kwaliteitsevaluatie: snelle opfrissing • 2. Ranking van tijdschriften: werkwijze • 3. Ranking van boeken: werkwijze Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
1. Model - Opfrissing • Integraal profiel • CV Format • Nationaal en internationaal/buitenlands • Tweetrapsraket Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
Integraal profiel Een onderzoeker in de rechten moet een voldoende compleet profiel hebben, niet beperkt tot enkel publicaties noch tot alleen maar projecten. Hij of zij kan en moet eigen accenten (kunnen) leggen. Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
Integraal profiel • Integrale evaluatie van onderzoek • Met een kwantitatief en kwalitatief minimum voor drie categorieën (publicaties/ projecten en doctoraat /lezingen) • Voor alle onderzoeksoutput, ook buiten dit minimum, een kwaliteitsreliëf met ABC criteria, zonder kwantitatieve richtlijnen Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
CV Format Onderzoeksoutput • Rubriek I van CV Format • Zes onderzoeksparameters: • 1. publicaties • 2. projecten • 3. doctoraatsbegeleiding • 4. lezingen • 5. adviesverlening • 6. wetenschappelijke adviesraden • Indicatie van ABC en nationaal/internationaal Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
CV FormatWetenschapsondersteuning Rubriek II van CV Format • Client seminars, professional seminars • Organisatie van congressen • Codex (ook geännoteerd) • Rechtspraakbundels • Artikelen in tijdschriften of boeken zonder onderzoeksfinaliteit Rubriek III = Varia (prijzen, beurzen, onderzoeksverblijven, etc.) Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
Nationaal en internationaal • Internationaal = dimensie • Geen waardeoordeel • Niet noodzakelijk beter dan nationaal • Volgt de ABC criteria • Nationale A publicatie – internationale C publicatie • Internationale A lezing – nationale C lezing Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
Nationaal en internationaal • Internationaal tijdschrift • Meer dan ½ actieve redactie is niet Belg • Internationaal boek • Boekencommissie • Internationale lezing • In het buitenland gehouden • In België: niet in het Nederlands en bijgewoond door een overwegend internationaal publiek Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
Tweetrapsraket • In principe reliëf in CV door de diverse rubrieken en indicatie van ABC en nationaal/internationaal • In principe enkel kwaliteitscriteria, geen kwantiteit • Integraal profiel vereist evenwel een minimum aan kwantitatieve vereisten: dit is het minimum niveau waaraan elke onderzoeker minstens moet voldoen Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
Tweetrapsraket Minimum niveau • Referentieperiode = 5 jaar (post doc: 3 jaar) • Drie categorieën: publicaties/projecten en doctoraatsbegeleiding/lezingen • Differentiatie volgens academische graad • 6 9 12 en 1 2 3 regel • Meeteenheid = B (alleen voor kwantitatief minimum) • 1 A art = 2 B = 4 C1 • 1 hst in A boek = 1 A art • 1 A boek = 5 A art = 10 B art 1 B boek = 5 B art • 1 A lezing = 3 B = 6 C Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. Ranking van tijdschriften: werkwijze • Samenstelling van de commissie • Onafhankelijkheidsverklaring • Intern effect van de ranking • Tijdens de procedure hebben commissieleden die een band hebben met een tijdschrift altijd de vergadering verlaten. Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. Tijdschriften • Vlaamse en tweetalig Belgische tijdschriften • 126 tijdschriften aangeschreven • 71 inzendingen • Vraag tot selectie van 1/3 jaargang in periode 2002-2004 en minstens 5 nrs. per jaargang • Rankingcriteria op voorhand medegedeeld Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. Tijdschriften • Rankingcriteria model: wetenschappelijke originaliteit, grondigheid, overschrijdend karakter • 70% norm: ten minste 70% van artikelen bepalen niveau van het tijdschrift • Enkel juridische artikelen in juridische tijdschriften (> 20% juridische artikelen (ook multi- en interdisciplinair)) Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. TijdschriftenEerste fase – Belgische leden • Eerste ronde • 3 subgroepen van 2, telkens met de Voorzitter • Nummers doornemen zonder tijdslimiet • Tijdschrift per tijdschrift dialoog om te komen tot voorstel van score Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. TijdschriftenEerste fase – Belgische leden • Tweede ronde • Plenair met alle Belgische leden • Vergelijking van resultaten van elke groep • Opnieuw tijdschriften doornemen • Dialoog om te komen tot consensus voorstel • Consensus = unaniem of bij ruime meerderheid Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. TijdschriftenTweede fase – buitenlandse leden • Ruim op voorhand model en criteria overgemaakt • Geen kennis van resultaten Belgische leden Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. TijdschriftenTweede fase – buitenlandse leden • Eerste ronde • Alle buitenlandse leden samen met Voorzitter • Doornemen van alle nrs. van alle tijdschriften zonder tijdslimiet • Via dialoog consensus voorstel van score voor elk tijdschrift Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. TijdschriftenTweede fase – buitenlandse leden • Tweede ronde • Testen van de resultaten op interne consistentie • Opsporen van anomalieën • Tijdschriften vergelijken met elkaar, op alle niveaus Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. TijdschriftenTweede fase – buitenlandse leden • Derde ronde • Vergelijken van de resultaten buitenlandse leden met de resultaten van de Belgische leden (plenair) • Indien uitkomst gelijk: geen actie • Indien verschil: vergelijking met resultaten van de drie Belgische subgroepen • Bij gelijkenis met 2 subgroepen: behoud van voorstel • Bij grotere verschillen en twijfelgevallen: opengelaten • Finale discussie over benchmarks A B C en aftoetsen van alle voorstellen daaraan Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. TijdschriftenDerde fase – Plenair Belgische en buitenlandse leden • Eerste ronde • Vergelijken van de resultaten buitenlandse leden met de resultaten van de Belgische leden (plenair) • Indien uitkomst gelijk: behoud van voorstel • Indien verschil: • detailonderzoek van het betrokken tijdschrift • Via dialoog komen tot consensus voorstel Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. TijdschriftenDerde fase – Plenair Belgische en buitenlandse leden • Tweede ronde • Grondige discussie over de benchmarks van de ranking • Onderzoek op interne consistentie door nieuwe analyse van alle tijdschriften op de grensgebieden van de ranking • Finale goedkeuring van de ranking Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. TijdschriftenResultaten en beslissingen • Niet gerankte tijdschriften • Niet juridisch (< 20% juridische artikelen) • Wetenschappelijk: vermelden bij I/1.8 • Niet wetenschappelijk: vermelden bij II/3.4 • Onvoldoende onderzoeksfinaliteit: vermelden bij II/3.4 • Niet ingezonden: vermelden bij I/1.8 met vermelding “niet gerankt” • Inzendingen kunnen nog (worden behandeld door boekencommissie): dan vermelden bij I/1.8 met vermelding “ranking procedure hangende” Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. TijdschriftenResultaten en beslissingen • Artikelen: 5 categorieën • A: wetenschappelijk tijdschrift op internationaal niveau • B1/B2: tijdschriften met duidelijke onderzoeksfinaliteit • B1 wetenschappelijk iets sterker • C1: degelijke vakgerichte tijdschriften met een zekere onderzoeksfinaliteit • C2: onderzoeksmatig zeer beperkt Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. TijdschriftenResultaten en beslissingen • Artikelen: piramide • A 3 • B1 9 • B2 10 • C1 15 • C2 19 • Sommige tijdschriften niet gerankt, soms alleen voor noten • In kwantitatief minimum model worden C1 artikelen ook meegenomen Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
2. TijdschriftenResultaten en beslissingen • Noten: 3 categorieën: A B C • Geen A rankings, 10 B rankings, 3 C rankings en een aantal niet gerankt als wetenschapsondersteunend Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
3. Boeken • Samenstelling van de commissie • Onafhankelijkheidsverklaring • Intern effect van de ranking • Tijdens de procedure zullen commissieleden die een band hebben met een boek de vergadering verlaten. • Timing: januari-februari 2006 Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
3. Boeken • Rankingcriteria model: wetenschappelijke originaliteit, grondigheid, overschrijdend karakter • 70% norm: ten minste 70% van artikelen in het boek bepalen het niveau van het boek • Enkel juridische artikelen in een boek worden beoordeeld • Wellicht geen ranking indien boek <20% juridische artikelen: cf. tijdschriften • Boekencommissie geeft ABC ranking en ook label nationaal of buitenlands/internationaal Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
3. Boeken – Wat? • Boeken • Bijdragen in boeken • Losbladige werken (indien nog updates sinds 1 januari 2004) • Syllabi • Proceedings van congressen • Onderzoeksrapporten • Niet: codex, rechtspraakbundel, etc. (CV II/3.4: wetenschapsondersteunend) Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
3. Boeken – Wat? • Verschenen vanaf 1 januari 2004 • Boeken van voor die datum: vermelding “geen ranking beschikbaar” • Boeken van na die datum die niet ingediend zijn: vermelding “niet gerankt” in rubriek I/1.8 Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
3. Boeken – Praktisch • Bij voorkeur minstens 2 exemplaren (mag ook digitaal: jetje.degroof@vlir.be) • Indien het echt niet anders kan, slechts één exemplaar bezorgen • Ook kopies of PDF mogelijk – de VLIR verbindt zich ertoe de auteursrechten te respecteren • Voor 30 november 2005 • Eventueel centralisatie per faculteit en dan vanuit de faculteit aan de VLIR bezorgen Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
3. Boeken – Praktisch • Elke inzending via email bevestigen bij Jetje Degroof • Lijst van voor ranking ingezonden boeken op VLIR website zodat auteurs van bijdragen in die boeken geen extra exemplaren moeten inzenden Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
3. Boeken – Praktisch • Na de ranking worden alle exemplaren terugbezorgd door de VLIR aan faculteitssecretariaat • Steeds goed op het boek de Universiteit en naam inzender vermelden Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005
Verdere informatie: • Alain.Verbeke@law.kuleuven.be • Jetje.Degroof@vlir.be • VLIR – Egmontstraat 5 – 1000 Brussel • 02 550 15 78 Alain Verbeke Ronde Vl. Rechtsfaculteiten Oktober 2005