300 likes | 413 Views
Metodika hodnocení výsledků výzkumu a vývoje. Bohuslav Ga š Karolinum, UK 18 . června 2009. Institucion ální prostředky na podporu výzkumu
E N D
Metodika hodnocení výsledků výzkumu a vývoje Bohuslav GašKarolinum, UK18. června 2009
Institucionální prostředky na podporu výzkumu Výzkumné záměry „První generace“ výzkumných záměrů bude financována do roku 2011, „druhá generace“ do roku 2013. Institucionální prostředky na základě zhodnocení dosažených výsledků Mezinárodní spolupráci České republiky ve výzkumu a vývoji Operační programy ve výzkumu, vývoji a inovacích Ministerstvem školství, mládeže a tělovýchovy nebo Ministerstvem průmyslu a obchodu Účelové prostředky na podporu výzkumu Základní výzkum – projekty GAČR Aplikovaný výzkum – projekty TAČR MK – aplikovaný VaV v oblasti národní a kulturní identity MZe – aplikovaný zemědělský VaV MZ – aplikovaný zdravotnický výzkum MŠMT – projekty mezinárodní spolupráce České republiky ve výzkumu a vývoji, – projekty v rámci programu velké infrastruktury, –specifický vysokoškolský výzkum – účelové prostředky
Rejstřík informací o výsledcích – RIV Údaje do RIV předávají poskytovatelé účelové a institucionální podpory z veřejných prostředků, kterými jsou správci příslušných kapitol státního rozpočtu (ústřední orgány státní správy, Grantová agentura České republiky, Akademie věd České republiky) nebo územní samosprávné celky.
V roce 1960 založil Eugene Garfield The Institute for Scientific Information (ISI). • Nyní Web of Knovledge – Thomson Reuters • Výběrová databáze • časopisů v databázi SCI • 1866 časopisů v databázi SSCI • Bibliografické informace o časopisech, zejména o jejich vzájemné citovanosti: • Jak je článek citován v ostatních článcích – citovanost • Jak je citován autor ostatními autory – H index • Jak je citován časopis ostatními časopisy – impaktní • faktor časopisu
h-index některých českých vědců Pavel Hobza AV ČR 65 Antonín Holý AV ČR 50 Václav Hořejší AV ČR 48 Petr Boček AV ČR 44 Pavel Martásek UK 37 Laureáti Nobelovy ceny za rok 2007 Mario Capecchi61 Sir Martin Evans61 Oliver Smithies86 "for their discoveries for introducing specific gene modifications in mice by the use of embryonic stem cells"
V roce 1960 založil Eugene Garfield The Institute for Scientific Information (ISI). • Nyní Web of Knovledge – Thomson Reuters • Výběrová databáze • časopisů v databázi SCI • 1866 časopisů v databázi SSCI • Bibliografické informace o časopisech, zejména o jejich vzájemné citovanosti: • Jak je článek citován v ostatních článcích – citovanost • Jak je citován autor ostatními autory – H index • Jak je citován časopis ostatními časopisy – impaktní • faktor časopisu
Body = 5 + 140 × Faktor Faktor = (1-N)/(1+N/0,14), kde: N = (P-1)/(Pmax-1) P = pořadí časopisu v daném oboru dle WoS v řadě seřazené sestupně podle IF, Pmax = celkový počet časopisů v daném oboru WoS U časopisů, které jsou ve dvou a více oborech, se jako výsledné pořadí bere to nejlepší.
- článek v impaktovaném časopise článek v časopise, který je obsažen v databázi Web of Science - recenzovaný odborný časopis vydávaný v ČR Zpracován dotazník, na www.vyzkum.cz jako webovská aplikace, cca 450 periodik - světové databáze SCOPUS, ERIH
Problém: u časopisů, které jsou ve dvou a více oborech, se jako výsledné pořadí bere to nejlepší. Časopis Dyes and Pigments, IF 2,796 Vyskytuje se v oborech MATERIALS SCIENCE, PAPER & WOOD (145 bodů) ENGINEERING, CHEMICAL (119bodů) CHEMISTRY, APPLIED (103bodů)
Body = 5 + 295 × Faktor Faktor = (1-N)/(1+N/0,057), kde: N = (P-1)/(Pmax-1) P = pořadí časopisu v daném oboru dle WoS v řadě seřazené sestupně podle IF, Pmax = celkový počet časopisů v daném oboru WoS. U časopisů, které jsou ve dvou a více oborech, se vypočte průměrné pořadí NÁVRH článek v prestižním impaktovaném časopise - Nature, Science, Proc. Natl. Acad. Sci. USA 500 bodů
Problém: malé obory Názor: Článek do International Journal of Nursing Studies, může napsat i nevysokoškolák, kdežto do Science píšou většinou lidé mající za sebou veleváženou výzkumnickou kariéru (o titulech nemluvě). Přesto oba časopisy generují týž počet bodů. Za celou historii časopisu International Journal of Nursing Studies tam nikdo z Česka ještě nepublikoval... Prof Hořejší: Myslím, že ten problém řešitelný je - zavedením "superclusterů„. Podle mého názoru by správný systém měl (na rozdíl od toho stávajícího) ty špičkové žurnály spíše ještě "nadhodnocovat".
Superclustery 1. Materiálové vědy MATER SCI BIOMATER MATER SCI CERAMICS MATER SCI CHARACTER TESTING MATER SCI COATINGS FILMS MATER SCI COMPOSITES MATER SCI MULT MATER SCI PAPER WOOD MATER SCI TEXTILES METALLURGY METALL ENG 2. Inženýrství AUTOMAT CONTROL SYST CONSTR BUILD TECHNOL ENERGY FUELS ENG AEROSPACE ENG CHEM ENG CIV ENG ENV ENG IND ENG MANUFACT ENG MARINE ENG MECH ENG MULT ENG OCEAN ROBOTICS TRANSPORT SCI TECHNOL 3. Počítačové vědy a informatika 4. Vědy o Zemi 5. Zemědělské vědy 6. Biologicko-ekologické vědy 7. Chemické vědy 8. Matematika 9. Fyzikální vědy 12. Psychologické vědy 10. Experimentální biologie 13. Ekonomické vědy 11. Klinická medicína a farmakologie 14. Společenské vědy 15. Humanitní a umělecké obory 16. Ostatní (multidisciplinární)
Cluster Experimentální biologie Iritující příklady některých problémů v bodování jsou vyřešeny: Například časopis INT J ANDROL klesne z 300 bodů na 31,0 (prof. Hořejší kritizoval vysoké body) neboDYES PIGMENTS klesne z 204 bodů na 54 Výhoda je také to, že doposud několikanásobné výskyty mnoha časopisů v několika oborech se eliminují, protože jsou sdruženy v jednom superclusteru.
Námět pro budoucí Metodiku… Posuzování článků podle citovanosti, nikoliv podle toho, v jak impaktovaném časopise je uveřejněna… Kombinace impaktovanosti časopisu a citovanosti práce… Title: ELECTROCHEMICALLY INDUCED NUCLEAR-FUSION OF DEUTERIUMAuthor(s): FLEISCHMANN M, PONS SSource: JOURNAL OF ELECTROANALYTICAL CHEMISTRY Volume: 261 Issue: 2A Pages: 301-308 Published: APR 10 1989 Times Cited: 729
Knihy Rozlišení kvality knihy podle vydavatele…Kritérium počtu stránek…Top 100…
Články ve sbornících - články ve sbornících evidovaných v databázi Conference Proceedings Citation Index – Science nebo Social Science & Humanities (dříve ISI Proceedings) Obory: například COMPUTER SCIENCE ENGINEERING, ELECTRICAL & ELECTRONIC,TELECOMMUNICATIONS Za rok 2007 je v databazi ISI Proceedings celkem 2411 clanku autorů z České republiky. Pro srovnání: za rok 2007 je na WoS 6 782 clanku v impaktovaných časopisech
Problém: Definice a bodování výsledků aplikovaného výzkumu Jejich těžko kontrolovatelná expanze (funkční vzorek)