1 1 Az igazság pillanatai avagy A mezőny dicsérete Tudományos teljesítmény elemzése SciVal megoldásokkal Porosz Péter Elsevier PTE Innovációs Nap 2014. május 27.
2 2 Apu, miért fut itt ez a sok ember? Tudod, kisfiam, az első kap egy szép díszes kupát. Jó, de a többi miért fut?
3 3 Mérő László: A mezőny dicsérete Ez a vicc azért csattan, mert nyilvánvaló a válasz: mindenki azért fut, mert abban reménykedik, hogy győzhet. Pedig ez tévedés. Szinte minden versenyen legfeljebb 5-10 versenyző reménykedhet komolyan abban, hogy első lehet. A többi versenyző valójában nem azért fut, hogy nyerjen. Hanem azért, mert verseny van. Verseny van a futók számára, és mivel én futó vagyok, ott a helyem. [ ] A lényeg nem maga a verseny, hanem a versenyben megmérődő teljesítmény. Világbajnoki teljesítményre csak kevesen képesek, de relatíve színvonalas produkcióra sokan. A tőlünk telhető teljesítményt mindig hozni kell. És ha megtaláljuk azt a területet, ahol a mi személyes komparatív előnyünk van, akkor ez elég is. (2003.)
Pécsi Tudományegyetem, 2009-2013. 4 4
Összes tudományos publikáció: PTE 2004-2013. 5 5
Összes tudományos publikáció: PTE, DE, SZTE 6 6
Összes tudományos publikáció: PTE, DE, SZTE, Maribor 7 7
Idézettség: PTE, DE, SZTE, Maribor 8 8
Idézetek publikációnként 9 9
Publikációk minősége, PTE 2009-2013. 10 10
Tudományterületre súlyozott idézettségi mérték, FWCI 11 11
FWCI: PTE és Magyarország 12 12
FWCI: orvostudomány, PTE, DE, SZTE 13 13
FWCI: biokémia, genetika és molekuláris biológia, PTE, DE, SZTE 14 14
Összes tudományos publikáció Visegrádi négyek 15 15
Tudományterületre súlyozott idézettségi mérték V4 16 16
FWCI Magyarország és a Balkán országai 17 17
FWCI Magyarország és a Balti államok 18 18
FWCI Magyarország és néhány európai ország 19 19
Nemzetközi együttműködés aránya és hatása PTE, SZTE, DE, Maribor 20 20
21 21 Hogyan alkalmazzák ezeket az adatokat Európában? Kutatásfinanszírozási sémák Nemzeti kutatásiteljesítmény-értékelési stratégiák Kutatásiteljesítmény-értékelési modellek 21
22 22 Kutatásfinanszírozási sémák Blokkfinanszírozás Kompetitív finanszírozás Kompetitív blokkfinanszírozás 22
23 23 23 Blokkfinanszírozás A források elosztása INPUT-alapú Kutatói létszám Hallgatói létszám Infrastruktúra Történeti adatok Előnyei Támogatja az intézményi tervezést Intézményi szabadságot biztosít Lentről felfelé tervezhető Kivitelezése olcsó Hátrányai Nem díjazza a hatékonyságot Nem fejleszti a minőséget Nem kötődik a nemzeti prioritásokhoz
Kompetitív finanszírozás 24 24 24 A források elosztása OUTPUT-alapú Kutatási területek Projektek minősége Innováció Pályázói CV-k Előnyei Előmozdítja a hatékonyságot és a minőséget Alkalmazásával összhangba hozhatók a kutatási programok és a nemzeti prioritások Elősegíti az együttműködést Hátrányai Nem igazán alkalmazható az alapkutatásban Alkalmazása költségesebb Erősíti a Máté-effektust ( Akinek van, annak még adatik, akinek nincs, attól még az a kevés is elvétetik. )
Kompetitív blokkfinanszírozás 25 25 25 A források két komponensből állnak Fix komponens Outputhoz kapcsolódó komponens Fix komponens Blokkszerű Outputhoz kapcsolódó komponens Kutatási eredményeket díjaz Teljesítményt, minőséget, vagy mindkettőt értékel A források számítási képlet alapján kerülnek kihelyezésre
Nemzeti kutatásiteljesítmény-értékelési stratégiák 26 26 26 Mi az ország tudománypolitikájának célja? Kapacitások növelése A fejlődő tudományosságú országokban jellemző A kutatók termelékenységét díjazza Minden tudományos teljesítményt felmér Gyakran ismételt (akár minden évben) Minőség fejlesztése A fejlett tudományosságú országokban jellemző A kutatói kiválóságot díjazza A legjobb eredményekre fókuszál 4 5 évente ismételt
Nemzeti kutatásiteljesítmény-értékelési stratégiák 27 27 27 Milyen trendek tapasztalhatók? Kapacitások növelése Lengyelország Csehország Minőség fejlesztése Szlovénia Észtország Olaszország Portugália Nagy-Britannia
Kutatásiteljesítmény-értékelési modellek 28 28 28 Ex ante értékelés Projektterveket értékel Általában kizárólag szakmai lektorálás alapján Bibilometrikát a pályázók CVjének értékelésekor alkalmaznak Kompetitív finanszírozásra jellemző Ex post értékelés Kutatási eredményeket értékel publikációk, szabadalmak, spin offok Lehet szakmai lektorálás alapú (pl. REF 2014 UK) Lehet bibiliometrika alapú (pl. Lengyelország) Lehet hibrid (pl. VQR 2004-2010 Olaszország) Kompetitív blokkfinanszírozásra jellemző
29 29 29 Trendszerű változások Több országban alkalmaznak új, minőségi mutatókat H-index FWCI (Field Weighted Citation Impact) Legmagasabb idézettség (top 1%, top 10%, top 25%) Együttműködés Társadalmi hatás (pl. Nagy-Britannia) Több ország alkalmazza a Scopus adatokat, vagy vált azokra Nagy-Britannia, Olaszország, Szlovénia, Csehország, Portugália Jellemző a Scopus metrikák alkalmazása a területek közötti kiegyensúlyozásra pl. SJR (SciMago Journal Ranking) Csehország, Lengyelország
30 30 Köszönöm a figyelmet! p.porosz@elsevier.com www.elsevier.com/research-intelligence