Evaluation Tools for International University Ranking - Overview

1. Lenka Němečková Ústřední knihovna ČVUT Evaluační nástroje pro mezinárodní hodnocení univerzit

2. Osnova • Mezinárodní hodnocení VŠ • Národní hodnocení VŠ Seminář Bibliometrie v praxi, VIC ČVUT Praha

3. Mezinárodní hodnocení VŠ 2010 Zdroj: Němečková [et al.], Využití citačních rejstříků pro prezentaci výsledků vysoké školy, Inforum 2010 Seminář Bibliometrie v praxi, VIC ČVUT Praha

4. Metodika QS World University Rankings Zdroj: Němečková [et al.], Využití citačních rejstříků pro prezentaci výsledků vysoké školy, Inforum 2010 Seminář Bibliometrie v praxi, VIC ČVUT Praha

5. QS - dílčí hodnocení českých VŠ Seminář Bibliometrie v praxi, VIC ČVUT Praha

6. Postup hodnocení QS • Data k únoru každého roku, jednotná dávka ze SCOPUS • Data z hlavního profilu univerzity • Dle názvu, nikoli AF-ID • Manuální (?) přiřazení článku k profilu instituce na základě názvu afilace z článku • QS využívá vlastní databázi institucí Seminář Bibliometrie v praxi, VIC ČVUT Praha

7. Rozhodnutí ERV • SCIVerse pro hodnocení výstupů z projektů financovaných ERV • SCIVerse jako podklad pro výběr kandidátů pro poskytnutí grantů • Více na: http://www.suweco.cz/cz/suweco-news.asp#N-147 Seminář Bibliometrie v praxi, VIC ČVUT Praha

8. Národní hodnocení VŠ • „Zásady a pravidla financování veřejných vysokých škol pro rok 2012 a další“ • verze 2, 28.2.2011 http://www.msmt.cz/file/14725 • Výrazné zaměření na SCOPUS, SCImago Seminář Bibliometrie v praxi, VIC ČVUT Praha

9. Hodnocené instituce • VŠ zařazené do db. SCOPUS bez omezení (verze 2 „Zásad…“) • 20 veřejných VŠ • 1 státní VŠ (Univerzita obrany) Seminář Bibliometrie v praxi, VIC ČVUT Praha

10. Hodnocení výsledků VaVKvalitativní a výkonové ukazatele VŠ • 15/20% z normativní části rozpočtu VŠ: (abs. 16%) • Vědecký výkon VŠ: 53,8% (abs. 8,6%) • RIV: 12,7% (abs. 2,03%) • Oborové hodnocení výsledků z RIV (+RUV) - závisí na počtu studentů a absolutním počtu RIV bodů v daném oboru • Normovaný počet citací SCImago (ONI):12,7% (abs.2,03%) • Kvalita studijních programů, Ph.D.: 29,2% (abs. 4,66%) • Mezinárodní mobilita: 17% (abs. 2,72%) • Mezinárodní spolupráce ve vědeckých výsledcích (SCImago - ICO): 7,7% (abs. 1,23%) Seminář Bibliometrie v praxi, VIC ČVUT Praha

11. Hodnocení RIV • Počet reálných RIV bodů násobený koeficientem dle poměru počtu studentů a poměru získaných RIV bodů v daném oboru • S – počet studentů • B – počet RIV bodů Seminář Bibliometrie v praxi, VIC ČVUT Praha

12. SCImago Institutional Ranking (SIR) • http://www.scimago.es/index.php • http://www.scimagoir.com/ • http://www.scimagoir.com/pdf/sir_2010_world_report.pdf • Zdroj: SCOPUS • Retrospektiva: 5 let • SIR 2010: období 2004 – 2008 Seminář Bibliometrie v praxi, VIC ČVUT Praha

13. SCImago Institutional Ranking (SIR) • „O“ – Output (??? různé výklady) • počet publikací ve SCOPUS v daném období • indikátor počítaný m.j. dle velikosti a zaměření instituce, počtu spolupracujících institucí • „NI“ – Normalized Impact • průměrná citovanost instituce v oboru v daném období • „ONI“ = O*NI(cca 2% prostředků na VVŠ) • normovaný počet citací dané instituce Seminář Bibliometrie v praxi, VIC ČVUT Praha

14. Normalized Impact (NI) • Průměrná citovanost instituce v oboru • Součet „koeficientů citovanosti“ každého článku v rámci svého oboru/ počet publikací dané instituce Počet citací Průměrný počet citací všech výstupů stejného typu, oboru, roku vydání Celkový počet výstupů • P- počet výstupů dané instituce • ci- počet citací i-tého výstupu instituce • [ ]i - průměrný počet citací všech výstupů stejného typu a publikovaných ve stejném roce a ve stejném vědním oboru jako výstup i Seminář Bibliometrie v praxi, VIC ČVUT Praha

15. Mezinárodní mobilita • Ukazatel mezinárodní spolupráce (ICO) • Indikátor IC(%) – International Collaboration • Poměr výstupů VaV za dané období vytvořené v mezinárodní spolupráci – dle SCOPUS • Porovnávání dle adresy afilace • ICO = IC*O Seminář Bibliometrie v praxi, VIC ČVUT Praha

16. Kvalita výstupů - HQP • HQP = High Quality Publications • SCOPUS i WoS • V každém oboru definovány časopisy patřící do konkrétních kvartilů dle jejich kvality • Q1 (SIR) – podíl publikací v TOP 25% čas. • Q1-4 (WoS) – zařazení časopisu do kvartilu Seminář Bibliometrie v praxi, VIC ČVUT Praha

17. 15.3.2011 Seminář Bibliometrie v praxi, VIC ČVUT Praha 17

18. Identifikace entit • Spoluautorství - na základě adresy instituce • Identifikace institucí – na základě oficiálních seznamů • International Association of Universities (UNESCO) • Národní výzkumné agentury • Velký podíl manuální práce! • http://www.scimagoir.com/methodology.php?page=technical_issues 15.3.2011 Seminář Bibliometrie v praxi, VIC ČVUT Praha 18

19. Co může udělat univerzita pro lepší výsledky? • Podpora publikování ve zdrojích hodnocených RIV • Podpora publikování „ve SCOPUS“ • Podpora zařazení časopisů do SCOPUS • Podpora uvádění správných a průkazných identifikačních údajů afilace (soulad s interní metodikou ČVUT) • Podpora sdílení dokumentů a vytváření sociálních sítí na mezinárodní úrovni Seminář Bibliometrie v praxi, VIC ČVUT Praha

20. Lenka Němečková lenka.nemeckova@uk.cvut.cz Dotazy??Děkuji za pozornost!