Metodika_17

28.02.2017 Views

2.5 Technické zabezpečení, IT podpora Pro shromažďování výsledků přihlášených do hodnocení bude vytvořena aplikace přímo napojená na příslušné číselníky v IS VaVaI, aby byla omezena administrativní zátěž VO. Avšak vkládání příloh, anotací a komentářů přímo do IS VaVaI 2.0 do doby příslušné legislativní změny a z důvodu zajištění kybernetické bezpečnosti pro IS VaVaI 2.0 jako významného informačního systému nelze řešit jako integrální součást RIV 12 . Dále budou připraveny další aplikace na zpracování údajů pro jednání panelů a pro on-line přístup členů odborných panelů a hodnotitelů. 2.6 Nástroje hodnocení a odborné panely Pro účely hodnocení budou použity tyto základní nástroje: Nástroj 1 – bibliometrická analýza Nástroj 2 – vzdálené recenze Pro hodnocení výsledků bude využito dvou základních nástrojů: buď bibliometrické analýzy vybraných výsledků nebo recenzního posouzení vybraných výsledků externími hodnotiteli. Vhodný nástroj pro hodnocení vybraných výsledků navrhuje předkladatelská organizace. V odůvodněných případech může odborný panel její návrh revidovat (například při podezření na podvodné, např. „predátorské“ časopisy 13 ). Nový způsob hodnocení klade větší důraz na hodnocení výsledků aplikovaného výzkumu, kde bibliometrie selhává, a které obdobně jako výsledky značné části oborových skupin SOCIAL SCIENCES a HUMANITIES AND THE ARTS (SSHA) 14 vyžadují expertní zhodnocení výsledků prostřednictvím recenzního posouzení. Pro posouzení kvality vybraných výsledků bude ustaveno šest odborných panelů reprezentujících šest oborových skupin (viz obr. 3). V oborových skupinách jsou sdruženy obory definované podle seznamu OECD (Frascati Manual). 15 Členy příslušných panelů budou také odborníci na aplikovaný a průmyslový výzkum a odborníci z praxe. Bibliometrická analýza (NÁSTROJ 1) Výsledky publikované v časopisech, které jsou indexovány v mezinárodně uznávaných citačních databázích, 16 budou hodnoceny mezinárodně uznávanými bibliometrickými přístupy. Výstupem bude strukturovaný soubor bibliometrických ukazatelů 17 s informacemi o každém hodnoceném výstupu – včetně bibliometrických údajů získaných srovnáním v mezinárodním měřítku – umožňující další 12 Viz také nařízení vlády č. 397/2009 Sb. 13 Obecně se jedná o situaci, kdy se odborný panel domnívá, že jsou bibliometrické ukazatele spojené s daným výsledkem důsledkem nekalých praktik. 14 Viz OECD Fields of Research and Development (FRASCATI manuál 2015). 15 OECD Fields of Research and Development (FRASCATI manuál 2015), podpůrně WoS Categories, resp. Fields and Subfields in: Základní principy hodnocení AVČR 2010–14. 16 Podle aktuálně platných definic: druhy výsledků J imp , J Sc , D. 17 Např. pořadí dle AIS (Article Influence Score, Web of Science) nebo SJR (Scimago Journal Rank, Scopus). 20 / 57

agregaci údajů, například na úroveň VO, jejich organizačních jednotek, oborově, podle věcného zaměření výzkumu apod. Podklad bude připraven RVVI/Sekcí VVI. Panely k těmto připraveným podkladům zpracují odborné komentáře. Vzdálené recenze (NÁSTROJ 2) Pro posouzení vybraných výsledků pomocí vzdálených recenzí vybere odborný panel vzdálené recenzenty. Výstupem hodnocení, jehož úkolem je konstatovat, zda předložené výsledky jsou v souladu se světovými či národními standardy kvality v příslušném oboru, bude zařazení výsledku na stupnici 1–5 se stručným zdůvodněním. Obrázek 3: Organizační schéma odborných panelů 18 Odborný panel je skupina odborníků, kteří koordinují recenzní posuzování vědeckých výstupů zařazených do jim věcně příslušného oboru. Panel je řízen předsedou a místopředsedou. Členové odborného panelu zajišťují distribuci výsledků k recenznímu posouzení externím hodnotitelům a rozhodují ve sporných případech. Zároveň připravují souhrnný odborný komentář k výsledkům, které byly v rámci jejich oboru posouzeny pomocí Nástroje 1 – bibliometrická analýza. Panel každé oborové skupiny má nejméně tolik členů, kolik oborů bude ve skupině obsaženo. Každý panel bude mít předsedu. Pokud bude předsedou mezinárodně uznávaný zahraniční odborník, měl by být místopředsedou panelu respektovaný domácí odborník. 18 OECD Fields of Research and Development (FRASCATI manuál 2015), podpůrně WoS Categories. resp. Fields and Subfields in: Základní principy hodnocení AV ČR 2010–14. 21 / 57

agregaci údajů, například na úroveň VO, jejich organizačních jednotek, oborově, podle věcného<br />

zaměření výzkumu apod. Podklad bude připraven RVVI/Sekcí VVI. Panely k těmto připraveným<br />

podkladům zpracují odborné komentáře.<br />

Vzdálené recenze (NÁSTROJ 2)<br />

Pro posouzení vybraných výsledků pomocí vzdálených recenzí vybere odborný panel vzdálené<br />

recenzenty. Výstupem hodnocení, jehož úkolem je konstatovat, zda předložené výsledky jsou<br />

v souladu se světovými či národními standardy kvality v příslušném oboru, bude zařazení výsledku na<br />

stupnici 1–5 se stručným zdůvodněním.<br />

Obrázek 3: Organizační schéma odborných panelů 18<br />

Odborný panel je skupina odborníků, kteří koordinují recenzní posuzování vědeckých výstupů<br />

zařazených do jim věcně příslušného oboru. Panel je řízen předsedou a místopředsedou. Členové<br />

odborného panelu zajišťují distribuci výsledků k recenznímu posouzení externím hodnotitelům<br />

a rozhodují ve sporných případech. Zároveň připravují souhrnný odborný komentář k výsledkům,<br />

které byly v rámci jejich oboru posouzeny pomocí Nástroje 1 – bibliometrická analýza.<br />

Panel každé oborové skupiny má nejméně tolik členů, kolik oborů bude ve skupině obsaženo. Každý<br />

panel bude mít předsedu. Pokud bude předsedou mezinárodně uznávaný zahraniční odborník, měl<br />

by být místopředsedou panelu respektovaný domácí odborník.<br />

18 OECD Fields of Research and Development (FRASCATI manuál 2015), podpůrně WoS Categories. resp. Fields<br />

and Subfields in: Základní principy hodnocení AV ČR 2010–14.<br />

21 / 57

Hooray! Your file is uploaded and ready to be published.

Saved successfully!

Ooh no, something went wrong!