Hodnocení vybraných výsledků v rámci Modulu 1 realizované Odborem Rady pro výzkum, vývoj a inovace prostřednictvím Odborných panelů pomocí vzdálených recenzí je jedním z podkladů pro hodnocení výzkumných organizací podle Metodiky M17+ (dále jen „M17+“). Zveřejněné zprávy shrnují závěry tohoto hodnocení po oborových skupinách a identifikují organizace, které se autorsky podílely na vzniku nejlépe hodnocených výsledků.
Zprávy jsou generovány samostatně za třetí implementační rok (dále jen „H19“) a kumulovaně z Hodnocení 2017, Hodnocení 2018 a Hodnocení 2019 (dále jen „H17-H19“). Přiložené seznamy výsledků v přehledové podobě lze filtrovat podle potřeby. Je připojena jednoduchá interaktivní tabulka, s jejíž pomocí lze pohodlně identifikovat organizace podle množství výsledků ve volitelných pásmech podle známek. Nově je připojena shrnující zpráva o oborovém hodnocení podle kritéria společenské relevance, která je soustředěna na hodnocení v oblasti aplikovaného výzkumu.
Hlavním podkladem Modulu 1 jsou profily jednotlivých výzkumných organizací. Profily lze snadno generovat ze zveřejněné interaktivní tabulky seznamu výsledků doplněné pro tento účel o list, který profil graficky vykresluje s hlavními filtry dle kontingenční tabulky (nově filtr pro oddělení výsledků hodnocených podle kritérií, možnost filtrace až na úroveň FORD). Tabulky jsou zpracovány samostatně pro výstupy z H19 a kumulovaně pro výstupy H17- H19. Další zveřejněná tabulka H18 – H19 je pro druhý rok implementace doplněna o anonymizovaná odůvodnění hodnocení předložených výsledků.
V případě potřeby žádáme o Vaši zpětnou vazbu do 14 dnů od zveřejnění prostřednictvím e-mailu hodnoceniVaVai@vlada.cz
Výzkumné organizace určily, zda jimi přihlášený výsledek má být posouzen buď podle kritéria přínos k poznání, nebo podle kritéria společenská relevance. Přínos k poznání je tradiční kritérium hodnocení ve VaVaI, posuzující originalitu, význam a obtížnost získání výsledku, uplatňované zejména na výsledky základního výzkumu. Společenská relevance je chápána jak ve smyslu komerční užitečnosti (typicky průmyslový výzkum přinášející ekonomické zisky), tak ve smyslu společenské užitečnosti či potřebnosti (typicky výzkum vznikající na společenskou resp. rezortní objednávku nebo ve společenských a humanitních oborech výzkum relevantní pro širší společnost).
Ve třetím roce implementace hodnocení podle M17+ byly hodnoceny vybrané výsledky všech druhů přihlášené do hodnocení podle kritéria přínos k poznání nebo podle kritéria společenské relevance uplatněné v uplynulých pěti letech s výjimkou výsledků, které byly hodnoceny v minulých letech podle předchozí platné Metodiky nebo v předchozích dvou uplynulých letech podle Modulu 1 Metodiky 2017+. Celkem bylo za tři roky zhodnoceno téměř osm tisíc výsledků.
Pro posouzení vybraných výsledků pomocí vzdálených recenzí oborově příslušní členové Odborných panelů se softwarovou podporou určili pro každý výsledek vždy nejméně dva vzdálené recenzenty. Člen Odborného panelu - garant hodnocení vybraných výsledků ve spolupráci s předsedou Odborného panelu rozhodoval ve sporných případech. Seznam členů Odborných panelů je veřejný, vzdálení recenzenti jsou anonymizováni. Výstupem recenzního hodnocení výsledku, jehož úkolem je konstatovat, zda daný výsledek je v souladu se světovými či národními standardy kvality v příslušném oboru, bylo zařazení výsledku na stupnici 1–5 doprovázené zdůvodněním.
Kvalitativní stupnice pro kritérium hodnocení „přínos k poznání“:
(1) Výsledek, který je z hlediska originality, významu a obtížnosti získání na špičkové světové úrovni (world-leading).1
(2) Výsledek, který je z hlediska originality, významu a obtížnosti získání na vynikající mezinárodní úrovni, ale nedosahuje nejvyšší úrovně excelence (excellent).
(3) Výsledek, který je z hlediska originality, významu a obtížnosti získání mezinárodně uznávaný.
(4) Výsledek, který je z hlediska originality, významu a obtížnosti získání národně uznatelný.
(5) Výsledek, který nesplňuje standard národně uznatelné práce.2
Kvalitativní stupnice pro kritérium hodnocení „společenská relevance“ je následující:
(1) Výsledek na špičkové úrovni (world-leading), jehož využití v praxi přinese zásadní změnu s mezinárodním ekonomickým dopadem (reálný předpoklad širokého uplatnění na více zahraničních trzích atd.), nebo změnu s mimořádným dopadem mezinárodního charakteru na společnost (reálný předpoklad zásadního uplatnění na mezinárodní úrovni v oblastech veřejného zájmu).
(2) Výsledek na vynikající úrovni (excellent), jehož využití v praxi přinese změnu s mezinárodním ekonomickým dopadem (reálný předpoklad uplatnění na zahraničním trhu atd.), nebo změnu s významným dopadem na společnost (reálný předpoklad zásadního uplatnění v oblastech veřejného zájmu).
(3) Výsledek na velmi dobré úrovni, jehož využití v praxi přinese změnu s ekonomickým dopadem na českém trhu nebo změnu s dopadem na společnost (reálný předpoklad uplatnění v oblastech veřejného zájmu).
(4) Výsledek na průměrné úrovni, jehož využití v praxi přinese dílčí změnu s ekonomickým dopadem na českém trhu nebo dílčí změnu s dopadem na českou společnost (reálný předpoklad dílčího uplatnění v oblastech veřejného zájmu).
(5) Výsledek na podprůměrné úrovni, jehož využití v praxi pravděpodobně nepřinese žádnou změnu s ekonomickým dopadem ani změnu s dopadem na českou společnost (není reálný předpoklad uplatnění v oblastech veřejného zájmu).
1"Špičková světová úroveň" znamená absolutní
standard kvality v každé oblasti i podoblasti.
2"Špičková světová úroveň", „mezinárodně" a "národně" uznávané v tomto kontextu označuje
standardy kvality. Neodkazuje na povahu nebo zeměpisný rámec působnosti jednotlivých subjektů, ani na
místo provádění výzkumu nebo oblast jeho šíření. Např. výzkum, který je zaměřen na téma specifické pro
ČR, může splňovat kritéria pro "špičkovou světovou úroveň". Naopak práce s mezinárodním zaměřením nemusí
být "špičkovým světovým, mezinárodně vynikajícím nebo mezinárodně uznávaným" standardem.
OBORY Vybrané výsledky obsahuje jednoroční a kumulované souhrnné zprávy pro oborové skupiny, počty a profily hodnocených výsledků, procentuální zastoupení výzkumných organizací na produkci výsledků hodnocených stupněm 1 a 2 a seznam všech hodnocených výsledků s možnostmi dalšího filtrování (též v interaktivní podobě). Pro kritérium společenská relevance byla navíc vygenerována souhrnná zpráva členěná podle oborů pro výsledky hodnocené stupni 1 – 3, které v oblasti aplikovaného výzkumu představují vysoký kvalitativní standard.
VO Vybrané výsledky obsahuje jednoroční a kumulované interaktivní tabulky ke generování grafických profilů všech hodnocených výzkumných organizací. Souhrnná tabulka hodnocených výsledků byla obohacena o další filtry. Tabulka výsledků hodnocených v H18 a H19 je navíc zveřejněna včetně anonymizovaných posudků.