Seminář IPN Metodika

k První dílčí zprávě

Jitka Moravcová

Daniel Münich

MŠMT

www.metodika.reformy-msmt.cz

Masarykova kolej

29.10.2014

Program

1

1. Informace o projektu IPN Metodika, Jitka Moravcová

2. Principy institucionálního hodnocení, Daniel Münich

3. Veřejná konzultace k 1.DZ, Jitka Moravcová

4. Diskuse

Efektivní systém hodnocení a financování výzkumu, vývoje a inovací (IPN Metodika)

2

● Individuální projekt národní MŠMT

● 1.2.2012-31.10.2015

● Cíl 1: navrhnout a pilotně ověřit systém hodnocení výzkumných organizací,

● Cíl 2: navrhnout systém institucionálního financování

● Cíl 3: zkvalitnit celkovou kulturu hodnocení v oblasti VaVaI a vytvořit odborné zázemí pro pravidelné a systematické hodnocení v budoucnosti

IPN Metodika - klíčové aktivity

3

● KA1 Informační podpora

● KA2 Systém hodnocení

● KA3 Systém financování

● KA4 Velké pilotní ověření

● KA5 Harmonogram pro přechodné období a podklady pro legislativní změny

● KA6 Institucionální zajištění hodnocení

● KA7 Koordinace reformních návrhů a vytváření konsensuálních podmínek pro jejich přijetí

Hodnocení a strategické dokumenty ČR

4

● Reforma systému VaVaI v ČR (2008, aktualizace) ● Národní politika VaVaI pro roky 2009-2015 (výhled 2020) ● Národní strategie konkurenceschopnosti 2012-2020 ● Národní inovační strategie ● Dlouhodobé principy hodnocení VaV, RVVI

Cíl: Zavést pravidelné, systematické a objektivní hodnocení

VaVaI v ČR na všech úrovních.

IPN Metodika – Cíl 1

5

● Definice hodnocené jednotky (HJ)

● Oborové metodiky hodnocení výsledků a dopadů

● Soubor indikátorů respektujících postavení VO v systému VaVaI

● Vícestupňové hodnocení VO

● Sebehodnotící zpráva

● Zavedení prvků peer-review

● Hodnocení 1krát za 5 let

● Zkušenosti z Metodiky 2013

● Využití zavedeného systému sběru dat

IPN Metodika – Cíl 1

6

Co získáme?

● Zavedení evaluačních principů ověřených zahraniční praxí adaptovaných na naše podmínky

● Informace pro řízení na všech stupních

● Porovnání na národní a mezinárodní úrovni

IPN Metodika – Cíl 1

7

Řešení

● Dodavatel veřejné zakázky „R&D Evaluation Methodology and Funding Principles“

● Mezinárodní konzorcium Technopolis, NIFU, TC AV ČR a Infoscience

● Smlouva podepsána 31.5.2014

● Příprava malého pilotního ověření

● První dílčí zpráva: Zásady institucionálního hodnocení

IPN Metodika – Cíl 1

8

● První dílčí zpráva: Zásady institucionálního hodnocení

● Veřejná diskuse ke zprávě 6.11.2014 - 26.11.2014

● Konference 7. 1. 2015

IPN Metodika – Cíl 1

9

● Návrh institucionální hodnocení není jediným cílem IPN Metodika

● Návrh hodnocení velkých infrastruktur

● Návrh principů hodnocení programů účelové podpory

● Návrh hodnocení zapojení ČR do mezinárodních sítí

IPN Metodika – Nová metodika hodnocení

10

Opravdu potřebujeme novou metodiku hodnocení?

● Ano, opravdu.

Jsou aktéři, politici, poskytovatelé, výzkumné organizace a odborná veřejnost otevřeni k jinému způsobu hodnocení?

● Ne příliš. Není žádné nekonfliktní řešení. Hledání dohody mezi aktéry.

Proč?

● „Bližší košile než kabát“. Současný systém je jednoduchý. Každý si může spočítat, co mu body vynesou.

● Výzkumné organizace se obávají, že jim poklesne institucionální financování.

● Máme rádi čísla a jednoduché počty.

Co můžeme udělat?

● Snažit se ovlivnit společenské povědomí o hodnocení.

● Organizovat veřejná projednávání, diskuse… Vysvětlovat, vysvětlovat…

● Dobře postavit velké pilotní ověření.

IPN Metodika – Cíl 2

11

● Mezinárodní konzorcium Technopolis, NIFU, TC AV ČR a Infoscience

● Návrh institucionálního financování

● Víceleté financování jako kombinace dvou principů

● Rozpočet podle předpisu (formula based contract) a výkonností smlouvy (performance based contract)

● Žádný mechanický vztah mezi výsledky hodnocení a výší institucionální podpory

IPN Metodika – Cíl 2

12

● Druhá dílčí zpráva: Zásady institucionálního financování, veřejná diskuse 20.1.2015 - 6.2.2015, konference 26.2.2015

● Třetí dílčí a Závěrečná zpráva: Malé pilotní hodnocení, veřejná diskuse 15.4.2015-29.4.2015, konference 15.5.2015

IPN Metodika – Cíl 3

13

● Studie proveditelnosti vzniku „instituce“ organizující hodnocení

● Vzdělávací kurz „Hodnocení výzkumu v teorii a praxi“ pro 20 účastníků

● Sedm modulů: Vědní politika v ČR a v mezinárodním srovnání, Organizace, řízení a financování systému VaVaI v ČR, Legislativa v oblasti VaV v ČR a EU, Hodnocení vědy – základní přístupy a metody, Modely a organizace peer review, Scientometrie: základní pojmy, zdroje dat, Scientometrie: zpracování dat, metody výpočtu

Veřejná konzultace k 1. dílčí zprávě

14

● 1. DZ obsahuje tři části:

1. The key principles of the evaluation

2. The evaluation methodology

3. Country analyses

● Jedná se o koncept, který prošel interním projednáním v týmu IPN Metodika

● Text se může změnit po veřejné konzultaci

● Definitivní znění bude uveřejněno po konferenci

● Koncept v angličtině, finální verze v angličtině a češtině

Veřejná konzultace k 1. dílčí zprávě

15

● 6.-26.11.2014

● VO, poskytovatelé a další orgány byly požádány o jmenování pověřené osoby

● Veřejná konzultace bude formou otázek a žádosti o odpovědi + prostor pro dodatečný komentář

● Otázky budou podobné pro VO a poskytovatele

Veřejná konzultace k 1. dílčí zprávě

16

Otázky pro VO ● What type of information provided by the means of an external

institutional evaluation of VaV would your research organisation benefit from the most? Will the proposed system provide such information or not?

● What are the elements in the proposal that you find unclear and why?

● Are there any important elements that you find absent in the draft proposal?

● List procedures in the proposed evaluation scheme you find too complicated, inefficient or ineffective, and explain your reasoning?

● What are the greatest risks you see in the proposed evaluation scheme?

● What administrative and other burdens of the evaluation scheme concern your research institution the most?

Veřejná konzultace k 1. dílčí zprávě

17

Otázky pro VO ● Partial comments relating to the different sections of the draft

proposal.

● Kindly provide any other comments not related to the particular sections of the draft proposal. Please state the importance of your comment.

18

Děkujeme za spolupráci.

Všechny informace budou na

webových stránkách projektu.

Kontaktovat nás můžete kdykoliv.

www.metodika.reformy-msmt.cz