představení ipn metodika na ipn metodika na semináři 'hodnocení a financování vědy v...

Efektivní systém

hodnocení a financování

výzkumu, vývoje a inovací

(IPN Metodika)

Jitka Moravcová

MŠMT

www.metodika.reformy-msmt.cz

Seminář Hodnocení a financování vědy v ČR

Poslanecká sněmovna Parlamentu ČR

20.5.2014

http://metodika.reformy-msmt.cz/?utm_source=Prezentace&utm_medium=Soubory&utm_campaign=prez_metodika



Hodnocení VaVaI

1

Co je hodnocení?

● Definice Evropské komise: “Hodnocení je proces, kterým je sledována, interpretována a vyhodnocována kvalita, implementace, relevance a dopady politiky/programů VaVaI.”

Co je hodnocení v ČR?

● Počítání výsledků, kterým je přiřazena určitá váha. Monitorovací cvičení, hodnotí se výzkumné organizace a programy. Mechanicky (trojčlenka) se používají získané body k výpočtu institucionální podpory poskytovatelům a ti (kromě AV ČR) stejným algoritmem počítají inst. financování výzkumných organizacím……..

Financování - Zákon 130 o podpoře výzkumu, experimentálního vývoje a inovací

2

● Institucionální podporu lze poskytnout na ● dlouhodobý koncepční rozvoj výzkumné organizace na

základě zhodnocení jí dosažených výsledků, ● mezinárodní spolupráci ČR ve VaV realizovanou na základě

mezinárodních smluv,

● Účelovou podporu lze poskytnout na

● grantový projekt,

● programový projekt,

● specifický vysokoškolský výzkum,

● velkou infrastrukturu.

Financování - Zákon 130 o podpoře výzkumu, experimentálního vývoje a inovací

3

● Institucionální podpora - poskytovatelé ● MŠMT, ● AV ČR, ● MPO, MZe, MZ

● Účelová podpora - poskytovatelé

● GA ČR,

● TA ČR,

● MŠMT

Hodnocení - Zákon 130 o podpoře výzkumu, experimentálního vývoje a inovací

4

● Institucionální podpora ● Institucionální podporu poskytne poskytovatel VO na

základě zhodnocení jí dosažených výsledků tak, že její podíl na celkové výši institucionální podpory VO ze státního rozpočtu v daném roce odpovídá jejímu podílu na hodnotě výsledků všech VO dosažených v uplynulých 5 letech podle hodnocení prováděného každoročně RVVI.

● Poskytovatel může výši podpory upravit podle podrobnějšího hodnocení používajícího mezinárodně uznávaných metodik.

● Pouze AV ČR jako poskytovatel takové hodnocení realizuje. ● Ostatní rozpočítávají podle výsledků (RIV body). ● VVŠ rozpočítávají podle výsledků na fakulty a dále na

jednotlivé ústavy a katedry (a jednotlivce).

Současná metodika hodnocení výsledků

5

● lepší, než žádná metodika hodnocení,

● je jednoduchá,

● je zažitá,

● není náchylná k nepotismu,

● základ pro přiznání institucionální podpory


6 • WoS, heslo „Czech Republic“, 25.1.2014

Absolutní počet odkazů Relativní zastoupení odkazů

výroba tzv. recenzovaných neimpaktovaných (tj. především domácích) časopiseckých publikací vzrostla v období 2006-2010 o více než 200 procent


7

● soustředí se pouze a právě na hodnocení výstupů,

● nedává informaci o kvalitě a významu výsledků,

● neposkytuje informace umožňující mezinárodní srovnání výkonnosti a produktivity pracovišť ani celých oborů,

● neposkytuje ani jedné úrovni řízení v systému VaV zpětnou (mezinárodní) vazbu ohledně kvality řízení VaV,

● nereflektuje postavení a mise různých typů VO,

● realizuje se každý rok, výše institucionální financování se tak mění každoročně,

● nepodává žádnou informaci o sledování a dosahování cílů národních priorit či priorit poskytovatelů,

● nepodává informace o splnění cílů programů,

● nepodporuje excelenci.

Budoucí metodika hodnocení

8

● Národní program reforem 2014,

● Národní politika VaVaI ČR na léta 2009-2015 s výhledem do 2020,

● Strategie mezinárodní konkurenceschopnosti na období 2012-2020,

● Národní inovační strategie, usnesení vlády č. 77, 26. ledna 2011,

● Dlouhodobé principy hodnocení výsledků VO, RVVI, 263. zasedání, 25. březen 2011.

Změna současného hodnocení je nezbytná!

9

● Prioritní osa „Excelentní výzkum“ obsahuje opatření Efektivní využívání veřejných prostředků na VaV

● zajistit dlouhodobý koncepční rozvoj VO, pro které musí být vytvořeny jasné a stabilní podmínky pro rozdělování institucionální podpory výzkumu na základě hodnocení podporujícího excelenci

● hodnocení všech programů účelové podpory musí být založeno na základě hodnocení skutečných přínosů a zejména dopadů podpořeného VaV

● ustanovit systém hodnocení velkých výzkumných infrastruktur

Národní inovační strategie

IPN Metodika, projekt MŠMT

10

● Koncepce projektu respektuje všechny citované strategické dokumenty a ověřenou mezinárodní praxi

2011

měsíc leden únor březen duben květen červen červenec srpen září říjen listopad prosinec

aktivita Příprava projektu, veřejné diskuse, projednání na RVVI, oponentní řízení CERA a Expertní skupina, schválení projektu

2012


aktivita vedením

MŠMT

Zahájení

projektu

Sestavení týmů KA, zahájení činnosti v KA, dozorčí rada,

presentace projektu, příprava 1. zadávací dokumentace pro

veřejnou zakázku, projednání a schválení na MŠMT, předání

zadávací dokumentace do kabinetu ministra

Omezení aktivit směrem k plnění

hlavních cílů projektu – pozastavení

uzavírání nových dohod členů týmu,

jednání o věcném obsahu VZ

Omezení aktivit směrem

k plnění hlavních cílů

projektu – jednání se

zástupci MŠMT a

2013


aktivita vlastními

realizátory

projektu

(harmonogram,

personální

zajištění,

podoba VZ)

Omezení aktivit směrem

k plnění hlavních cílů projektu,

práce na přípravě podstatné

změny, konzultace podstatné

změny s děkany PřF, členy

dozorčí rady, zástupci RVŠ a AV

ČR

1. 4. uzavřena DPČ s hl.

odborným garantem

Finální verze Situační

zprávy (příloha žádosti

o PZ), Memorandum

o spolupráci s RVVI,

mezinárodní seminář

1.5. uzavřeny DPČ

s garanty KA

Příprava žádosti o

podstatnou změnu,

2.7. předložena

Řídicímu orgánu,

30. 7. předložena

poradě vedení –

vysloven souhlas,

konzultace druhu

zadávacího řízení

s Mgr. Sixtou (MMR)

19. 8.

Podstatná

změna

nabyla

účinnosti

dodatkem,

obnoveno

řešení

projektu

Příprava 2. zadávací dokumentace,

vyhlášení a realizace výběrového řízení

2014


aktivita Výběrové řízení

ukončeno 6.3.2014,

revitalizace KA

2015

měsíc leden únor březen duben květen červen

aktivita Konec

projektu


11

● Zpracování podrobných a strukturovaných návrhů oborových metodik hodnocení hodnocených jednotek v rámci VO s prvky mezinárodního oborového informovaného peer-review

● Využití relevantních bibliografických, citačních a dalších databází vědeckých výsledků a jejich analytických nástrojů k zajištění zadání včetně přípravy specialistů

● Vypracování podrobného návrhu procesních pravidel hodnocení

● Návrh systému institucionálního financování VaV (rozpočet podle předpisu a výkonnostní kontrakt) a jeho vazeb na výsledky hodnocení

● Malé pilotní ověření nového systému hodnocení VO

● Analýza účelového financování ve vztahu a v interakci k financování institucionálnímu

● Velké pilotní ověření

● Doporučení pro vznik a fungování instituce organizující hodnocení


12

● Základní pojetí hodnocení

● Hodnocená jednotka, přihlášení ke zhodnocení v oboru (typicky v.v.i. nebo fakulta).

● Odhad 5 – 8 panelů, cca 25 oborových subpanelů.

● Soubor indikátorů podle oboru a postavení HJ v systému VaVaI.

● Dvoukolové hodnocení, mezinárodní oborové peer-review.

● Sebehodnotící zpráva.

● Nebudou se hodnotit všechny výsledky.

● Hodnocení organizující instituce.

● Realizace 1krát za cca 5 let.


13

● Bibliometrie VVŠ

• WoS, heslo „Czech Republic“, 25.1.2014, roztřídění podle instituce


14

● Institucionální financování


15

Institucionální financování, indikátory externí podpory


16



17


● zdroj: Výroční zprávy VVŠ o hospodaření 2012


18


Proč potřebuje ČR jiné hodnocení?

19

• Zajištění informací pro posílení efektivity řízení a strategického rozhodování (dnes není k dispozici).

• Pravidelné vyhodnocování vědecké výkonnosti a fungování institucí, které realizují výzkum a nárokují si veřejnou institucionální podporu (dnes není k dispozici).

• Srovnání kvality všech HJ vůči světové úrovni a standardům (dnes není k dispozici)

• Informace o využívání a potřebnosti velkých a nákladných výzkumných infrastruktur (dnes není k dispozici)

• Srovnání hodnocených jednotek (HJ) v oborech v ČR (dnes není k dispozici)

Je jednoduché zavést nové hodnocení?

20

● není žádné ideální a nekonfliktní řešení

● metodicky velmi složité

● nyní samostatný vědní obor

● metodika není 100 % přenositelná ze země do země

● hledání konsensu

● otevřené jednání všech zúčastněných stran

● vysvětlování, diskuse, ochota jednat

● dlouhodobý proces, přechodné období

představení ipn metodika na ipn metodika na semináři 'hodnocení a financování vědy v...

Education