ocena parametryczna jednostek naukowych 2017 · c 3,85% 31,91% 56,24% 8,00% a+ a b c ocena...
TRANSCRIPT
Komitet Ewaluacji Jednostek Naukowych
Ocena parametryczna jednostek
naukowych 2017
Błażej Skoczeń
KEJN
2
KEJN
Komisja ds. Grupy Nauk
Humanistycznych i Społecznych
Komisja ds. Grupy Nauk
Ścisłych i Inżynierskich
Komisja ds. Grupy Nauk o Życiu
Komisja ds. Grupy Nauk o Sztuce i
Twórczości Artystycznej
KEJN jest organem doradczym, który
działa przy MNiSzW i liczy 30 osób
Struktura KEJN
KEJN
3
42,20%
50,51%
7,30%
A
B
C
3,85%
31,91%
56,24%
8,00%
A+
A
B
C
Ocena parametryczna 2010
Niewłaściwe dodawanie punktów
pochodzących z różnych kryteriów
Błędna definicja grup jednorodnych
Ocena parametryczna 2013
Zbyt skomplikowany system
porównań parami
Niewłaściwa ewaluacja
niejednorodnych jednostek
naukowych
Ocena parametryczna 2017
Uproszczony algorytm: porównanie
jednostki z jednostką referencyjną
Wprowadzenie ewaluacji
niejednorodnych jednostek
naukowych (NJN)
Zmiany kategorii w ubiegłych edycjach oceny JN
Z każdą kolejną edycją wzrasta kompleksowość i jakość
algorytmu oceny parametrycznej jednostek naukowych
Zmiana jakościowa! Udoskonalona ocena Podejście elementarne
KEJN Edycja 2013: przyznane kategorie (procentowo)
3,85%
31,91%
56,24%
8,00%
A+
A
B
C
3,96%
27,06%
62,05%
6,93%
A+
A
B
C
3,86%
37,77%
49,79%
8,58% A+
A
B
C
4,33%
35,91%
50,77%
8,98%
A+
A
B
C
1,94%
20,39%
70,87%
6,80% A+
A
B
C
HS NZ
SI TA
4
KEJN Edycja 2013: przyznane kategorie (liczbowo)
5
21 20 297
188
116
164
73
82
88
116
21
12
9
14
2
0
50
100
150
200
250
300
350
HS NZ SI TA
A+
A
B
C
KEJN
6
Edycja 2013: ocena końcowa vs. Kryterium 1
Fundacja Naukowa SmarterPoland.pl
Nauki ścisłe (SI)
Korelacja oceny
kompleksowej z
osiągnięciami
naukowymi i
twórczymi (K1)
KEJN
7
Ankieta 2014: Zaufanie do ekspertów
oceniających jednostkę
4,6%
11,9%
13,5%
58,5%
11,5%
0% 20% 40% 60% 80%
Zdecydowanie nie mam zaufania
Raczej nie mam zaufania
Trudno powiedzieć
Raczej mam zaufanie
Zdecydowanie mam zaufanie
KEJN
8
Konsultacje
Algorytm kompleksowej oceny został opracowany przez
KEJN po licznych konsultacjach m.in. na posiedzeniach
KRASP, Prezydium PAN, KRUP, KRAUM, RGIB oraz
kierownictwa MNiSzW i dokumentach KPN, Wydziałów
PAN i in. a także ankiety przeprowadzonej wśród JN.
Powszechnie uznano, że parametryzacja 2017 powinna być
kontynuacją poprzedniej, ale że wymaga ona zmian,
uzupełnień i dopracowania wielu szczegółów i rozwiązań.
Ocena ma charakter parametryczny z elementami
eksperckimi, co najsilniej jest wyrażone w ocenie według
kryterium IV oraz w wyborze JN do kategorii A+.
KEJN
9
Kogo oceniamy?
Rodzaje ocenianych jednostek naukowych:
• Instytuty PAN
• Wydziały Uczelni
• Instytuty Badawcze
• Jednostki Inne
• PAU
Jednostki naukowe pochodzą z:
• grupy nauk humanistyczno-społecznych
• grupy nauk o życiu
• grupy nauk ścisłych i inżynierskich
• grupy nauk o sztuce i twórczości artystycznej
• jednostki o profilu mieszanym
Ocenie podlega około 1000 jednostek naukowych
KEJN
10
Przyjęty system oceny
Stopień
parametryzacji
System
ekspercki
System
parametryczny
System
mieszany
3 kryteria parametryczne
1 kryterium eksperckie
Przyjęty system oceny parametrycznej ma charakter mieszany i zawiera
kryteria w pełni parametryczne (1, 2, 3) oraz kryterium eksperckie (4).
Podejście eksperckie zastosowano również w procesie wyłaniania jednostek
naukowych zasługujących na kategorię A+.
KEJN
11
Zakres i zasady oceny parametrycznej
i kategoryzacji jednostek naukowych
KEJN
12
Podstawa prawna i publikacje
• Art. 44 ust. 2 ustawy z dnia 30 kwietnia 2010 r. o zasadach finansowania nauki
(Dz. U. z 2014 r. poz. 1620, z 2015 r. poz. 249 i 1268 oraz z 2016 r. poz. 1020).
• Rozporządzenie ministra nauki i szkolnictwa wyższego w sprawie przyznawania
kategorii naukowej jednostkom naukowym i uczelniom, w których zgodnie z ich
statutami nie wyodrębniono podstawowych jednostek organizacyjnych (Projekt z
dnia 23/09/2016, Rozporządzenie wchodzi w życie z dniem 1 stycznia 2017).
• “How Good is Good? Parametric evaluation of Polish scientific institutions 2013”,
Academia, No. 4 (40), 2013.
• „Kategoryzacja jednostek naukowych AD 2013”, Forum Akademickie, 10/2013.
• „Kategoryzacja jednostek naukowych po kampanii odwołań”, FA, 07-08/2014.
• „Ocena parametryczna jednostek naukowych 2017: ewolucja czy rewolucja?”, FA,
04/2016.
KEJN
13
Najważniejsze zmiany w stosunku do 2013
Zmiany systemowe
• uproszczenie algorytmu porównywania parami,
• modyfikacja zasad tworzenia Grup Wspólnej Oceny (GWO),
• NJN oraz nowe zasady ustalania ocen jednostek referencyjnych dla
niejednorodnych jednostek naukowych,
• modyfikacja zasad wyłaniania JN kategorii A+.
Zmiany szczegółowe w czterech kryteriach
• zmiany podkryteriów i parametrów w poszczególnych kryteriach
• nowe moduły i nowe elementy oceny, które postulowało środowisko
KEJN
14
• Liczba publikacji naukowych oraz osiągnięć naukowych i twórczych
uwzględnianych w ocenie, nie mogą być większe niż 3N.
• N jest średnią arytmetyczną liczby pracowników zatrudnionych w jednostce w
poszczególnych latach przy prowadzeniu badań naukowych w ramach stosunku
pracy, w przeliczeniu na pełny wymiar czasu pracy, ustaloną na podstawie
oświadczeń składanych przez pracowników we wniosku o środki DS.
• Liczbę 3N, pomniejsza się o liczbę 2N0, gdzie N0 jest liczbą pracowników, w
przeliczeniu na pełny wymiar czasu pracy, uwzględnianych przy określaniu liczby
N, którzy byli zatrudnieni w jednostce łącznie przez co najmniej 3 lata w okresie
objętym oceną i nie byli autorami lub współautorami osiągnięć naukowych.
• Liczba N0 nie obejmuje pracowników inżynieryjno-technicznych oraz
inżynieryjnych i technicznych.
Liczba N i pole 3N-2N0
KEJN
15
• Do osiągnięć naukowych i twórczych jednostki zalicza się publikacje
naukowe, jeżeli ich autorzy lub współautorzy zostali uwzględnieni przy
określeniu liczby N i wskazali tę jednostkę w afiliacji.
• Do osiągnięć naukowych i twórczych jednostki zalicza się publikacje
naukowe autorów nieuwzględnionych przy określeniu liczby N, jeżeli
wskazali tę jednostkę w afiliacji, z zastrzeżeniem, że liczba tych publikacji
nie może przekroczyć 20% wartości 3N-2N0.
Afiliacja autorów publikacji
KEJN
16
• Monografie naukowe i rozdziały w monografiach zalicza się do osiągnięć
naukowych i twórczych jednostki, jeżeli ich autor lub współautorzy zostali
uwzględnieni przy określeniu liczby N.
• Do osiągnięć jednostki są zaliczane monografie naukowe i rozdziały w
monografiach autorstwa osób nieuwzględnionych przy określeniu liczby N,
jeżeli osoby te wskazały jednostkę w afiliacji, z zastrzeżeniem, że ich
liczba nie może stanowić więcej niż 20% wszystkich monografii naukowych i
rozdziałów uwzględnianych w ocenie.
• Liczba monografii naukowych i rozdziałów w monografiach naukowych
uwzględnianych w ocenie nie może łącznie przekroczyć 20% wartości
3N-2N0 w grupie nauk ścisłych i inżynierskich.
Afiliacja autorów monografii
KEJN
17
• Liczba dzieł architektonicznych lub wzorniczych uwzględnianych przy
kompleksowej ocenie w grupie nauk ścisłych i inżynierskich, w zakresie
dyscyplin naukowych architektura i urbanistyka oraz sztuki projektowe nie
może przekroczyć 20% wartości 3N-2N0.
• Liczba monografii naukowych uznanych za dzieła wybitne i rozdziałów w
tych monografiach, uwzględnianych przy kompleksowej ocenie nie może
łącznie przekroczyć 5% wartości liczby N.
Dzieła architektoniczne i monografie wybitne
KEJN
18
• W ocenie za lata 2013–2016 stosuje się wykaz czasopism naukowych wraz
z liczbą punktów przyznanych za publikacje naukowe w tych czasopismach
ustalony na podstawie wykazów ogłoszonych w tych latach przez
ministra.
• W wykazie ujmuje się wszystkie czasopisma naukowe, które zostały ujęte w
co najmniej jednym wykazie obowiązującym w poszczególnych latach z
okresu 2013–2016. Za publikacje naukowe w każdym z tych czasopism
przyznaje się najwyższą liczbę punktów spośród określonych w
poszczególnych wykazach z tego okresu.
• Minister ogłosi wykaz, o którym mowa w ust. 1, w formie komunikatu w BIP
na stronie podmiotowej ministra, w terminie do dnia 31 stycznia 2017 r.
Wykaz czasopism naukowych
KEJN
19
Grupy Wspólnej Oceny (GWO) tworzone są z uwzględnieniem zasad
podobieństwa jednostek naukowych, wyrażonych poprzez:
1. profil działalności naukowo-badawczej (w tym profil publikacji,
monografii, patentów),
2. uprawnienia jednostek do nadawania stopni naukowych (dr, dr hab.),
3. strukturę potencjału naukowego (dyscypliny naukowe, w których
pracownicy uzyskali stopnie lub tytuł naukowy),
4. podobieństwo w innych aspektach działalności badawczej jednostek
(np. wdrożenia, efekty materialne etc.).
W każdej grupie nauk zostanie utworzona specjalna GWO dla tzw.
niejednorodnych jednostek naukowych NJN.
Grupy wspólnej oceny GWO
KEJN
20
Kryterium 1 – osiągnięcia naukowe i twórcze: publikacje,
monografie, patenty, dz. artystyczna
Kryterium 2 – potencjał naukowy: uprawnienia, stopnie i tytuły,
baza laboratoryjna, zaangażowanie w projektach badawczych
Kryterium 3 – praktyczne efekty działalności naukowej i
artystycznej: koszty poniesione na działalność naukową,
środki pozyskane, aplikacje i wdrożenia
Kryterium 4 – pozostałe efekty działalności naukowej i
artystycznej: wybitne osiągnięcia jednostki naukowej
Kategoryzacja – jednostki referencyjne JRA, JRB, porównanie
parami z JRA, JRB, kategorie A, B, C i A+
Ocena jednostek naukowych - kryteria
KEJN
21
Porównanie pary jednostek X i Y
Porównanie ocen dla każdego z 4 kryteriów z osobna:
Oi(X)↔Oi(Y)→Pi ; i=1,..,4
Jednostki otrzymują punkty Pi w zakresie <-1 , +1>
A
n
k
i
e
t
a
J
N
O1(X)
O2(X)
O3(X)
O4(X)
A
n
k
i
e
t
a
J
N
O1(Y)
O2(Y)
O3(Y)
O4(Y)
P1(X,Y)
P2(X,Y)
P3(X,Y)
P4(X,Y)
V(X,Y)
Algorytm porównań parami – wersja uproszczona
KEJN
22
Założenia i symbole:
Oi(X) ≥ Oi(Y) ΔO = Oi(X) – Oi(Y)
Oi(X) – ocena jednostki X za i-te kryterium
Oi(Y) – ocena jednostki Y za i-te kryterium
Możliwe przypadki Pi(X,Y) Pi(Y,X)
ΔO ≥ G 1 -1
G > ΔO > D (ΔO – D)/(G – D) – (ΔO – D)/(G – D)
ΔO ≤ D 0 0
ΔO
P(X,Y)
D G
- G - D
1
-1
D – próg nierozróżnialności; G – próg pełnego przewyższania
Relacja przewyższania (porównanie pary jednostek X i Y)
KEJN
23
Kryterium oceny (Ki) Waga kryterium (Wi) [%]
Podstawowe
jednostki
organizacyjne
uczelni
Jednostki naukowe
Polskiej Akademii
Nauk
i międzynarodowe
instytuty naukowe
Instytuty
badawcze
i inne
Nauki ścisłe i inżynierskie
K1: osiągnięcia naukowe i
twórcze (W1) 65 65 40
K2: potencjał naukowy (W2) 10 10 10
K3: materialne efekty
działalności naukowej (W3) 15 15 40
K4: pozostałe efekty
działalności naukowej (W4) 10 10 10
V(X,R) = W1 P1(X,R) + W2 P2(X,R) + W3 P3(X,R) + W4 P4(X,R)
Całkowity wynik punktowy V (X,R) porównania jednostki naukowej X z
jednostką referencyjną R:
Porównanie jednostki X z jednostką referencyjną R
KEJN
24
• Jednostkę można uznać za NJN jeżeli stopień niejednorodności,
określony jako udział pracowników prowadzących działalność
naukową lub badawczo-rozwojową w obszarach wiedzy innych niż
obszar wiedzy wiodący dla danej jednostki w liczbie N, wynosi co
najmniej 35%.
• Do oceny NJN Komitet tworzy odrębne GWO, po jednej dla
każdego rodzaju jednostek w każdej z grup nauk.
• Niejednorodność JN dotyczy obszarów wiedzy a nie dziedzin lub
dyscyplin.
• Jednostki referencyjne JRA, JRB dla danej NJN to średnie
ważone jednostek referencyjnych z odpowiednich GWO,
reprezentujących obszary wiedzy charakterystyczne dla danej
jednostki.
Koncepcja niejednorodnych jednostek naukowych NJN
KEJN
25
Obszary wiedzy
1. obszar nauk humanistycznych
2. obszar nauk społecznych
3. obszar nauk ścisłych
4. obszar nauk przyrodniczych
5. obszar nauk technicznych
6. obszar nauk rolniczych, leśnych i weterynaryjnych
7. obszar nauk medycznych i nauk o zdrowiu
8. obszar sztuki
KEJN
26
Obszary wiedzy, dziedziny i dyscypliny Obszar nauk ścisłych Dziedzina nauk matematycznych 1. matematyka
2. informatyka
Dziedzina nauk fizycznych 1. astronomia
2. biofizyka
3. fizyka
4. geofizyka
Dziedzina nauk chemicznych 1. biochemia
2. biotechnologia
3. chemia
4. ochrona środowiska
5. technologia chemiczna
Obszar nauk technicznych Dziedzina nauk technicznych 1. architektura i urbanistyka
2. automatyka i robotyka
3. biocybernetyka i inżynieria
biomedyczna
4. biotechnologia
5. budowa i eksploatacja maszyn
6. budownictwo
7. elektronika
8. elektrotechnika
9. energetyka
10. geodezja i kartografia
11. górnictwo i geologia inżynierska
12. informatyka
13. inżynieria chemiczna
14. inżynieria materiałowa
15. inżynieria produkcji
16. inżynieria środowiska
17. mechanika
18. metalurgia
19. technologia chemiczna
20. telekomunikacja
21. transport
22. włókiennictwo
KEJN
27
Obszary wiedzy, dziedziny i dyscypliny
Obszar nauk społecznych Dziedzina nauk społecznych 1) nauki o bezpieczeństwie
2) nauki o obronności
3) nauki o mediach
4) nauki o polityce
5) nauki o polityce publicznej
6) nauki o poznaniu i komunikacji społecznej
7) pedagogika
8) psychologia
9) socjologia
Dziedzina nauk ekonomicznych 1) ekonomia
2) finanse
3) nauki o zarządzaniu
4) towaroznawstwo
Dziedzina nauk prawnych 1) nauki o administracji
2) prawo
3) prawo kanoniczne
Obszar nauk
humanistycznych
Dziedzina nauk humanistycznych 1) archeologia
2) bibliologia i informatologia
3) etnologia
4) filozofia
5) historia
6) historia sztuki
7) językoznawstwo
8) kulturoznawstwo
9) literaturoznawstwo
10) nauki o rodzinie
11) nauki o sztuce
12) nauki o zarządzaniu
13) religioznawstwo
Dziedzina nauk teologicznych
KEJN
28
Kryterium 1
• Publikacje naukowe w czasopismach z list A, B, C,
• Recenzowane publikacje naukowe (0,5 arkusza) w zagranicznym czasopiśmie niewymienionym w wykazie A, B, C,
• Publikacje w recenzowanych materiałach z konferencji międzynarodowych uwzględnionych w uznanej bazie publikacji (WoS),
• Monografie naukowe (6 arkuszy) i rozdziały w monografii (0,5 arkusza),
• Patenty na wynalazki, prawa ochronne na wzory użytkowe, prawa z rejestracji wzorów przemysłowych,
• Wykorzystane prawa autorskie majątkowe do utworu z zakresu architektury, urbanistyki lub sztuk projektowych,
• Utwory architektoniczne, architektoniczno-urbanistyczne i urbanistyczne oraz utwory z zakresu sztuk projektowych, wzornictwa przemysłowego
Zakres Kryterium 1
KEJN
29
Zmiany w Kryterium 1
• Doprecyzowanie definicji monografii
• Wprowadzenie kategorii monografii wybitnych (50 pkt)
• Rezygnacja z różnicowania punktacji za monografie w zależności od języka
• Podwyższenie punktacji za patenty:
zwiększenie punktacji za udzielony patent krajowy do 30 pkt., a
międzynarodowy do 40 pkt., natomiast za wdrożenie patentu do 30 pkt.
Rezygnacja z punktowania zgłoszeń patentowych
• Podniesienie wartości punktowej publikacji w materiałach
konferencyjnych uwzględnianych w uznanej bazie publikacji naukowych
o zasięgu międzynarodowym (WoS) do najniższej wartości punktowej
czasopisma naukowego na liście A.
KEJN
30
Kryterium 1 – monografie naukowe
• Stanowią spójne tematycznie opracowania naukowe
• Przedstawiają określone zagadnienie w sposób oryginalny i twórczy
• Poddane były procedurze recenzji wydawniczych
• Są opatrzone właściwym aparatem naukowym (bibliografia)
• Posiadają objętość co najmniej 6 arkuszy wydawniczych
• Są opublikowane jako książki lub odrębne tomy
• Posiadają nadany numer ISBN, ISMN lub identyfikator DOI
Monografia wybitna: przyznana prestiżowa nagroda (PRM, Ministra, PAN, FNP, zagranicznego towarzystwa naukowego, organizacji międzynarodowej).
Kryterium 1: monografie
KEJN
31
Kryterium 1: publikacje wieloautorskie
Utrzymanie dotychczasowej zasady! 1. do 10 autorów - 100% punktów dla JN;
2. powyżej 10 autorów:
• 100% punktów – jeśli co najmniej 20% autorów z JN
• 75% punktów – jeśli co najmniej 10% autorów z JN
• 50% punktów - jeśli mniej niż 10% autorów z JN
KEJN
32
• Posiadanie uprawnienia do nadawania stopni naukowych lub stopni w
zakresie sztuki
• Rozwój własnej kadry i udział osób niebędących pracownikami JN
• Mobilność pracowników JN w tym pobyty w innych ośrodkach naukowych
• Inne osiągnięcia świadczące o potencjale naukowym JN (członkostwo we
władzach towarzystw i organizacji naukowych, pełnienie funkcji redaktora
naczelnego czasopisma naukowego z listy A, członkostwo w zespołach
eksperckich, wydawanie czasopisma naukowego z listy A)
• Posiadanie laboratoriów akredytowanych, certyfikowanych w zakresie DPL
• Aktywność w koordynowaniu, realizacji i pozyskiwaniu środków
finansowych na realizację projektów międzynarodowych i krajowych.
Zakres Kryterium 2
KEJN
33
Punkty za mobilność naukowców (pobyt w uczelni notowanej w
Academic Ranking of World Universities lub w renomowanym ośrodku
naukowym)
Punkty za aktywność JN w pozyskiwaniu, koordynowaniu i realizacji
projektów międzynarodowych (maksimum 400 pkt)
Określenie punktacji projektu na podstawie:
• rodzaju projektu – 4 klas programów ze względu na wagę i znaczenie
• roli JN w hierarchii zarządzania projektem - 3 poziomy
• wysokości finansowania
Zmiany w Kryterium 2
KEJN
34
Rodzaj projektu:
r1 - Projekty obejmujące badania naukowe lub prace rozwojowe finansowane ze środków UE
zarządzanych centralnie
r2 – Projekty obejmujące badania naukowe lub prace rozwojowe finansowane wspólnie z
instytucjami badawczymi w krajach członkowskich OECD oraz projekty międzynarodowe
współfinansowane
r3 - Projekty obejmujące badania naukowe lub prace rozwojowe finansowane przez NCN i
NCBiR oraz finansowane przez analogiczne zagraniczne instytucje publiczne
r4 - Projekty obejmujące badania naukowe lub prace rozwojowe finansowane w ramach programów
operacyjnych, przez Ministra, przez krajowych albo zagranicznych przedsiębiorców
Rola JN:
z1 - Koordynator projektu realizowanego co najmniej z dwoma wykonawcami zagranicznymi
z2 - Koordynator projektu realizowanego z wykonawcą zagranicznym albo wykonawcami
krajowymi albo kierowanie pakietem zadaniowym
z3 - wykonawca projektu w ramach konsorcjum albo projektu indywidualnego
Zmiany w Kryterium 2
KEJN
35
Liczba punktów za projekt (P): P = m * K
m – mnożnik dla projektu z tabeli
K – środki finansowe w mln zł, wydatkowane przez JN w okresie objętym oceną na badania
prowadzone w ramach projektu
Za jeden projekt JN może uzyskać maksymalnie 100, a za wszystkie w okresie objętym
oceną maksymalnie 400 punktów
z1 z2 z3
r1 10 8 6
r2 8 7 5
r3 6 5 4
r4 x 4 3
Zmiany w Kryterium 2
KEJN
36
Zakres Kryterium 3
• Środki finansowe wydatkowane przez JN na realizację projektów B lub R
• Nowe technologie, materiały, wyroby, metody, procedury, oprogramowanie
opracowane na rzecz innych podmiotów, na podstawie zawartych umów
• Środki finansowe uzyskane z tytułu komercjalizacji wyników badań
naukowych lub prac rozwojowych
• Ekspertyzy, opracowania naukowe lub działania artystyczne opracowane na
rzecz innych podmiotów
• Przychody jednostki w celu komercjalizacji badań naukowych lub prac
rozwojowych z tytułu: wdrożenia przez inne podmioty wyników badań
naukowych, sprzedaży produktów będących efektem wdrożenia
• Aplikacje wyników badań naukowych lub prac rozwojowych prowadzonych w
jednostce i zastosowanych w innych podmiotach
KEJN
37
K 3
Przychody JN ze
sprzedaży wyników
działalności :
technologie, materiały,
produkty, licencje, know-
how, opinie, ekspertyzy,
działania artystyczne
Koszty JN na realizację
badań pozyskanych w
trybie konkursowym:
na badania naukowe i B+R
ze wskazanymi
wyłączeniami
Zastosowanie wyników
działalności poza JN
wdrożenia i aplikacje
aplikacja - potwierdzony efekt
niematerialny
wdrożenie - potwierdzony
przychodem efekt materialny
Efekty praktyczne działalności naukowej
Zmiany w Kryterium 3
KEJN
38
Zakres Kryterium 3
• Efekty finansowe działalności naukowej i innowacyjnej
• Sprzedaż wyników badań naukowych lub prac rozwojowych
• Wdrożenia wyników badań naukowych lub prac rozwojowych
• Aplikacje wyników badań naukowych lub prac rozwojowych
Powstał nowy wzór karty aplikacji lub wdrożenia produktu!
Przyjęto, że formą zastosowania jest:
• wdrożenie, które generuje przychody podmiotu wdrażającego i jest oceniane na
podstawie wysokości tego przychodu,
• aplikacja, która nie generuje wymiernych korzyści materialnych i jest oceniana
na podstawie zasięgu oddziaływania produktu (mały/lokalny, średni/krajowy,
duży/międzynarodowy).
Zmiany w Kryterium 3
KEJN
39
Zakres Kryterium 4
10 najważniejszych osiągnięć o znaczeniu naukowym, gospodarczym,
dla ochrony zdrowia lub środowiska naturalnego (ogólnospołecznym)
0 - 50 pkt za:
• efekty badań naukowych lub prac rozwojowych o znaczeniu międzynarodowym w
tym publikacji mających szczególne znaczenie dla rozwoju nauki, kultury i sztuki,
• udokumentowane zastosowania wyników badań naukowych lub prac rozwojowych
o dużym znaczeniu społecznym (ochrona zdrowia, środowiska, bezpieczeństwo).
0 - 50 pkt za:
• osiągnięcia świadczące o pozycji międzynarodowej jednostki na tle GWO, ze
szczególnym uwzględnieniem udziału w realizacji projektów międzynarodowych,
• organizację międzynarodowych konferencji (sympozjów, kongresów, warsztatów),
w których min 1/3 uczestników reprezentowała zagraniczne ośrodki naukowe.
KEJN
40
Kategoria A+
• może zostać przyznana JN kategorii A, która znajduje się wśród 15% jednostek najwyżej ocenionych w K1, lub uzyskała w K1 minimum 85% oceny najwyższej w danej GWO,
• wyróżnia się jakością i efektami prowadzonych badań naukowych lub prac rozwojowych.
Ponadto w ocenie uwzględnia się:
• znaczenie osiągnięć w Kryterium 1 dla rozwoju dyscypliny naukowej, w tym:
średnią wartość ocen 25% osiągnięć jednostki naukowej, najwyżej ocenionych według Kryterium 1,
wartości zmodyfikowanego indeksu Hirscha (hm=h/N0.4),
liczbę wysoko cytowanych publikacji, opublikowanych w okresie objętym oceną,
• udział w upowszechnianiu osiągnięć naukowych w skali międzynarodowej,
• udział w tworzeniu strategicznej infrastruktury badawczej,
• znaczenie wyników badań naukowych lub prac rozwojowych dla rozwoju gospodarczego kraju, zwiększenia konkurencyjności i innowacyjności gospodarki,
• udział w realizacji międzynarodowych projektów badawczych.
KEJN
41
Podsumowanie zmian
Systemowe – porównanie parami, GWO i NJN, Kategoria A+, wdrożenia i innowacyjność, umiędzynarodowienie,
Kryterium 1 – monografie, patenty, działalność artystyczna,
Kryterium 2 – wyeliminowanie wielu drobnych informacji, baza laboratoryjna, zaangażowanie w projektach badawczych,
Kryterium 3 – koszty poniesione na działalność naukową, docenienie aplikacji i wdrożeń,
Kryterium 4 – sprecyzowanie osiągnięć,
A+ – poszerzenie i doprecyzowanie kryteriów.
KEJN
42
Instrumentarium KEJNu
KEJN
43
System Ewaluacji Dorobku Naukowego
Przykładowa jednostka naukowa
Przykładowa jednostka naukowa
www.przykladowajednostkanaukowa.pl
KEJN
44
• Jednostki gromadzą dane nt. własnego dorobku ze wszystkich
dostępnych źródeł (wewnętrznych i zewnętrznych)
• Informacje wprowadzane są do modułu „Ankieta jednostki
naukowej”
• Wyznaczenie Grup Wspólnej Oceny przez KEJN
• System ekspercki wskazujący stopień dopasowania JN do GWO
• Przydział jednostek do GWO
• Wyliczenie parametrów N, N0
• Walidacja danych – wyszczególnienie zadań ewaluacyjnych
dla członków Zespołów Ewaluacji
• Praca w systemie teleinformatycznym
Weryfikacja
osiągnięć
zgłoszonych do
ewaluacji
Przydział
do GWO
Gromadzenie
danych
• Zespoły Ewaluacji przyznają odrębne oceny za każde
kryterium w karcie kompleksowej oceny jednostki naukowej
• Większa część osiągnięć jest punktowana na podstawie
algorytmów wynikających z rozporządzenia
Ocena KEJN
• Wyznaczenie jednostek referencyjnych JRA, JRB
• Porównanie parami z JRA, JRB Parametryzacja
• Zakończenie ewaluacji oraz publikacja wyników
• Odwołania
• Ogłoszenie finalnego wykazu z przypisaną kategorią A+, A, B, C
Kategoryzacja
Proces ewaluacji jednostek naukowych
KEJN
45
Proces ewaluacji jednostek naukowych
KEJN
46
Proces ewaluacji jednostek naukowych
KEJN
47
Efektywność w nauce to prosty ułamek:
EN=L/M
L = suma punktów za działalność naukową lub efekty
materialne działalności naukowej
M = liczba pracowników zatrudnionych przy realizacji
badań naukowych lub prac rozwojowych
Każdy pracownik naukowy i naukowo-dydaktyczny
liczony w mianowniku, powinien wypracować tyle
punktów aby utrzymać efektywność jednostki naukowej
na z góry założonym poziomie.
Zamiast wniosków
KEJN
48
Dziękuję za uwagę
Wynik oceny parametrycznej jednostek
naukowych i przyznana kategoria są podstawą
alokacji środków na działalność statutową