Projekt zmian w ocenie parametrycznej i kategoryzacji jednostek naukowych w 2017 roku Konferencja MNiSW i KEJN Warszawa, 18 lutego 2015 r.
Projekt został opracowany przez KEJN po licznych konsultacjach m.in. na posiedzeniach KRASP, Prezydium PAN, KRUP, KRAUM, RGIB oraz kierownictwa MNiSW i dokumentach KPN, Wydziałów PAN i in. a także ankiety przeprowadzonej wśród JN. Powszechnie uznano, że parametryzacja 2017 powinna być kontynuacją poprzedniej, ale że wymaga ona zmian, uzupełnień i dopracowania wielu szczegółów i rozwiązań. Ocena ma charakter parametryczny z elementami eksperckimi, co najsilniej jest wyrażone w ocenie według kryterium 4 oraz w wyborze JN do kategorii A+.
Szczególny nacisk położono na następujące zagadnienia: Umiędzynarodowienie badań naukowych Promowania interdyscyplinarności, określenie heterogenności JN i tworzenie GWO Wprowadzenie nowych zasad punktacji monografii, Wprowadzenie systemu popierania projektów badawczych międzynarodowych i innowacyjnych Uproszczenie i doprecyzowanie zasady porównania parami Uszczegółowienie oceny kryterium 4 Pozostałe efekty działalności naukowej Szersze uwzględnienie innowacyjności, w tym zmiana Karty Aplikacji i Wdrożeń Doprecyzowanie zasad punktacji przychodów jednostki w ramach kryt. 3 Ustalenie nowych zasad typowania jednostek do Kategorii A+ Uściślenie punktacji dorobku artystycznego w kryt.1 Osiągnięcia naukowe i twórcze Zmiany w zakresie oceny kryt. 2 Potencjał Naukowy Inne, w tym dotyczące liczby No, wag, uproszczeń i podniesienia rangi patentów.
Zmiany systemowe - Uproszczenie algorytmu porównywania parami - Modyfikacja zasad tworzenia Grup Wspólnej Oceny (GWO) - Nowe zasady ustalania ocen jednostek referencyjnych dla jednostek naukowych niejednorodnych (NJN) - Modyfikacja zasad wyłaniania JN kategorii A+ - Efekty wdrożeniowe i aplikacyjne działalności naukowej we wszystkich rodzajach JN, bez względu na grupę nauk. - Umiędzynarodowienie badań naukowych
Zasady tworzenia i przypisania jednostek naukowych do GWO Grupy Wspólnej Oceny (GWO) tworzone są z uwzględnieniem zasady podobieństwa JN w oparciu o: profil działalności naukowo-badawczej publikacji ustalany m.in. w porozumieniu z Zespołem ds. Czasopism), uprawnienia jednostek do nadawania stopni naukowych, strukturę potencjału naukowego (dyscypliny naukowe, w których pracownicy uzyskali stopnie lub tytuł naukowy), podobieństwo w innych aspektach działalności badawczej jednostek (np. wdrożenia, efekty materialne etc.). Dla Niejednorodnej Jednostki Naukowej (NJN), której dorobek naukowy wykracza poza dziedzinę nauk nowa zasada wyznaczania JRef
Propozycja zmian stymulujących zwiększenie umiędzynarodowienia badań naukowych Szczególne docenienie pozyskiwania środków na realizację projektów badawczych ze źródeł międzynarodowych, w tym głównie ze środków UE. Odpowiednie punktowanie udziału w międzynarodowych przedsięwzięciach badawczych, a także nagród i wyróżnień o charakterze międzynarodowym Docenienie tzw. międzynarodowej widoczności jednostki naukowej i jej wpływu na naukę światową Doprecyzowanie znaczenia pozycji międzynarodowej przy ustalaniu wartości ocen Jednostek Referencyjnych Zwiększenie punktacji za uzyskane patenty międzynarodowe. Rekomendujemy utrzymanie wysokiej punktacji i systemu wag za publikacje w czasopismach znajdujących się w obiegu międzynarodowym (Lista A)
Kategoria naukowa A+ może zostać przyznana JN, która jest zaliczona do kategorii A kategoria A+ jest przyznawana na podstawie opinii eksperckiej, biorąc pod uwagę następujące kryteria w zależności od charakteru GWO: - waga osiągnięć dotyczących nauki, kultury, sztuki i dziedzictwa narodowego. - rola w inicjowaniu życia naukowego na terenie dyscypliny - waga osiągnięć dotyczących rozwoju gospodarczego kraju - średnia wartość punktowa 25% najwyżej punktowanego dorobku JN - wartość zmodyfikowanego indeksu Hirsha - wartość zmodyfikowanej liczby cytowań - opublikowanie wysoko cytowanych prac, w których JN jest podmiotem wiodącym liczba jednostek z kategorią A+ w danej dyscyplinie nauki zależy od jej pozycji międzynarodowej.
Kryterium I Osiągnięcia naukowe i twórcze - Doprecyzowanie definicji monografii - Wprowadzenie kategorii monografii wybitnych - Rezygnacja z różnicowania punktacji za monografie w zależności od języka - Modyfikacja zasad przyznawania punktów za monografie wieloautorskie - Zmiana definicji parametrów dorobku artystycznego, w tym wprowadzenie kategorii dzieł wybitnych - - Podwyższenie punktacji za patenty
Nowe zasady oceny monografii naukowych Doprecyzowanie definicji i wykluczeń Rezygnacja z wyróżniania języków obcych oraz kategorii języka podstawowego - wszystkie po 25 pkt Wprowadza się kategorię monografii wybitnych - 50 pkt Kryterium I
W Grupie Nauk o Sztuce i Twórczości Artystycznej zmiany zmierzają w kierunku - Zwiększenia dopuszczalnego udziału dorobku artystycznego w kryterium I - Uściślenia zasad punktacji dorobku artystycznego, w tym wprowadzenia kategorii dzieło wybitne - Podwyższenia wagi eksperckiej oceny w kryterium IV Kryterium I
Kryterium II Potencjał naukowy - Stymulowanie zaangażowania w prowadzeniu międzynarodowych i krajowych projektów badawczych oraz innowacyjnych projektów finansowanych przez przedsiębiorców - Znacznie zmniejszenie liczby nisko punktowanych podkryteriów, - Dodatkowe punkty za posiadanie certyfikowanej bazy badawczej
Aktywność JN w pozyskiwaniu, koordynowaniu i realizacji projektów międzynarodowych Określenie punktacji projektu na podstawie: rodzaju projektu 5 klas programów ze względu na wagę i znaczenie roli JN w hierarchii zarządzania projektem - 3 poziomy wysokość finansowania wyliczenie punktacji projektu z ograniczeniem punktowym i włączenie do kryterium 2 potencjał naukowy. Kryterium II
Kryterium III Efekty materialne działalności naukowej - Doprecyzowanie zasad punktacji przychodów jednostki - Nowy wzór KARTY APLIKACJI LUB WDROŻENIA PRODUKTU
Doprecyzowanie zasad punktacji przychodów jednostki w ramach kryterium 3 Efekty materialne działalności naukowej Punktowane będą: Udokumentowane koszty realizacji prac naukowych lub rozwojowych poniesione przez jednostkę naukową w okresie oceny i pokryte z uzyskanych środków finansowych w wyniku postępowań konkursowych krajowych i zagranicznych 2 pkt. za każde 50 tys. zł. * * z wyłączeniem środków 1) przyznanych na finansowanie działalności statutowej; 2) uzyskanych wyłącznie na rozwój infrastruktury badawczej; 3) pozyskanych na działalność dydaktyczną; 4) uzyskanych ze świadczenia usług nie będących pracami naukowymi lub rozwojowymi, a w szczególności ze świadczenia usług dydaktycznych oraz usług medycznych finansowanych przez NFZ Kryterium III
Innowacyjność oraz Karta Aplikacji lub Wdrożenia Produktu Zaproponowano, że innowacyjność badań naukowych i prac rozwojowych będzie mierzona zakresem zastosowania tj. aplikacji (bez wymiernych korzyści materialnych ocenianej na podstawie zasięgu oddziaływania) lub wdrożenia (ocenianego wysokością przychodu). Do tego celu opracowano nową Kartę Aplikacji lub Wdrożenia Produktu oraz sposób naliczania punktów. Proponowane wartości punktowe odnośnie do zasięgu oddziaływania lub wysokości przychodu Zasięg oddziaływania - aplikacji Punkty Przychody z wdrożenia [zł] w grupie nauk: NŻ, HS, S-TA SI lokalny (zasięg nie przekraczający jednego województwa) krajowy (zasięg większy niż jednego województwa) 2 10 tys. < P 100 tys. 100 tys.< P 1 mln 4 100 tys. < P 1 mln 1 mln < P 5 mln międzynarodowy (zasięg większy niż na terenie jednego państwa) 8 P > 1 mln P > 5 mln Kryterium III
Kryterium IV Inne osiągnięcia działalności naukowej - Zmodyfikowano tą ocenę wprowadzając cztery parametry podzielone na 2 grupy - Doprecyzowano ocenę innych efektów działalności naukowej JN, a zwłaszcza zwiekszono punktację za: 1) efekty badań naukowych o znaczeniu międzynarodowym, 2) udokumentowane zastosowania wyników badań naukowych lub prac rozwojowych o dużym znaczeniu społecznym (ochrony zdrowia, środowiska, bezpieczeństwo), 3) pozycję międzynarodową jednostki na tle GWO, ze szczególnym uwzględnieniem udziału w realizacji projektów międzynarodowych, a w naukach HS i TA także jej oddziaływanie na rozwój społeczeństwa w dłuższym horyzoncie czasowym
Pozostałe zasady i parametry wymagające zmian N 0 liczba pracowników zaliczanych do liczby N, którzy byli zatrudnieni przez okres co najmniej 3 lat Zmiany niektórych wag kryteriów Patenty zwiększenie punktacji za udzielony patent krajowy do 30 pkt. i międzynarodowy do 35 pkt., a za wdrożenie patentu do 30 pkt. Zrezygnować z punktowania zgłoszeń patentowych. Ujednolicić sposób podawania środków finansowych w ankiecie JN Podniesiono wartość punktową publikacji (dotyczy pełnych publikacji, a nie streszczeń) w Materiałach Konferencyjnych uwzględnianych w WoS do najniższej wartości punktowej czasopisma naukowego na liście A
Podsumowanie projektu zmian Systemowe porównanie parami, GWO i NJN, Kategoria A+, wdrożenia i innowacyjność, umiędzynarodowienie Kryterium 1 monografie, patenty, działalność artystyczna Kryterium 2 wyeliminowanie wielu drobnych informacji, baza laboratoryjna, zaangażowanie w projektach badawczych Kryterium 3 koszty poniesione na działalność naukową, karta aplikacji i wdrożeń Kryterium 4 sprecyzowanie osiągnięć
Uwagi i wątpliwości Kierownictwa MNiSW i KPN - Kategoria A+ (podkryteria, wartości brzegowe i in.) - Zmniejszenie zbieranych i analizowanych danych, w tym zmniejszenie liczby ocenianych publikacji z 3N do 1N - Punktacja czasopism naukowych i monografii - Mobilność pracowników i sztuczne zatrudnianie - Wagi kryteriów i relacje punktowe podkryteriów - Charakter list parametrów; otwarte, czy zamknięte, np. programów międzynarodowych, nagród itp. - Inne szczegóły dotyczące definicji elementów oceny, ich dokumentowanie, ograniczenia punktowe itp.