Co się liczy w nauce czyli o zasadach ewaluacji nauki

Transkrypt

1 Wiosenne Warsztaty dla Badaczy Co się liczy w nauce czyli o zasadach ewaluacji nauki Ewa A. Rozkosz Dolnośląska Szkoła Wyższa

2 Czemu służy ocena! 1. jednostek naukowych wysokość finansowania działalności statutowej 2. czasopism wysokość finansowania działalności statutowej, awans naukowy, przyznanie grantu pracownikowi, przyznanie dotacji na czasopismo, awans naukowy 3. kandydatów do stopni/tytułu naukowego awans naukowy 4. pracowników jednostki?

3 ocena jednostek ocena czasopism naukowych ocena pracownika jednostki naukowej ocena kandydata do stopnia/tytułu naukowego

4 Ocena jednostek naukowych

5 Podstawa prawna Ustawa z dnia 30 kwietnia 2010 r. o zasadach finansowania nauki (zmieniana + projekt nowelizacji)! Rozporządzenie MNiSW z dnia 13 lipca 2012 r. w sprawie kryteriów i trybu przyznawania kategorii naukowej jednostkom naukowym (może ulec zmianie)

6 Ustalenia ogólne ocena i przyznanie kategorii raz na 4 lata narzędziem oceny POL-on w POL-onie gromadzone są dane o działalności naukowej uczelni, np. dane o jednostce, pracownikach, projektach, publikacjach naukowych, cytowaniach jednostki naukowe aplikujące o środki na finansowanie działalności naukowej muszą na bieżąco przekazywać dane do POL-onu nieterminowe, nierzetelne przekazywanie danych do POL-onu = zatrzymanie finansowania działalności statutowej

7 Na podstawie oceny przyznawana kategoria A+ poziom wiodący A poziom bardzo dobry B poziom zadowalający C poziom niezadowalający

8 Kryteria oceny jednostek naukowych Numer kryterium I II III IV Nazwa Osiągnięcia naukowe i twórcze Potencjał naukowy Materialne efekty działalności naukowej Pozostałe efekty działalności naukowej Parametry publikacje: monografie, rozdziały, artykuły Uwaga: limity! awanse naukowe: uprawnienia do nadawania stopni naukowych, awanse pracowników, przewody/ postępowania w jednostce, pełnienie funkcji promotora członkostwo pracowników: organizacje, czasopisma, zespoły eksperckie działalność wydawnicza: czasopisma (A, C) ekspertyzy i opracowania naukowe (pośrednictwo jednostki, min. 50 tys.) projekty (pośrednictwo jednostki, min. 100 tys.) 10 najważniejszych osiągnięć o znaczeniu społecznym, gospodarczym itp.

9 Narzędzia lokalne: ENDO, PUB krajowe: POL-on (m.in. Polska Bibliografia Naukowa)

10 Ocena czasopism

11 Podstawa prawna Komunikat MNiSW z dnia 29 maja 2013 r. w sprawie kryteriów i trybu oceny czasopism naukowy! Uwagi: cały system oceny czasopism ulegnie zmianie w 2014 r. nie będzie oceny wiele redakcji czasopism kłamało w ankietach ewaluacyjnych (Sic!)!

12 Wybrane parametry oceny umiędzynarodowienie: zagraniczni redaktorzy, recenzenci, autorzy, język publikacji procedury: recenzyjna, anty ghostwriting, zasady etyczne, zasady redagowania tekstu (redakcja językowa, statystyczna itp.) periodyczność ucyfrowienie zasięg: lokalne czy krajowe cytowania: Web of Science (PIF), POL-index (PWW) obecność w bazach: JCR (posiadają IF), ERIH (?), SCOPUS (?)

13 Narzędzia krajowe: Polska Bibliografia Naukowa, POL-index wybrane bazy referencyjne: Index Copernicus, DOAJ, Web of Science (Social Sciences Citation Index), SCOPUS

14 Uwaga weryfikacja czasopisma Polska Bibliografia Naukowa (punkty) Arianta (dane o stronie/stronach internetowych, informacja o dawnej punktacji) Katalogi bibliotek: UW, UJ, Biblioteki Narodowej (czy dostarczyło egz. obowiązkowy) NUKAT (gdzie można znaleźć czasopismo) strona internetowa czasopisma bazy: Web of Science, SCOPUS opinia środowiska kontakt ze Specjalistą ds. dokumentacji i informacji naukowej

15 Ocena kandydata do stopnia/ tytułu naukowego

16 Podstawa prawna Ustawa z dnia 14 marca 2003 r. o stopniach naukowych i tytule naukowym oraz o stopniach i tytule w zakresie sztuki (zmienione)! Rozporządzenie z dnia 22 września 2011 r. w sprawie szczegółowego trybu i warunków przeprowadzania czynności w przewodach doktorskich, w postępowaniu habilitacyjnym oraz w postępowaniu o nadanie tytułu profesora

17 Przewód doktorski wybrane parametry oceny Warunek wszczęcia: wydana lub przyjęta do druku książka naukowa lub publikacja w czasopiśmie naukowym punktowanym (RW WNP uznaje również publikacje w czasopiśmie Drogi Edukacji ) lub rozdział w monografii pokonferencyjnej (konf. międzynarodowa) Doktorat formy: tradycyjna rozprawa maszynopis książki wydana książka naukowa spójny tematycznie zbiór rozdziałów spójny tematycznie zbiór artykułów w czasopismach naukowych punktowanych

18 Postępowanie habilitacyjne wybrane parametry oceny Warunek dopuszczenia do postępowania: osiągnięcia naukowe (podoktorskie) stanowiące znaczny wkład autora w rozwój określonej dyscypliny progi punktowe nie ma o nich mowy w aktach prawnych, ale wiele jednostek je stosuje! Osiągnięcie naukowe: książka naukowa autorska, zasadnicza część książki naukowej wieloautorskiej, jednotematyczny cykl publikacji

19 Postępowanie habilitacyjne wybrane parametry oceny Kryteria oceny osiągnięć naukowo-badawczych (nauki społeczne): artykuły w czasopismach z listy filadelfijskiej (JCR) i ERIH artykuły w czasopismach z listy MNiSW opracowania zbiorowe, raporty z badań, ekspertyzy SIF liczba cytowań wg Web of Science (Publish or Perish?) indeks Hirscha wg Web of Science (Publish or Perish?) projekty (rola kierownika) udział w redakcjach/radach naukowych czasopism członkostwo w organizacjach i in.

20 Postępowanie o nadanie tytułu profesora wybrane parametry oceny Parametry w ankiecie oceny osiągnięć naukowych: artykuły w czasopismach krajowych i międzynarodowych (należy podać IF) monografie naukowe i rozdziały udział w opracowaniach zbiorowych członkostwo w redakcjach naukowych liczba cytowań publikacji indeks Hirscha udział w konferencjach krajowych i międzynarodowych członkostwo w komitetach redakcyjnych/radach naukowych czasopism projekty krajowe i zagraniczne (w roli kierownika) ekspertyzy

21 Postępowanie o nadanie tytułu profesora wybrane parametry oceny wskazuje się najważniejsze osiągnięcie naukowe! Uwaga: Problemy ze zgromadzenie pełnego dorobku i informacji o aktywności naukowej (dowody).

22 Narzędzia krajowe: POL-on lokalne: ENDO, PUB osobiste: archiwum z dowodami (certyfikaty, odbitki publikacji), portfolio elektroniczne, osobista strona internetowa, archiwalne sprawozdania

23 Ocena pracowników jednostki

24 Podstawa prawna Ustawa z dnia 27 lipca 2005 r. prawo o szkolnictwie wyższym (zmiany + projekt nowelizacji)

25 Art Wszyscy nauczyciele akademiccy podlegają okresowej ocenie, w szczególności w zakresie należytego wykonywania obowiązków, o których mowa w art. 111 [ ].! 2. Oceny dokonuje podmiot wskazany w statucie uczelni, nie rzadziej niż raz na dwa lata lub na wniosek kierownika jednostki organizacyjnej, w której nauczyciel akademicki jest zatrudniony. Oceny nauczyciela akademickiego posiadającego tytuł naukowy profesora, zatrudnionego na podstawie mianowania, dokonuje się nie rzadziej niż raz na cztery lata. Kryteria oceny oraz tryb jej dokonywania, z uwzględnieniem możliwości zasięgania opinii ekspertów spoza uczelni, określa statut.! 3.Podmiot, o którym mowa w ust. 2, przy dokonywaniu oceny nauczyciela akademickiego w zakresie wypełniania przez niego obowiązków dydaktycznych uwzględnia ocenę przedstawianą przez studentów i doktorantów, po zakończeniu każdego cyklu zajęć dydaktycznych. Zasady dokonywania tej oceny i sposób jej wykorzystania określa statut uczelni.! 4. Do okresu, o którym mowa w ust. 2, nie wlicza się okresu nieobecności w pracy wynikającej z przebywania na urlopie macierzyńskim, urlopie wychowawczym lub urlopie dla poratowania zdrowia oraz okresu służby wojskowej lub służby zastępczej.

26 Art Pracownicy naukowo-dydaktyczni są obowiązani: 1) kształcić i wychowywać studentów, w tym nadzorować opracowywanie przez studentów prac zaliczeniowych, semestralnych, dyplomowych, pod względem merytorycznym i metodycznym; 2) prowadzić badania naukowe i prace rozwojowe, rozwijać twórczość naukową albo artystyczną; 3) uczestniczyć w pracach organizacyjnych uczelni.! [ ]! 3. Do obowiązków nauczycieli akademickich posiadających tytuł naukowy profesora lub stopień naukowy doktora habilitowanego należy również kształcenie kadry naukowej.! 4. Pracownicy dydaktyczni są obowiązani: 1) kształcić i wychowywać studentów, w tym nadzorować opracowywanie przez studentów prac zaliczeniowych, semestralnych, dyplomowych, pod względem merytorycznym i metodycznym; 2) podnosić swoje kwalifikacje zawodowe; 3) uczestniczyć w pracach organizacyjnych uczelni.

27 Art Pracownicy naukowo-dydaktyczni są obowiązani: 1) kształcić i wychowywać studentów, w tym nadzorować opracowywanie przez studentów prac zaliczeniowych, semestralnych, działalność dyplomowych, dydaktyczna pod względem merytorycznym i metodycznym; 2) prowadzić badania naukowe i prace rozwojowe, działalność rozwijać naukowa twórczość naukową albo artystyczną; 3) uczestniczyć w pracach organizacyjnych uczelni.! [ ] działalność organizacyjna! 3. Do obowiązków nauczycieli akademickich posiadających tytuł naukowy profesora lub stopień naukowy doktora habilitowanego należy również kształcenie kadry naukowej.! 4. Pracownicy dydaktyczni są obowiązani: 1) kształcić i wychowywać studentów, w tym nadzorować opracowywanie przez studentów prac zaliczeniowych, semestralnych, dyplomowych, pod względem merytorycznym i metodycznym; 2) podnosić swoje kwalifikacje zawodowe; 3) uczestniczyć w pracach organizacyjnych uczelni.

28 ocena jednostek ocena czasopism naukowych ocena pracownika jednostki naukowej ocena kandydata do stopnia/tytułu naukowego

29 Narzędzia krajowe: POL-on lokalne: ENDO, PUB wydziałowe:?

30 Dyskusja nad oceną nauki

31 Ilościowa vs. jakościowa Zarzuty wobec jakościowej oceny: jak będą gromadzone dane kto będzie oceniał strefy wpływu trudność wynikająca z liczby jednostek naukowych! Zarzuty wobec ilościowej oceny: parametry faworyzujące subdyscypliny parametry dobrane do STM zmienność zasad podczas gry

32 Porównywanie nieporównywalnego jednostki małe porównywane z dużymi porównywane jednostki prowadzące badania w obszarze innych dyscyplin

33 Brak transparentności oceny jednostek nie ma opublikowanych ankiet jednostek wraz z przyznanymi punktami (w szczególności dot. kryterium IV) brak społecznej kontroli nad poprawnością dostarczonych danych część danych pojawia się sukcesywnie w systemie POL-on

34 Problemy z oceną czasopism częsta zmienność zasad przekazywanie przez niektóre redakcje nieprawdziwych danych brak weryfikacji dostarczonych danych niejasność względem niektórych kryteriów zmiany modeli wydawniczych i procedur w redakcjach

35 Wykorzystane ilustracje Spring by Yannick Bammert (CC BY)!

36 Dziękuję za uwagę