Ocena publikacji jako narzędzie polityki naukowej

Wielkość: px

Rozpocząć pokaz od strony:

Download "Ocena publikacji jako narzędzie polityki naukowej"

Oskar Smoliński
5 lat temu
Przeglądów:

1 Scholarly Communication Research Group Scholarly Communication Research Group Ocena publikacji jako narzędzie polityki naukowej Emanuel Kulczycki Poznań, 7 maja 2018 r. 1

2 Różnorodność ewaluacji 2

3 Ewaluacja w nauce Ewaluacja ex-post Ewaluacja ex-ante Ocena artykułu zgłoszonego do czasopisma. Ocena w awansach naukowych (doktorat, habilitacja) Ocena dorobku naukowego instytucji, naukowca, kraju itd Ocena projektu dopiero co planowanych badań (granty) 3

4 Ocena dorobku różne poziomy 4

5 Jak ocenić jakość jednej publikacji? Przeczytać ją. Po prostu ocena koleżeńska (peer review) 5

6 Jak ocenić dorobek jednego naukowca? Przeczytać jego najlepsze prace oraz spojrzeć na kilka wskaźników bibliometrycznych, aby ocenić aktywność i rozpoznawalność w kontekście jego własnej dziedziny. 6

7 Jak ocenić dorobek jednej uczelni? Przede wszystkim bierzemy najlepsze publikacje i je oceniamy i tutaj pojawia się całe wyzwanie: jak wybieramy publikacje, i jak je oceniamy. 7

8 Po co w Polsce ocenia się jednostki naukowe i w ramach tej oceny publikacje? 8

9 System finansowania oparty o produktywność Performance-based research funding system (PRFS) 9

10 Dwa modele krajowych systemów oceny nauki Ocena ekspercka Wielka Brytania Ocena parametryczna Polska, Norwegia, Czechy, Włochy (łącznie kilkanaście krajów, w których często system oceny nauki jest zespolony z systemem jej finansowania) 10

11 Zasada dziedziczenia prestiżu: Ocena artykułów Krajowa lista czasopism (Polska, Czechy, Litwa, Norwegia, Dania, Finlandia). Wskazanie istniejących baz (Web of Science lub Scopus). Zasada dziedziczenia prestiżu: Ocena książek Lista wydawców (Dania, Belgia, Norwegia, Finlandia, Hiszpania). Zasada byle co, byle formalnie się zgadzało Formalna oceny spełniania kryteriów (Polska, Czechy, Litwa, Słowacja) 11

12 Jak zmieniać system oceny publikacji w Polsce? 12

13 Zmiana rozwiązań systemu ewaluacji powinna być oparta na badaniach i analizie: stanu polskiej nauki, aby określić stan obecny i stan pożądany z perspektywy polskiej polityki naukowej, obecnych rozwiązań ewaluacyjnych, aby określić ich użyteczność, konsekwencji stosowania ewaluacji na praktykę naukową polskich naukowców i zarządzanie nauką. 13

14 Pamiętajmy o skali: W 2017 r. zgłoszono do kategoryzacji 560,000 publikacji (zgłoszeń ewaluacyjnych) Większość naszych publikacji jest napisana po polsku, zatem w potencjalnej ocenie eksperckiej konieczna jest znajomość polskiego. 14

Odsetek publikacji naukowych po angielsku z całości publikacji w naukach humanistycznych i społecznych w 2014 roku Norwegia 61.8% Finlandia 68.3% Dania 63.

15 Odsetek publikacji naukowych po angielsku z całości publikacji w naukach humanistycznych i społecznych w 2014 roku Norwegia 61.8% Finlandia 68.3% Dania 63.4% % publikacji po angielsku Angielski Język lokalny Inne języki Flandria (Belgia) 78.7% Słowenia 45.9% Czechy 26.4% Polska 17.2% Słowacja 25.8% DOI : /s

16 Odsetek publikacji po angielsku w latach Ekonomia Prawo Filozofia & Teologia 100% 80% 60% 40% 20% 0% % 80% 60% 40% 20% 0% % 80% 60% 40% 20% 0% Czechy Finlandia Flandria Norwegia Polska Słowenia Kulczycki E., Engels T.C.E, Pölönen J., Bruun K., Dušková M., Guns R., Nowotniak R., Petr M., Sivertsen G.,Istenič Starčič A., Zuccalla A.A., (2018). Publication patterns in the social sciences and humanities: Evidence from eight European countries, Scientometric /s

17 Perspektywa instytucjonalna czy indywidualna? Co wpływa na zmianę praktyk publikacyjnych: zmiany parametryzacji czy (również) zmiany zasad awansów naukowych 17

18 50000 System parametryczny w Polsce Powołanie KEJN-u Liczba publikacji w Scopusie Białoruś Czechy Węgry Polska Słowacja Ukraina Źródło danych: Scopus (SciVal) 27 kwietnia 2017 r.

19 Odsetek monografii polskich naukowców w zależności od liczby autorów Humanistyka Nauki społeczne Nauki twarde 100% 100% 100% 90% 90% 90% 80% 80% 80% 70% 70% 70% 60% 60% 60% 50% 50% 50% 40% 40% 40% 30% 30% 30% 20% 20% 20% 10% 10% 10% 0% % % Monografia jednoautorska Monografia (4 10 autorów) Monografia (2 3 autorów) Monografia (11 i więcej autorów) Kulczycki E., (2018). The diversity of monographs: Changing landscape of book evaluation i Poland, Aslib Journal of Information Management information (in review) 19

20 Odsetek monografii polskich naukowców w zależności od liczby autorów Humanistyka Nauki społeczne Nauki twarde 100% 100% 100% 90% 90% 90% 80% 80% 80% 70% 70% 70% 60% 60% 60% 50% 50% 50% 40% 40% 40% 30% 30% 30% 20% 20% 20% 10% 10% 10% 0% % % Monografia jednoautorska Monografia (4 10 autorów) Monografia (2 3 autorów) Monografia (11 i więcej autorów) Kulczycki E., (2018). The diversity of monographs: Changing landscape of book evaluation i Poland, Aslib Journal of Information Management information (in review) 20

21 Efekt 2013 roku Liczba wszczętych postępowań i przewodów habilitacyjnych Liczba monografii jednoautorskich we wszystkich dyscyplinach Kulczycki E. (2018). The diversity of monographs: Changing landscape of book evaluation in Poland, Aslib Journal of Information Management information (in review) 21

22 Łatwiej założyć czasopismo niż opublikować artykuł W ciągu 3 lat przybyło nam blisko 600 punktowanych polskich (!) czasopism. Kulczycki, E., Rozkosz, E. A., & Drabek, A. (2016). Ocena ekspercka jako trzeci wymiar ewaluacji krajowych czasopism naukowych. Nauka, 1,

23 1356 polskich czasopism, które były indeksowane na listach B w 2012, 2013 i 2015 r. 50% 45% 40% 35% 30% 25% 20% 15% 10% 5% 0% Nauki społeczne Humanistyka Nauki twarde Umiędzynarodowienie autorów Umiędzynarodowienie recenzentów Międzynarodowe języki publikacji Umiędzynarodowienie rady naukowej

24 Główne wyzwania ewaluacji publikacji naukowych Wyznaczenie celu ewaluacji nauki w Polsce. Polityka naukowa czy polscy humaniści powinni publikować (również) po angielsku? Dziedziczenie prestiżu czy jest alternatywa? Bibliometryczna ocena humanistyki i nauk społecznych. Jak w jednym systemie pogodzić ocenę prawa i fizykę kilo-autorską? Jak dzielić punkty za publikacje? 24

25 Dziękuję ekulczycki.pl 25

Podobne dokumenty

Zasady oceny parametrycznej jednostek naukowych, a lista czasopism punktowanych

Zasady oceny parametrycznej jednostek naukowych, a lista czasopism punktowanych Leszek Stypułkowski leszek.stypulkowski@indexcopernicus.com Konferencja Sukces Czasopisma Naukowego, Warszawa 27-28 październik