Wytyczne w zakresie systemu ewaluacji polityki spójności oraz realizacji ewaluacji programów operacyjnych perspektywy

Transkrypt

1 Wytyczne w zakresie systemu ewaluacji polityki spójności oraz realizacji ewaluacji programów operacyjnych perspektywy

2 Proces zatwierdzania wytycznych w MIR Wytyczne KJE Proces zatwierdzania w MIR Pierwsza wersja wytycznych Konsultacje wewnętrzne w MIR (14 dni) Akceptacja Departamentu Prawnego Konsultacje zewnętrzne z MF, RPO, NGO, KWIRST (14 dni) Akceptacja Departamentu Prawnego Zatwierdzenie przez Sekretarza Stanu Zatwierdzenie przez Ministra II kw Obecne prace nad projektem wytycznych nie wchodzą w skład tej ścieżki.

3 Cel stworzenia wytycznych ds. ewaluacji Główny cel wytycznych Zapewnienie zgodności sposobu wdrażania programów operacyjnych z prawem Unii Europejskiej oraz spełnienie wymagań określanych przez Komisję Europejską, a także zapewnienie jednolitości zasad wdrażania programów operacyjnych w zakresie ewaluacji

4 Cel stworzenia wytycznych ds. ewaluacji Doprecyzowanie i lokalizacja przepisów unijnych w zakresie ewaluacji Uszczegółowienie i operacjonalizacja zapisów zawartych w Umowie Partnerstwa Wskazanie zasad realizacji procesu ewaluacji w okresie oraz szczegółowych rozstrzygnięć w zakresie zadań i kompetencji poszczególnych podmiotów zaangażowanych w działania ewaluacyjne Wzmocnienie pozycji jednostek ewaluacyjnych funkcjonujących w systemie

5 Struktura wytycznych Część I Wprowadzenie Część II Organizacja instytucjonalna systemu ewaluacji Część III Realizacja procesu ewaluacji

6 Wprowadzenie Rozporządzenie 1303/2013 z dnia 17 grudnia 2013 r. Guidance Document on Monitoring and Evaluation. European Regional Development Fund and Cohesion Fund Podstawy prawne ewaluacji polityki spójności Monitoring and Evaluation of European Cohesion Policy. European Social Fund Umowa Partnerstwa

7 Wprowadzenie Główne Wyzwania: Zwiększenia poziomu integracji procesu ewaluacji z procesem programowania i wdrażania programów operacyjnych; Podniesienia poziomu jakości procesu ewaluacji, a w szczególności wiarygodności i użyteczności badań ewaluacyjnych.

8 Organizacja instytucjonalna procesu ewaluacji polityki spójności Zasady ogólne dotyczące konieczności zapewnienia odpowiedniego potencjału instytucjonalnego zapewnienie odpowiednich dla realizacji procesu ewaluacji zasobów kadrowych; zapewnienie odpowiednich dla realizacji procesu ewaluacji zasobów finansowych, umożliwiających zarówno przeprowadzanie niezbędnych ewaluacji, jak i prowadzenie działań ukierunkowanych na rozwój potencjału jednostki; stworzenie odpowiednich procedur umożliwiających prawidłowy przebieg procesu ewaluacji w ramach obszaru kompetencji danej instytucji. zapewnienie funkcjonalnej niezależności procesu ewaluacji; Integracja jednostek (o ile jest to wskazane)

9 Organizacja instytucjonalna procesu ewaluacji polityki spójności Ewaluator zewnętrzny względem instytucji odpowiedzialnych za programowanie i wdrażanie interwencji Ewaluator funkcjonuje w danej instytucji, ale w odrębnej jednostce niż podmioty odpowiedzialne za wdrażanie Funkcjonalna niezależność procesu ewaluacji Ewaluator funkcjonuje w ramach jednostki odpowiedzialnej za wdrażanie danego programu operacyjnego przy wydzieleniu i opisaniu obowiązków pracowników realizujących ewaluację

10 Organizacja instytucjonalna procesu ewaluacji polityki spójności Podmioty zaangażowane w proces ewaluacji polityki spójności Krajowa Jednostka Ewaluacji Instytucje Zarządzające PO JE na poziomie IP I i II stopnia w programach operacyjnych JE w IK zagadnienia horyzontalne w ramach realizacji polityki spójności Komitety Monitorujące (PO i UP) Partnerzy społeczni Grupy sterujące ds. ewaluacji programów operacyjnych Grupy sterujące ds. ewaluacji wybranych obszarów i zagadnień tematycznych oraz badań horyzontalnych na poziomie UP Zespół sterujący ewaluacją polityki spójności

11 Przebieg procesu ewaluacji Rozpowszechnianie wyników Wykorzystanie wyników Realizacja badania Planowanie

12 Planowanie

13 Wytyczne do planów ewaluacji Po co planować ewaluację w tak zaawansowany sposób? Podniesienie jakości badań, w tym umożliwienie zwiększenia liczby badań kontrfaktycznych (odpowiedni czas, metody, dane) Użyteczność dla zarządzania programem i programowania Dzielenie się informacją w innych obszarach programowania Dla potrzeb raportowania: Państwa Członkowskie: AIR; raporty postępu (2017, 2019); podsumowanie wyników ewaluacji(2022) Komisja: Coroczne raporty podsumowujące i Syntezy wyników dostępnych ewaluacji (2016); raporty strategiczne (2017, 2019)

14 Przebieg procesu ewaluacji planowanie Zasady Ogólne: Jednostki ewaluacyjne w ramach realizacji swoich zadań zobligowane są do przygotowywania planów ewaluacyjnych. Plany ewaluacyjne sporządzane są na cały okres programowania. Plany ewaluacyjne podlegają corocznym aktualizacjom i modyfikacjom. Jednostki ewaluacyjne powinny dążyć do zawarcia w planach wszystkich ewaluacje planowanych do realizacji, minimalizując tym samym konieczność realizacji badań nieprzewidzianych. Obowiązek ujęcia wszystkich ewaluacji w planie nie oznacza braku możliwości realizacji badań w nim nie ujętych. Ewaluacja takie mogą być realizowane w sytuacji nagłej, uprzednio nieprzewidzianej potrzeby informacyjnej. Powyższa zasada dotyczy również działań realizowanych w celu budowy potencjału ewaluacyjnego.

15 Przebieg procesu ewaluacji planowanie Schemat przygotowania planu ewaluacji dla programu operacyjnego Przygotowanie planu przez IZ Opinia KJE Akceptacja KM Przesłanie planu do KE

16 Przebieg procesu ewaluacji planowanie Struktura Planu ramowy zakres tematyczny planu zasady ogólne przyjęte na potrzeby realizacji planu spis i opis planowanych do realizacji ewaluacji oraz działań mających na celu budowę potencjału ewaluacyjnego sprawozdanie z dotychczas zrealizowanych zadań (część wypełniania od pierwszej aktualizacji planu)

17 Przebieg procesu ewaluacji planowanie Ramowy zakres tematyczny opis głównych celów i zakresu procesu ewaluacji opisanego planem uzasadnienie zawartości planu (jakie informacje będą potrzebne a jakie już są dostępne na temat różnych elementów interwencji, której dotyczy plan) Zasady ogólne przyjęte na potrzeby realizacji planu opis procesu ewaluacji z uwzględnieniem podmiotów zaangażowanych w jego realizację opis sposobu w jaki będą angażowani partnerzy społeczni sposób realizacji badań ogólny opis działań, które zostaną podjęte w celu budowy potencjału pracowników jednostek ewaluacyjnych ogólny opis strategii rozpowszechniania i wykorzystania wyników procesu ewaluacji ramowy harmonogram ramowy opis zasobów niezbędnych do realizacji planu opis standardów

18 Przebieg procesu ewaluacji planowanie Opis planowanych do realizacji ewaluacji: temat i opis planowanego do realizacji badania; podmiot odpowiedzialny za realizację ewaluacji; opis metodologii, która zostanie zastosowana do poszczególnych ewaluacji wraz z zakresem danych które zostaną zapewnione do realizacji badania; opis sposobu w jaki niezbędne dane zostaną pozyskane lub gromadzone; harmonogram realizacji ewaluacji; opis sposobu wykorzystania ewaluacji; oszacowanie i opis zasobów kadrowych niezbędnych do realizacji poszczególnych ewaluacji; orientacyjny budżet ewaluacji.

19 Część sprawozdawcza Przebieg procesu ewaluacji planowanie Część ogólna zawierająca informacje na temat: Liczby i tematyki zrealizowanych badań; Działań ukierunkowanych na budowę potencjału ewaluacyjnego; Wykorzystania wyników ewaluacji, Istotnych zmian w wymiarze instytucjonalnym systemu ewaluacji. Tabela z informacjami o zrealizowanych badaniach zawierająca następujące pola: Temat i opis zrealizowanego badania; Podmiot zlecający badanie; Opis metodologii zrealizowanego badania; Opis wykorzystania wyników zrealizowanego badania; Koszt realizacji; Termin realizacji.

20 Przebieg procesu ewaluacji planowanie Zakres tematyczny planów (minimum na poziomie PO): Ewaluacja ex ante PO; Ewaluacja ex ante systemu realizacji PO (przeprowadzona jest nie później niż osiemnaście miesięcy od przyjęcia finalnej wersji danego PO); Ewaluacja mid-term systemu realizacji danego PO (przeprowadzona nie wcześniej niż trzydzieści miesięcy i nie później niż czterdzieści dwa miesiące od przyjęcia finalnej wersji danego PO); Ewaluacja ex-post systemu realizacji danego PO ( Realizowana do końca kwietnia 2020 r.); Ewaluacja mid-term dot. postępu rzeczowego danego PO dla potrzeb przeglądu śródokresowego, w tym realizacji zapisów ram i rezerwy wykonania (realizowana do końca kwietnia 2019 r.); Ewaluacja podsumowująca postęp rzeczowy danego PO (realizowana do końca kwietnia 2021r.); Ewaluacja efektów realizacji poszczególnych priorytetów PO. Ewaluacja on-going dot. wdrażania zasady równości szans płci. Meta-ewaluacja lub synteza badań ewaluacyjnych przeprowadzanych w kontekście danego PO przeprowadzana rokrocznie od 2016r..

21 Przebieg procesu ewaluacji planowanie Uzasadnienie zakresu proponowanych badań: Dotychczasowa praktyka realizacji badań wynikająca z cyklu wdrażania interwencji Wymogi KE, przykładowo: Who? What? When? Reference Member State In the AIR: Synthesis of the By 31 May each year from 2016 findings of all evaluations of the until 2023, by 30 June in 2017 programme (including YEI where and 2019 appropriate) CPR Art. 50 Summary report based on the annual implementation reports of Commission the Member States; as well as a synthesis of the findings of the available evaluations of Each year from 2016 CPR Art. 53 Member State Commission Member State programmes In the progress reports: Progress made towards achievement of the Union strategy for smart, sustainable and inclusive growth, as well as of the Fund-specific missions (including YEI where appropriate) Strategic report summarising the progress reports of the Member States Report summarising the findings of evaluations carried out during the programming period By 31 August 2017 and by 31 August 2019 By 31 December 2017 and 31 December 2019 CPR Art. 52 CPR Art. 53 By 31 December 2022 CPR Art. 114 Źródło: Guidance Document on Evaluation Plans, KE, projekt dokumentu z marca 2014

22 Monitoring Realizacji Planów Przebieg procesu ewaluacji planowanie Komisja Europejska Komitet Monitorujący KJE IZ Opinia publiczna Analiza zawartości planów po ich przyjęciu Analiza realizacji na podstawie wkładów w raportach z postępów wdrażania Zatwierdza, recenzuje i proponuje zmiany Stanowi forum prezentacji i dyskusji nad postępami w zakresie realizacji planów ewaluacyjnych oraz wynikami badań Udział partnerów społecznych Monitoring strategiczny realizacji procesu ewaluacji całej polityki spójności Bieżący monitoring na poziomie UP oraz PO Bieżący monitoring na poziomie PO (w tym na poziomie IP i IP II) Rekomendowane przez KE upublicznienie planów na stronach www

23 Realizacja badań

24 Realizacja badań Kontynuowanie dotychczasowej, wysoko ocenianej praktyki realizacji badań ewaluacyjnych Formalne wprowadzenie karty oceny jakości procesu i wyników badania ewaluacyjnego

25 Realizacja badań Pola w ramach karty oceny jakości procesu i wyników ewaluacji: 1. Uwzględnienie stanu wiedzy naukowej, 2. Zastosowana metodologia, 3. Wiarygodność danych, 4. Jakość analizy i wniosków, 5. Przejrzystość raportu końcowego oraz innych produktów opracowanych w ramach procesu, 6. Ocena użyteczności produktów ze szczególnym uwzględnieniem rekomendacji, 7. Ocena współpracy z wykonawcą badania, 8. Ocena współpracy z innymi podmiotami w trakcie realizacji badania. Skala oceny 1 5 Uzasadnienie konieczne w przypadku ocen skrajnych

26 Rozpowszechnianie wyników

27 Rozpowszechnianie wyników Komisja Europejska Obowiązek upubliczniania badań Komitet Monitorujący KJE

28 Rozpowszechnianie wyników Kategorie 1. Tytuł badania; 2. Instytucja zlecająca; 3. Koszt badania; 4. Termin realizacji; 5. Wykonawca/y; 6. Typ badania ze względu na moment realizacji ( ex ante, on-going, ex post); 7. Typ badania ze względu na podmiot realizujący (wewnętrzna, zewnętrzna lub mieszana); 8. Typ badania ze względu na zakres przedmiotowy (horyzontalna lub programowa); 9. Typ badania ze względu na cel (ewaluacja procesowa lub wpływu); 10. Typ badania ze względu na perspektywę finansową której dotyczy ( , , lub ewaluacja polityki spójności). Baza Badań Ewaluacyjnych Kategoria - Obszar tematyczny 1. Metodologia badań ewaluacyjnych; 2. Zasady horyzontalne; 3. System realizacji polityki spójności; 4. Informacja i promocja; 5. Rozwój regionalny i lokalny 6. Innowacyjność oraz badania i rozwój; 7. Społeczeństwo informacyjne; 8. Przedsiębiorczość; 9. Energetyka; 10. Środowisko; 11. Transport; 12. Edukacja; 13. Kultura; 14. Turystyka i rekreacja; 15. Zdrowie; 16. Rynek pracy; 17. Sprawność administracji.

29 Wykorzystanie wyników Nowy System Wdrażania Rekomendacji

30 Nowości w systemie wdrażania rekomendacji System Wdrażania Rekomendacji (SWR), nie łamaniec językowy ;) System został włączony w skład nowych Wytycznych ds. ewaluacji Wprowadzona zostanie nowa baza danych, zasilana i obsługiwana przez przeglądarkę Utrzymano elastyczne zapisy dotyczące zatwierdzania rekomendacji (ale zgodnie z rozporządzeniem KE) Zmieniono klasy rekomendacji (co Państwo sądzą na ten temat?) Planujemy szkolenie z nowego systemu w II kwartale br.

31

32

33 Ścieżka rekomendacji PROJEKT TABELI REKOMENDACJI (dostarcza wykonawca) SPOTKANIE KONSULTACYJNE Z ADRESATAMI REKOMENDACJI PRZEKAZANIE RAPORTU WRAZ Z TABELĄ DO KE I KJE PRZEKAZANIE REKOMENDACJI HORYZONTALNYCH I POZASYSTEMOWYCH DO KJE PRZYGOTOWANIE OSTATECZNEJ WERSJI TABELI REKOMENDACJI PRZEKAZANIE TABELI DO INSTYTUCJI ZATWIERDZAJĄCEJ INSTYTUCJA ZARZĄDZAJĄCA NADZORUJE ADRESATÓW I MONITORUJE PROCES WYKONANIA PRZEKAZANIE DO ROZPATRZENIA KOMITETU MONITORUJĄCEGO (WEDŁUG ZASAD IZ) PRZEKAZANIE AKTUALNYCH DANYCH DO BAZY KJE

34 Zmieniona klasyfikacja rekomendacji Rekomendacja Programowa Horyzontalna Pozasystemowa Operacyjna Strategiczna Operacyjna Strategiczna

35 Dziękujemy za uwagę Ministerstwo Infrastruktury i Rozwoju Ul. Wspólna 2/