Ewaluacja w polityce społecznej

Transkrypt

1 Ewaluacja w polityce społecznej Wprowadzenie Dr hab. Ryszard Szarfenberg Instytut Polityki Społecznej UW rszarf.ips.uw.edu.pl/ewalps/dzienne/ Rok akademicki 2018/2019

2 Wprowadzenie organizacyjne

3 Aktualna strona przedmiotu rszarf.ips.uw.edu.pl/ewalps/dzienne Aktualności Zasady zaliczenia Efekty kształcenia Tematy zajęć i prezentacje wykładowe Wskazówki i wymogi dotyczące pracy i prezentacji Podręcznik podstawowy

4 Struktura strony przedmiotu cd. Literatura o ewaluacji w kontekście polityki społecznej Standardy ewaluacji polskie i zagraniczne Przykłady raportów ewaluacyjnych Literatura o ewaluacji ogólniej Zalecane strony

5 Zaliczenie przedmiotu Przygotowanie raportu z analizy ewaluacji jednoosobowo lub w zespole (2 osoby), wskazówki na stronie przedmiotu, wybraną ewaluację należy zgłosić do 16 października mailem na adres r.szarfenberg@uw.edu.pl Egzamin pisemny na podstawie treści wykładowych i podręcznika Obecność na zajęciach, nieobecności od 3 do 6 wymagają zaliczenia na dyżurach prowadzącego, powyżej 6 nieobecności powtarzanie przedmiotu

6 Wskazówki do wykonania zadania metaewaluacyjnego? 1. Wpisujemy w wyszukiwarkę Google trzy słowa: raport, ewaluacja, projekt 2. Z wyników wyszukiwania wybieramy jeden z raportów z ewaluacji projektu społecznego, zgłaszamy raport prowadzącemu mailem (do 16 października z informacją o składzie zespołu) 3. Na podstawie raportu i ewentualnie innych źródeł opisujemy ewaluację według wskazówek na stronie przedmiotu 4. Na kolejnych zajęciach prezentujemy wyniki naszych prac 5. Piszemy raport zawierający analizę wybranej ewaluacji według wskazówek na stronie przedmiotu: rszarf.ips.uw.edu.pl/ewalps/dzienne

7 Wprowadzenie merytoryczne

8 Podstawowy model projektu społecznego Zasoby przekształcane są poprzez działania w produkt, który użytkują odbiorcy projektu Zasoby (finansowe, ludzkie, fizyczne) Planowanie i realizowanie planów przez projektodawców i personel projektu Działania Logika każdego projektu społecznego: zasoby przekształcane są poprzez działania w produkt, który ma wywołać pożądane efekty społeczne, czyli odpowiednio wpłynąć na sytuację, zachowania jednostki i/lub zbiorowości Produkt (pieniądze, rzeczy, usługi) E F E K T Y Wyniki w krótkim okresie Wyniki w średnim okresie Wyniki w długim okresie Obywatele, klienci, użytkownicy oraz ich zasoby, potrzeby, problemy Produkt wpływa na sytuacje i zachowania tych, którzy go otrzymali

9 Od pojedynczych projektów do wieloprojektowych programów społecznych Program społeczny 1 Program społeczny 2

10 Od pojedynczych wieloprojektowych programów społecznych do wieloprogramowych polityk społecznych Polityka społeczna 1 Polityka społeczna 2

11 Ocenianie potoczne Ewaluacja profesjonalna Czym się różni ewaluacja od zwykłego oceniania? Nieustalone, niezdefiniowane, przypadkowe, niejasne, zmienne Jakie są kryteria oceny? Zdefiniowane, określone przed przystąpieniem do procesu zbierania informacji i oceniania Wyrywkowe, zasłyszane, subiektywne Jakie są Informacje o przedmiocie oceny? Rzetelne, obiektywne, zebrane metodami naukowymi według kryteriów oceny Intuicyjny, momentalny, przypadkowy W jaki sposób dokonuje się oceny? Metodyczny, przemyślany, czasochłonny, według ustalonych metod i procedur Każdy Kto dokonuje oceny? Profesjonalista, ewaluator

12 Analiza ewaluowania jako czynności Kategorie analizy czynności ewaluowania Podstawowe pytanie Nazwa kategorii ewaluacyjnej Podmiot Kto ewaluuje? Ewaluator Przedmiot Co jest ewaluowane? Ewaluandum, przedmiot ewaluacji Kryteria Pod jakim względem ewaluowane jest ewaluandum? Kryteria ewaluacyjne Cel Po co ewaluować, po co Cele ewaluacji ewaluowano? Sposób Jak ewaluowano? Podejście, metoda ewaluacyjna Narzędzia Za pomocą czego ewaluowano? Narzędzia ewaluacyjne Wytwór, produkt Wpływ Co jest wytworem, produktem ewaluowania? Na co i jaki wpływ miał produkt ewaluacji? Ewaluacja (w sensie wystawionej oceny, oszacowanej jakości i wartości) zawarta w raporcie Efekty ewaluacyjne, wpływ ewaluacji

13 Uproszczony schemat ewaluowania Przedmiot X wpływ oceny X na X Dane o X Ewaluator Y Kryteria oceny X wpływ oceny X na X Pozytywna Jaka ocena X? Negatywna

14 Ogólny opis każdej ewaluacji z przykładem Podmiot X ewaluuje przedmiot Y według kryteriów K1 Kn, stosując metodę M i narzędzia N1 Nn, według planu Pl, w wyniku czego powstaje produkt Pr, który powinien mieć wpływ W na przedmiot ewaluacji Y Przykład: Firma ewaluacyjna IBS (podmiot) dokonała ewaluacji projektu Pierwsza Praca dla absolwentów w powiecie Podlaskim (przedmiot) według kryteriów trafności, skuteczności, efektywności, trwałości i użyteczności (kryteria), w wyniku czego powstał raport ewaluacyjny z oceną ewaluacyjną (produkt), po którego przeczytaniu dyrektor Powiatowego Urzędu Pracy postanowił nie kontynuować tego programu (wpływ)

15 Od ewaluacji projektu do ewaluacji polityki społecznej, czyli różne przedmioty ewaluacji społecznej 1. Ewaluacja pojedynczego projektu dla grupy osób 2. Ewaluacja wielu projektów należących do jednego programu społecznego 3. Ewaluacja całościowa jednego programu społecznego 4. Ewaluacja wielu programów społecznych należących do jednej polityki społecznej 5. Ewaluacja całościowa jednej polityki społecznej