Wykorzystanie metody edukacyjnej wartości dodanej do oceny efektywności pracy szkół Ewa Stożek Okręgowa Komisja Egzaminacyjna w Łodzi, Instytut Badań Edukacyjnych - Pracownia EWD e.stozek@ewd.edu.pl
Informacja z systemu egzaminów zewnętrznych o pracy szkoły Jedną z informacji o pracy szkoły są wyniki egzaminów zewnętrznych. W ocenie pracy szkoły warto uwzględniać: średnie wyniki egzaminów (szkoły podstawowe) średnie wyniki egzaminów i EWD (gimnazja, LO i T) w przypadku szkół kończących się maturą również wybieralność przedmiotów maturalnych oraz zdawalność egzaminu maturalnego w przypadku szkół zawodowych: zdawalność EPKZ
Koncepcja edukacyjnej wartości dodanej Wyniki egzaminacyjne Wyniki końcowe wpływ edukacyjny szkoły na końcowe wyniki egzaminacyjne Zasoby na wejściu Nauka w szkole Efekty pracy
Edukacyjna Wartość Dodana Względna miara wysiłku edukacyjnego szkoły, pozwala ocenić jak szkoła wykorzystała potencjał uczniów, z którymi pracowała. Uwzględnia wyniki uczniów na egzaminie kończącym naukę w szkole w odniesieniu do ich wyników na egzaminie wcześniejszego etapu kształcenia.
Edukacyjna Wartość Dodana Łączna informacja o wyniku egzaminu oraz EWD jest publicznie dostępna dla gimnazjów od 2006 roku, gimnazjum.ewd.edu.pl - 6 tysięcy gimnazjów dla LO i techników od 2010 roku, matura.ewd.edu.pl - 4 tysiące LO i T Informacja ma postać graficzną
http://ewd.edu.pl
LO A Przykładowa prezentacja wskaźników
Przykładowa prezentacja wskaźników LO A Oś EWD Pozycja szkoły Oś wyniku końcowego
Przykładowa prezentacja wskaźników LO A Dodatkowy układ odniesienia
Przykładowa prezentacja wskaźników LO A 90% szkół w kraju 50% szkół w kraju
LO A Przykładowa prezentacja wskaźników
LO B
Szkoły o wysokiej efektywności
Szkoły o wysokich wynikach
Szkoły o niskiej efektywności
Szkoły o niskich wynikach
Gimnazja Wyniki egzaminów, które mogą być sygnałem występujących w szkole problemów: duża różnica między wynikami części humanistycznej i matematyczno-przyrodniczej, duże spadki wyników i/lub EWD w kolejnych latach, mała stabilność wyników i/lub EWD w czasie.
Przykład Niepokojący spadek wyników i EWD w części matematyczno-przyrodniczej egzaminu gimnazjalnego
duża różnica między wynikami części humanistycznej i matematyczno-przyrodniczej
Zmieniająca się liczba uczniów a efekty kształcenia
Grupy szkół Informacje z systemu egzaminacyjnego, które mogą pokazywać niepokojące zjawiska w grupie szkół, działających na jednym terenie: polaryzacja wyników szkół jako efekt konkurencji między szkołami, zmiany w liczebności zdających jako efekt migracji uczniów między szkołami.
Sieć szkół
Miasto X, graficzna prezentacja trzyletnich wskaźników egzaminacyjnych GH dla okresu 2006-2008 W mieście znajduje się 6 gimnazjów publicznych (bez szkoły sportowej). Widzimy, że już w pierwszym analizowanym okresie są dość zróżnicowane. Różnica w średnim wyniku egzaminacyjnym między szkołą filetową a czerwoną wynosi około 10 punktów. Na wymiarze efektywności różnica wynosi ok. 3 punktów.
Miasto X, graficzna prezentacja trzyletnich wskaźników egzaminacyjnych GH dla okresu 2006-2008 Ze względu na EWD mamy 2 grupy gimnazjów: o EWD około -3 i o EWD około -1
Miasto X, graficzna prezentacja trzyletnich wskaźników egzaminacyjnych GH dla okresu 2007-2009 Rok później w czerwonej i pomarańczowej szkole lekki wzrost wyników i efektywności.
Miasto X, graficzna prezentacja trzyletnich wskaźników egzaminacyjnych GH dla okresu 2008-2010 W następnym roku w pomarańczowym gimnazjum obserwujemy kolejny, niewielki wzrost wyników bez poprawy EWD.
Miasto X, graficzna prezentacja trzyletnich wskaźników egzaminacyjnych GH dla okresu 2009-2011 W kolejnym okresie kolejny mały wzrost wyników końcowych w pomarańczowej placówce.
Miasto X, graficzna prezentacja trzyletnich wskaźników egzaminacyjnych GH dla okresu 2010-2012 W ostatnim analizowanym okresie widzimy dalsze, tym razem znaczące rozciągnięcie się peletonu. Różnica między przeciętym wynikiem końcowym w gimnazjum fioletowym a pomarańczowych wzrosła do 20 pkt! Różnice w EWD wzrosły minimalnie, do ok. 4 pkt.
Animacja: start
Animacja: koniec
Wrocław
LO i technikum Informacje o wynikach egzaminów, które mogą być sygnałem występujących w szkole problemów: wybieralność przedmiotów na egzaminie maturalnym niezgodna z ofertą edukacyjną szkoły, nieadekwatność wyników egzaminacyjnych do koncepcji pracy szkoły, niska zdawalność.
Cztery ewaluacyjne wskaźniki maturalne: polonistyczny, humanistyczny, matematyczno-przyrodniczy i matematyczny Egzamin gimnazjalny 3 lata LO 4 lata technikum Egzamin maturalny 2010-2012 Część humanistyczna Część humanistyczna Część matematycznoprzyrodnicza Część matematycznoprzyrodnicza język polski, p+r język polski, p+r historia, p+r WOS, p+r matematyka, p+r matematyka, p+r fizyka, p+r geografia, p+r biologia, p+r chemia, p+r informatyka, p+r Matura j.polski EWD.polski Matura hum EWD hum Matura mat. Matura mat-przyr EWD mat. EWD mat-przyr
Efekty kształcenia LO C
Efekty kształcenia technikum łączności
Wybieralność. Koncepcja pracy szkoły. LO D Czy wyniki z języka polskiego są powodem do niepokoju?
Wybieralność. Koncepcja pracy szkoły. LO E Czy wyniki z języka polskiego są powodem do niepokoju?
Profil chemiczny. Koncepcja pracy szkoły.
Grupy szkół Informacje z systemu egzaminacyjnego, które mogą pokazywać niepokojące zjawiska w grupie szkół, działających na jednym terenie: polaryzacja wyników szkół jako efekt konkurencji między szkołami, zmiany w liczebności zdających jako efekt migracji uczniów między szkołami.
Porównanie z inną szkołą w mieście
Porównanie z inną szkołą w mieście
Porównanie z inną szkołą w mieście
Jak ocenić pracę tych szkół? Jakie realistyczne cele do osiągnięcia postawić przed tymi szkołami?
Technikum Ekonomiczne A przedmiot łącznie poziom rozszerzony Technikum Ekonomiczne B łącznie poziom rozszerzony Technikum Ekonomiczne C łącznie poziom rozszerzony Technikum Ekonomiczne D łącznie poziom rozszerzony matematyka 504 45 369 18 154 5 135 4
Rekomendacje Zachowanie ostrożności przy diagnozowaniu problemów szkół na podstawie średnich wyników egzaminów oraz EWD śledzenie zmian w czasie porównywanie z innymi szkołami dbałość o poprawność interpretacji uzupełnienie informacji o wewnątrzszkolne analizy wyników egzaminacyjnych
Rekomendacje Łączne wykorzystanie wszystkich źródeł informacji o szkole uzupełnianie informacji z systemu egzaminów zewnętrznych informacjami kontekstowymi weryfikowanie hipotez
Rekomendacje Wspieranie autonomii szkoły w jej wysiłku podniesienia jakości nauczania czynniki efektywności nauczania są cechą szkoły i powinny być rozpoznane wewnątrz szkoły monitorowanie efektów podejmowanych przez szkołę działań
e.stozek@ewd.edu.pl DZIĘKUJĘ ZA UWAGĘ