Czy EWD jest dobrą miarą efektywności nauczania?

Transkrypt

1 Czy EWD jest dobrą miarą efektywności nauczania? Najciekawsze wyniki badań trafności metody EWD w gimnazjach EDUKACYJNA WARTOŚĆ DODANA

2 Opracowanie: Roman Dolata Anna Hawrot Grzegorz Humenny Aleksandra Jasińska Konsultacje: Pracownia Edukacyjnej Wartości Dodanej Wydawca: Instytut Badań Edukacyjnych ul. Górczewska Warszawa Broszura współfinansowana przez Unię Europejską ze środków Europejskiego Funduszu Społecznego w ramach projektu Badania dotyczące rozwoju metodologii szacowania wskaźnika edukacyjnej wartości dodanej (EWD) Skład, druk: Drukarnia TINTA, Z. Szymański ul. Żwirki i Wigury 22, Działdowo Egzemplarz bezpłatny Publikacja wydrukowana na papierze ekologicznym. 2

3 Po czym poznamy, że wskaźniki EWD są dobrą miarą efektywności nauczania? Po czym poznamy, że wskaźniki EWD są dobrą miarą efektywności nauczania? Przeprowadzone w latach na ogólnopolskiej próbie 150 gimnazjów badanie uwarunkowań wyników nauczania jest jednym z głównych elementów realizowanego w latach projektu Badania dotyczące rozwoju metodologii szacowania wskaźnika edukacyjnej wartości dodanej (EWD). Głównym celem projektu jest rozwój metody edukacyjnej wartości dodanej i propagowanie narzędzi analitycznych pozwalających wykorzystywać tę metodę w analizie wyników egzaminacyjnych. Analiza wyników testów egzaminacyjnych z użyciem metody EWD dostarcza ważnych przesłanek do formułowania planów rozwoju szkoły, pozwala ocenić skuteczność już podjętych działań. Ewaluacja prowadzona przez samą szkołę w celu poprawy swojego funkcjonowania to najważniejszy obszar wykorzystania wyników egzaminacyjnych, a tym samym i metody EWD. Beneficjentami skutecznej autoewaluacji staną się uczniowie, którzy będą mieli szansę uczyć się w skuteczniej nauczających szkołach. Jednak by metodę EWD można było w pełni odpowiedzialnie polecać szkołom, musimy mieć pewność, że jest ona dobrą miarą. Wyniki wcześniej prowadzonych badań (lata ) dawały powody do optymizmu, były jednak zbyt skromne pod względem wielkości próby i zakresu zgromadzonych danych, by wyciągać ostateczne wnioski. Próba badawcza, na której przeprowadzone zostało aktualne badanie, jest nie tylko znacznie większa, ale jest wysokiej jakości i bardzo dobrze reprezentuje populację polskich gimnazjów. W badaniu tym uczestniczyli uczniowie, rodzice, nauczyciele i dyrektorzy 150 szkół. Jak zbadać, czy wskaźniki EWD dobrze obrazują efektywność nauczania? Jest wiele sposobów weryfikacji ich poprawności, a efekty trzech z nich są tematem niniejszej broszurki. Po pierwsze przeanalizowaliśmy, czy dane, które wykorzystujemy do wyliczenia wskaźników (czyli wyniki testów egzaminacyjnych), są odpowiedniej jakości. Po drugie zbadaliśmy, czy w modelach EWD skutecznie kontrolujemy czynniki niezależne od szkoły rzutujące na postępy uczniów. Tylko wtedy bowiem będziemy mogli zasadnie przypisać wartość wskaźnika EWD działaniom szkoły. W broszurce tej rozpatrujemy takie czynniki jak: status społeczno-ekonomiczny i inteligencja uczniów, dodatkowa pomoc w nauce w postaci korepetycji oraz społeczno-gospodarcze charakterystyki gmin. Po trzecie zbadaliśmy, czy szkoły o wysokim EWD, to szkoły, w których zgodnie z naszą normatywną wiedzą o funkcjonowaniu szkoły dobrze się dzieje. Sprawdziliśmy zatem m.in. to, czy w szkołach o wysokim EWD szybciej rozwija się inteligencja uczniów. Pełne omówienie wyników badań znajdą Państwo w książce pt. Trafność wskaźników edukacyjnej wartości dodanej dla gimnazjów. Bardziej szczegółowe opracowania dotyczące samej metody EWD i sposobów jej wykorzystania znajdą Państwo na stronie internetowej projektu Trafność testów egzaminacyjnych w kontekście metody EWD Wyniki egzaminów zewnętrznych są podstawą liczenia wskaźników EWD. Jeśli pomiar osiągnięć szkolnych nie będzie wystarczająco dobry, nawet najbardziej wyrafinowane metody statystyczne nie dostarczą wartościowych miar. W badaniu przeanalizowaliśmy więc cztery najważniejsze cechy dobrych testów osiągnięć. 1. Egzaminy powinny być wystarczająco rzetelne, czyli muszą precyzyjnie mierzyć poziom osiągnięć szkolnych. niska rzetelność 0,5 wysoka rzetelność 0 1 Przeprowadzone analizy pokazały, że rzetelność testów egzaminacyjnych jest wystarczająca dla tworzenia miar charakteryzujących szkoły. Rzetelność wykorzystanego w badaniu sprawdzianu przeprowadzonego w 2009 roku wyniosła 0,83, natomiast rzetelność egzaminu gimnazjalnego z 2012 roku wyniosła od 0,78 do 0,91 w zależności od części egzaminu. 3

4 Trafność testów egzaminacyjnych w kontekście metody EWD 2. Egzaminy muszą być dobrą miarą tego, w jakim stopniu szkoła zrealizowała najważniejsze cele kształcenia. Możemy zapytać, czy testy egzaminacyjne pozwalają mierzyć coś więcej niż tylko skuteczność rozwiązania danego zestawu zadań. Na ile wyniki egzaminów są powiązane z szerzej rozumianymi efektami kształcenia i czy dzięki temu mogą stanowić podstawę bardziej kompleksowej oceny pracy szkoły? Tabela 1. Związki między wynikami egzaminów a zewnętrznymi kryteriami oceny szkolne motywacja niska motywacja wysoka Przeprowadzone analizy pokazały, że uczniowie, którzy dobrze wypadają na egzaminie gimnazjalnym, mają także inne pożądane cechy, świadczące o tym, że opanowali oni szerzej rozumiane cele kształcenia. Są to uczniowie o lepszych ocenach szkolnych, charakteryzujący się korzystnym wzorcem motywacji (wysoka, wewnętrzna), mający pozytywne nastawienie do nauki i szkoły oraz wierzący we własne możliwości uczenia się. Zaobserwowano również negatywny związek wyników egzaminów z bezradnością intelektualną, czyli stanem, który powstaje w sytuacji, w której uczeń mimo długotrwałego wysiłku umysłowego nie jest w stanie zrozumieć danego materiału. Zaobserwowano motywacja zewnętrzna motywacja wewnętrzna pozytywne nastawienie do nauki i szkoły wiara we własne możliwości uczenia się bezradność intelektualna inteligencja związek pozytywny związek negatywny brak związku także pozytywny związek wyników egzaminacyjnych z inteligencją uczniów, co również potwierdza, że egzaminy dobrze mierzą osiągnięcia w szkole, bo te, zgodnie z teorią, powinny być powiązane z ogólnym poziomem zdolności poznawczych. 3. Testy wykorzystane do szacowania danego wskaźnika EWD powinny mierzyć te same lub podobne umiejętności. Im bardziej podobne umiejętności będą mierzyć testy wykorzystane do wyliczenia danego wskaźnika, tym lepiej miara EWD będzie odzwierciedlała rzeczywisty wkład szkoły w wyniki uczniów. Wyliczając wskaźniki dla gimnazjów wykorzystujemy wyniki sprawdzianu i egzaminu gimnazjalnego. Mimo iż sprawdzian jest testem wiedzy ogólnej, korelacje między nim a poszczególnymi częściami egzaminu gimnazjalnego są dość wysokie i wynoszą od ok. 0,71 do 0,78. Oznacza to, że wyniki na sprawdzianie w wystarczającym stopniu pozwalają przewidzieć wyniki na egzaminie gimnazjalnym, a to znaczy, że mogą być wartościową podstawą wyliczania wskaźników EWD. 4. Skala, na której prezentowane są wyniki, musi mieć dobrze zdefiniowaną jednostkę pomiaru. Wzrost o jedną jednostkę na skali (np. o jeden punkt) powinien oznaczać równoważny przyrost wiadomości i umiejętności w każdym zakresie skali. W wypadku skal zdefiniowanych na podstawie odchylenia standardowego a takie stosujmy w metodzie EWD oznacza to, że rozkłady wyników powinny mieć kształt rozkładu normalnego. Dlatego do wyliczania wskaźników EWD nie wykorzystuje się wyników surowych. Wyniki egzaminów najpierw się skaluje i przekształca na skalę o średniej 100 i odchyleniu standardowym 15. Na poniższym obrazku pokazano rozkłady wyników wyskalowanych. Widzimy, że ich kształty są bliskie rozkładom normalnym (dla czterech testów z egzaminu gimnazjalnego mamy podobny obraz). Oznacza to, że możemy przyjąć, że wyniki testów wykorzystywane do wyliczania wskaźników EWD są przedstawione na skali o dobrze zdefiniowanej jednostce pomiaru. 4

5 Czy nieuwzględnienie w obliczaniu wskaźników EWD informacji o pochodzeniu społecznym i poziomie inteligencji uczniów zmniejsza ich trafność? Rysunek 1. Rozkłady wyskalowanych wyników testów egzaminacyjnych: sprawdzian 2009, egzamin gimnazjalny 2012 Egzaminy zewnętrzne wykorzystane do konstrukcji gimnazjalnych wskaźników EWD mają wystarczająco dobre właściwości, by mogły stanowić podstawę wyliczania trafnej miary EWD. Czy nieuwzględnienie w obliczaniu wskaźników EWD informacji o pochodzeniu społecznym i poziomie inteligencji uczniów zmniejsza ich trafność? Brak uwzględnienia przy wyliczaniu wskaźników EWD informacji o statusie społecznym rodziny i inteligencji ucznia jest często podnoszonym argumentem krytycznym. Czy status rodziny i inteligencja faktycznie znacząco determinują postęp edukacyjny w trakcie nauki w gimnazjum i wyznaczają zatem szansę szkoły na wysokie EWD? Czy szkoły różnią się ze względu na status społeczny rodziny i inteligencję uczniów? Gimnazja znacząco różnią się statusem społecznym rodziców uczniów. Największe różnice między gimnazjami stwierdzono dla poziomu wykształcenia rodziców i indeksu statusu społeczno-ekonomicznego (ISEI). Około 20% zmienności tych wskaźników to zróżnicowanie międzyszkolne. Również w zakresie poziomu inteligencji uczniów zanotowano znaczne, choć mniejsze niż w wypadku wskaźników statusowych, różnice między gimnazjami. Około 10% zmienności wyników testu inteligencji to zróżnicowanie międzyszkolne. Jak silnie status społeczny i inteligencja ucznia determinują wyniki egzaminu gimnazjalnego? Czy czynniki te determinują też postępy w gimnazjum? Spośród zbadanych aspektów statusu społecznego ucznia wyniki egzaminu gimnazjalnego najsilniej determinuje wykształcenie rodziców. W wypadku części humanistycznej przeciętny dystans między uczniami rodziców o wykształceniu zasadniczym zawodowym i wyższym wynosi prawie 15 punktów, czyli jedno odchylenie standardowe. Dla części matematyczno-przyrodniczej znaczenie wykształcenia rodziców jest troszkę mniejsze. Natomiast siła zależności między wynikami egzaminu gimnazjalnego a inteligencją jest prawie dwukrotnie większa niż obserwowana dla wykształcenia rodziców. Przyrost inteligencji o jedno odchylenie standardowe oznacza wzrost wyników o ok. 8 9 pkt. (w zależności od egzaminu). 5

6 Czy nieuwzględnienie w obliczaniu wskaźników EWD informacji o pochodzeniu społecznym i poziomie inteligencji uczniów zmniejsza ich trafność? Czy uwzględnienie w analizie uprzednich osiągnięć, czyli wykorzystanie modelu EWD, zmienia siłę związku między czynnikami statusowymi, inteligencją a wynikami egzaminu gimnazjalnego? Zdecydowanie tak. Siła związku wykształcenia rodziców z przyrostem umiejętności jest ponad dwukrotnie niższa dla obszaru humanistycznego i ponad czterokrotnie niższa dla obszaru matematyczno-przyrodniczego (w porównaniu z siłą związku z wynikami egzaminu). Natomiast siła związku inteligencji z przyrostem umiejętności jest dla obszaru humanistycznego czterokrotnie słabsza, a dla części matematyczno-przyrodniczej dwukrotnie niższa, choć efekt ten pozostaje znaczący: 4 punkty na jedno odchylenie standardowe IQ. Na ile zmieniłyby się wartości EWD dla gimnazjów, gdyby uwzględniono w ich obliczaniu informację o statusie społecznym i inteligencji uczniów? Dla badania trafności metody EWD ważniejsze jednak od wyników analiz na poziomie ucznia jest zróżnicowanie międzyszkolne. Okazuje się, że w modelach EWD zmienne statusowe i inteligencja wyjaśniają głównie różnice między uczniami wewnątrz szkół, w znacznie mniejszym zaś stopniu międzyszkolną zmienność wyników egzaminacyjnych. Oszacowane z wykorzystaniem informacji o wykształceniu rodziców uczniów wskaźniki EWD dla szkół są niemal identyczne, jak te wyliczane na podstawie stosowanych obecnie modeli (korelacja na poziomie 0,98 0,99). Oznacza to, że brak zmiennych statusowych w modelu EWD w bardzo niewielkim stopniu zniekształca oszacowania wskaźników, a tym samym nie zagraża trafności metody. Podobny rezultat uzyskano dla inteligencji w obszarze humanistycznym. Trochę niższą korelację uzyskano dla obszaru matematyczno-przyrodniczego: 0,96. Oznacza to, że w skrajnych sytuacjach notujemy w tym wypadku pewne rozbieżności. Skalę problemu ilustruje poniższy wykres. Rysunek 2. Zależność między wskaźnikami EWD dla szkół wyliczonymi bez uwzględnienia informacji o inteligencji uczniów oraz z uwzględnieniem tej informacji 10 EWD GMP z uwzględnieniem inteligencji EWD GMP bez uwzględnienia inteligencji Brak uwzględnienia w obliczaniu wskaźników EWD dla szkół informacji o statusie społecznym rodziny i inteligencji ucznia nie zagraża znacząco trafności metody EWD. Jedynie w wypadku egzaminu w części matematyczno-przyrodniczej brak w modelu EWD informacji o inteligencji ucznia może nieznacznie obciążać szacunki. Jednak skala tego zagrożenia w żadnym stopniu nie usprawiedliwia postulowania powszechnych pomiarów IQ na progu gimnazjum! 6

7 Czy szkoły, w których uczniowie korzystają z korepetycji, mają wyższe EWD? Czy szkoły, w których uczniowie korzystają z korepetycji, mają wyższe EWD? Gdy myślimy o EWD jako mierze efektywności nauczania w szkole, w sposób naturalny pojawia się pytanie, czy jej wartość zależy od tego, czy uczniowie korzystają z korepetycji. Czy korepetycje podwyższają EWD szkoły? Jaka jest powszechność korepetycji wśród uczniów gimnazjów? W przeprowadzonych badaniach dwadzieścia osiem procent gimnazjalistów zadeklarowało skorzystanie z korepetycji z przynajmniej jednego przedmiotu choć raz w ciągu trzech lat nauki w gimnazjum, 22% z nich wskazało korepetycje z przedmiotów matematyczno-przyrodniczych, a niespełna 5% korepetycje z przedmiotów humanistycznych. Widoczne jest więc, że korepetycji nie można nazwać powszechnymi, jednak z przedmiotów matematyczno-przyrodniczych pobiera je znaczna część uczniów. Dla przedmiotów humanistycznych skala zjawiska jest tak mała, że nieistotna z punktu widzenia EWD. Czy gimnazja różnią się odsetkiem uczniów korzystających z korepetycji? Z analiz wynika, iż odsetek uczniów korzystających z korepetycji z przedmiotów matematyczno-przyrodnicznych różni się znacząco między szkołami. Istnieją placówki, w których uczniowie nie korzystają z korepetycji w ogóle, jak również takie, gdzie deklaruje to ponad 50% młodzieży. Czy korepetycje pozytywnie wpływają na wyniki egzaminacyjne? Wbrew potocznej opinii uczniowie korzystający z korepetycji nie osiągają wyższych wyników na egzaminie gimnazjalnym. Z analiz wynika, że uczniowie, którzy skorzystali z korepetycji w gimnazjum, otrzymywali w części matematyczno-przyrodniczej egzaminu gimnazjalnego prawie 5 punktów mniej (na skali o odchyleniu standardowym 15) niż uczniowie, którzy z nich nie korzystali. Zobaczyć to możemy na rysunku 3. (słupek A). Nie oznacza to jednak, że korepetycje negatywnie wpływają na wyniki egzaminów. Być może na korepetycje trafili uczniowie z kłopotami w nauce, czy o niskiej motywacji. Dlatego w analizach należy uwzględniać informacje o cechach uczniów i ich rodzin. Gdy to zrobimy, siła zależności słabnie, jednak nie zanika. Różnica w wynikach między uczniami, którzy korzystali z korepetycji i tymi, którzy z nich nie korzystali, wynosi 1,5 punktu na niekorzyść tych pierwszych (słupek B). Nadal nie możemy jednak powiedzieć, że korepetycje negatywnie wpływają na osiągnięcia. Nie wiemy bowiem, jakie byłyby wyniki uczniów, gdyby z korepetycji nie skorzystali być może jeszcze niższe. Na pewno jednak nie prześcignęli oni uczniów z korepetycji niekorzystających. Rysunek 3. Korzystanie z korepetycji z przedmiotów matematyczno-przyrodniczych a wyniki na egzaminie gimnazjalnym w części matematyczno-przyrodniczej -4,73 A -1,53 B + cechy ucznia i jego rodziny -1,9 C punkty na EG, część mat.-przyr. (śr = 100, sd = 15) 7

8 Czy otoczenie społeczno-gospodarcze szkoły wpływa na osiągnięcia uczniów? Czy szkoły, w których uczniowie korzystają z korepetycji, mają wyższe EWD? Na wykresie widzimy, że siła zależności w modelu EWD spada (słupek C) w porównaniu z sytuacją, w której uwzględniamy tylko informację o korzystaniu z korepetycji (słupek A), lecz wciąż jest ujemna. Pamiętajmy jednak, że EWD jest cechą szkoły. Konieczna jest zatem weryfikacja zależności między odsetkiem uczniów korzystających z korepetycji z przedmiotów matematyczno-przyrodniczych a matematyczno-przyrodniczym EWD szkoły. Korelacja ta jest słaba, dodatnia i wynosi 0,19. Wiadomo jednak, że z korepetycji częściej korzystają uczniowie z rodzin o wyższym statusie społecznym. W związku z tym odsetek korzystających z korepetycji może nieść informację o statusie społecznym uczniów szkoły. Gdy uwzględnimy to w analizie, korelacja między odsetkiem uczniów pobierających korepetycje z przedmiotów matematyczno-przyrodniczych a EWD szkoły spada do zera. Szkoły, w których uczniowie uczęszczają na korepetycje, nie mają wyższego EWD. Korepetycje nie mają znaczenia dla EWD jako miary na poziomie szkoły. Czy otoczenie społeczno-gospodarcze szkoły wpływa na osiągnięcia uczniów? W wielu badaniach podejmowane są próby ustalenia tego, jakie czynniki lokalne wpływają na poziom umiejętności uczniów. W projekcie EWD zbadaliśmy, czy i jak poszczególne cechy otoczenia szkoły oddziałują na wyniki egzaminacyjne i wskaźniki EWD. Jakie cechy społeczno-gospodarczego otoczenia szkoły mogą mieć znaczenie? Analizowane przez nas czynniki to: poziom bezrobocia, wielkość gminy, gospodarka nowoczesnych technologii czyli to jak dużo firm high-tech ma siedzibę w danej gminie w stosunku do liczby mieszkańców, powszechność opieki przedszkolnej jaka część dzieci w wieku 3 5 lat z terenu gminy uczęszczała do przedszkola, wydatki na oświatę, zasoby kulturowe zwłaszcza to, ile bibliotek publicznych przypada na tysiąc mieszkańców gminy oraz zamożność dochody mieszkańców gminy oraz zakres i skala pomocy społecznej udzielanej mieszkańcom. Informacje te uzyskaliśmy z baz Głównego Urzędu Statystycznego. Charakteryzują one gminy, w których zlokalizowane są szkoły. Które czynniki powiązane są z osiągnięciami gimnazjalistów? Spośród analizowanych charakterystyk gmin znaczenie dla poziomu osiągnięć ma jedynie pięć. Są to: poziom bezrobocia, wielkość gminy, gospodarka nowoczesnych technologii, powszechność opieki przedszkolnej oraz wydatki na oświatę. Cztery pierwsze powiązane są zarówno z umiejętnościami humanistycznymi, jak i matematyczno-przyrodniczymi. Wydatki na oświatę korelują jedynie z poziomem umiejętności humanistycznych. Im bardziej nowoczesna jest lokalna gospodarka oraz im więcej dzieci objętych jest opieką przedszkolną tym wyższe są osiągnięcia uczniów. Wyższy poziom bezrobocia obniża natomiast te osiągnięcia. Wpływ dwóch pozostałych czynników jest statystycznie istotny, ale w praktyce nieznaczący (minimalna siła efektu). Które czynniki powiązane są z efektywnością pracy szkoły? Na wartość wskaźników EWD, zarówno w zakresie przedmiotów humanistycznych jak i matematyczno-przyrodniczych, wpływa jedynie lokalny poziom bezrobocia. Im większe bezrobocie w gminie, tym trudniej szkole uzyskać wysoką efektywność nauczania. Czynnik ten ma jednak zdecydowanie mniejsze znaczenie dla efektywności pracy szkoły (mierzonej wskaźnikami EWD) niż dla wyników egzaminów zewnętrznych. Dodatkowo na efektywność pracy szkoły w zakresie umiejętności 8

9 Czy w szkołach o wysokiej edukacyjnej wartości dodanej szybciej rozwija się inteligencja uczniów? matematyczno-przyrodniczych wpływ ma także wielkość gminy oraz gospodarka nowoczesnych technologii. Oba te czynniki również znacznie słabiej oddziałują na efektywność pracy szkoły niż na same osiągnięcia uczniów. Tabela 2. Powiązanie czynników społeczno-gospodarczych z osiągnięciami uczniów i efektywnością nauczania (EWD) w zakresie przedmiotów humanistycznych oraz matematyczno-przyrodniczych czynnik humanistyczne osiągnięcia matematyczno-przyrodnicze EWD osiągnięcia EWD poziom bezrobocia wielkość gminy gospodarka nowoczesnych technologii powszechność opieki przedszkolnej wydatki na oświatę zasoby kulturowe zamożność gminy związek pozytywny związek negatywny brak związku Choć wiele cech społeczno-gospodarczego otoczenia gimnazjum ma znaczenie dla wyników uzyskiwanych przez uczniów na egzaminach, to zdecydowanie mniej czynników tego typu związanych jest z efektywnością pracy szkoły mierzoną wskaźnikami EWD. Czy w szkołach o wysokiej edukacyjnej wartości dodanej szybciej rozwija się inteligencja uczniów? Niektórzy twierdzą, że szkoły o wysokim EWD powinny się wstydzić, gdyż jest to dowód na to, że kładą one duży nacisk na przygotowanie uczniów do egzaminów, zaniedbując ich rozwój poznawczy. Gdyby tak było, to w szkołach o wysokim EWD musielibyśmy obserwować wolniejszy rozwój ogólnych zdolności poznawczych uczniów. Postanowiliśmy zatem to sprawdzić. Czy w szkołach o wysokiej wartości EWD uczniowie robią nie tylko większy niż przeciętnie postęp w zakresie przyswajania wiadomości i umiejętności szkolnych, ale także szybciej przyrasta im inteligencja? Zaobserwowanie tego związku przemawiałoby za trafnością wskaźników EWD. W badaniu zmierzyliśmy inteligencję uczniów dwukrotnie: w pierwszej i trzeciej klasie. Dlatego mogliśmy policzyć, jakie są średnie przyrosty inteligencji uczniów w każdej zbadanej szkole. Przeprowadzone analizy pokazały po pierwsze, że szkoły różnią się między sobą średnią wielkością przyrostów inteligencji swoich uczniów (podział na szkoły wyjaśnia ok. 15% tego zróżnicowania). Po drugie, co jest kluczowe dla analizowanego problemu, stwierdzono istotną statystycznie i pozytywną zależność między EWD szkoły a wielkością średnich przyrostów inteligencji uczniów. Im wyższa wartość EWD szkoły, tym większe przyrosty inteligencji uczniów. Zależność tę pokazano na poniższym rysunku. Każda kropka reprezentuje jedną zbadaną szkołę. Niebieską linią pokazano najlepsze przybliżenie dla zaobserwowanego związku. Jest on silniejszy w przypadku EWD w obszarze matematyczno-przyrodniczym (korelacja wynosi 0,32) niż humanistycznym (korelacja równa 0,24). 9

10 Czy w szkołach o wysokiej edukacyjnej wartości dodanej szybciej rozwija się inteligencja uczniów? Rysunek 4. Związek EWD z przyrostami inteligencji w szkołach Przyrost inteligencji uczniów wysoki przyrost inteligencji średni przyrost inteligencji niski przyrost inteligencji Przyrost inteligencji uczniów wysoki przyrost inteligencji średni przyrost inteligencji niski przyrost inteligencji niskie EWD średnie EWD wysokie EWD niskie EWD średnie EWD wysokie EWD EWD z przedmiotów matematyczno-przyrodniczych EWD z przedmiotów humanistycznych Obserwowanego związku nie daje się wytłumaczyć wpływem średniego poziomu inteligencji uczniów. Nawet jeśli wytrącimy znaczenie średniego poziomu inteligencji uczniów, związek pozostaje pozytywny i istotny statystycznie. Powiązanie wskaźników EWD z przyrostami inteligencji dowodzi, że miara EWD nie wskazuje jedynie na to, na ile dobrze szkoła radzi sobie z przygotowaniem uczniów do egzaminów zewnętrznych. W szkołach o wysokim EWD szybciej przebiega ogólny rozwój poznawczy uczniów. 10

11 Tytuł projektu: Badania dotyczące rozwoju metodologii szacowania wskaźnika edukacyjnej wartości dodanej (EWD) Czas trwania projektu: Strona projektu: Do końca sierpnia 2012 roku projekt Badania dotyczące rozwoju metodologii szacowania wskaźnika edukacyjnej wartości dodanej (EWD) był realizowany w Centralnej Komisji Egzaminacyjnej w Warszawie. Od , decyzją ministra edukacji narodowej, projekt został przeniesiony do Instytutu Badań Edukacyjnych w Warszawie. Opiekun naukowy projektu EWD: dr hab. Roman Dolata, r.dolata@ibe.edu.pl Lider Pracowni EWD: dr Ewa Stożek, e.stozek@ibe.edu.pl Koordynator projektu: Danuta Ostrochulska, d.ostrochulska@ibe.edu.pl Pytania merytoryczne: ewd@ewd.edu.pl Projekt realizowany jest w ramach działania 3.2. Rozwój systemu egzaminów zewnętrznych priorytetu III Wysoka jakość systemu oświaty programu operacyjnego Kapitał Ludzki. Celem projektu jest rozwijanie metod wykorzystywania wyników egzaminów zewnętrznych do oceny efektywności nauczania. Anna Hawrot psycholog dr Artur Pokropek socjolog i pedagog Grzegorz Humenny socjolog Opiekun naukowy dr hab. Roman Dolata pedagog Lider pracowni dr Ewa Stożek matematyk Anna Rappe informatyk Aleksandra Jasińska pedagog dr Krystyna Szmigel geograf Maciej Koniewski socjolog i filozof Mateusz Żółtak informatyk Przemysław Majkut socjolog i psycholog Tomasz Żółtak socjolog Koordynator projektu Danuta Ostrochulska Asystent zespołu Klara Sołtan-Kościelecka

12 Instytut Badań Edukacyjnych (IBE) jest placówką badawczą prowadzącą interdyscyplinarne badania naukowe nad funkcjonowaniem i efektywnością systemu edukacji w Polsce. Instytut uczestniczy w krajowych i międzynarodowych projektach badawczych, przygotowuje raporty i ekspertyzy oraz pełni funkcje doradcze. IBE zatrudnia badaczy zajmujących się edukacją socjologów, psychologów, pedagogów, ekonomistów, politologów i przedstawicieli innych dyscyplin naukowych wybitnych specjalistów w swoich dziedzinach, o różnorakich doświadczeniach zawodowych, które obejmują oprócz badań naukowych, także pracę dydaktyczną, doświadczenie w administracji publicznej czy działalność w organizacjach pozarządowych. IBE realizuje projekty systemowe Badania dotyczące rozwoju metodologii szacowania wskaźnika edukacyjnej wartości dodanej (EWD), Badanie jakości i efektywności edukacji oraz instytucjonalizacja zaplecza badawczego, Opracowanie założeń merytorycznych i instytucjonalnych wdrażania Krajowych Ram Kwalifikacji oraz Krajowego Rejestru Kwalifikacji dla uczenia się przez całe życie, Ogólnopolskie badanie umiejętności trzecioklasistów (OBUT). Instytut Badań Edukacyjnych ul. Górczewska 8, Warszawa tel ewd@ewd.edu.pl Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego Funduszu Społecznego.