Metody i narzędzia ewaluacji

Transkrypt

1 Metody i narzędzia ewaluacji wyników zdalnego testowania wiedzy (platforma informatyczna e-matura)

2

3 Książka przygotowana w ramach projektu E-matura, współfinansowanego przez Unię Europejską w ramach Europejskiego Funduszu Społecznego, Programu Operacyjnego Kapitał Ludzki, Priorytet III Wysoka jakość systemu oświaty, Działanie 3.3 Poprawa jakości kształcenia, Poddziałanie Modernizacja treści i metod kształcenia projekty konkursowe.

4 Książka jest dystrybuowana bezpłatnie Redakcja: prof. dr hab. inz. Sławomir Wiak Opracowanie graficzne: Niceday Książka przygotowana w ramach projektu E-matura, współfinansowanego przez Unię Europejską w ramach Europejskiego Funduszu Społecznego, Programu Operacyjnego Kapitał Ludzki, Priorytet III Wysoka jakość systemu oświaty, Działanie 3.3 Poprawa jakości kształcenia, Poddziałanie Modernizacja treści i metod kształcenia projekty konkursowe. copyright by Politechnika Łódzka, Łódź 2013 Książka współfinansowana przez Unię Europejską w ramach Europejskiego Funduszu Społecznego ISBN:

5 Spis treści Spis treści WSTĘP... 7 Sławomir Wiak STAN ZAAWANSOWANIA REALIZACJI PROJEKTU Sławomir Wiak, Konrad Szumigaj, Agnieszka Stefańska 1.1. Dane wyjściowe Testowanie pilotażowe i wnioski z analizy wyników badań Grupa docelowa Opis testowań Podsumowanie BŁĄD POMIARU DYDAKTYCZNEGO METODA KLASYCZNA I PROBABILISTYCZNA Sławomir Sapanowski 2.1. Wstęp Klasyczna teoria pomiaru dydaktycznego Teoria informacji Probabilistyczna teoria testu (IRT), a ilość informacji i błąd pomiaru Przykład zastosowania IRT do oszacowania SEM dla sprawdzianu Podsumowanie WYBÓR PROBLEMÓW BADAWCZYCH W FAZIE PLANOWANIA EWALUACJI MATEMATYKI W SZKOLE. KONCEPTUALIZACJA I METODOLOGIA PROJEKTU EWALUACJI Halina Cyrulska 3.1. Wprowadzenie Przepisy prawa oświatowego Nauczyciel Liderem Zmian systemu uczenia się ucznia Ewaluacja wewnętrzna na przykładzie szkoły zawodowej pracującej w województwie łódzkim Raport wyników egzaminu maturalnego z matematyki na poziomie podstawowym w szkole w roku szkolnym 2011/2012 (wyniki przekazane do szkoły w czerwcu 2012 r.) Badanie Zakończenie Plan działań poewaluacyjnych INTELIGENTNE ALGORYTMY ZAPOBIEGANIA I WCZESNEGO WYKRYWANIA OSZUSTW PODCZAS EGZAMINÓW PROWADZONYCH DROGĄ ELEKTRONICZNĄ Sławomir Wiak, Dominik Jeske 4.1. Opis rozwiązania Przygotowanie pytań Analiza odpowiedzi oraz zachowania uczniów podczas egzaminu Analiza fizycznego zachowania Analiza statyczna obrazu Analiza wysyłanych odpowiedzi

6 Spis treści 4.5. Prewencja komputerowa Dostęp do zasobów Internetu Bezpieczeństwo danych i komunikacji Reakcja na zdarzenia podczas egzaminu Analiza egzaminu po zakończeniu testu Podsumowanie WYKORZYSTANIE PAMIĘCI FLASH PCI-E W CELU ZWIĘKSZENIA WYDAJNOŚCI BAZY DANYCH W SYSTEMIE INFORMATYCZNYM E-MATURA Sławomir Wiak, Maciej Krasuski 5.1. Dyski Flash PCI-E zalety oraz wady Karty PCI-E jako macierz współdzielona Multi Site Failover Clustering Podsumowanie MECHANIZMY BAZODANOWE WSPOMAGAJĄCE WNIOSKOWANIE I RAPORTOWANIE W SYSTEMACH ZDALNEGO EGZAMINOWANIA NA PRZYKŁADZIE SYSTEMU INFORMATYCZNEGO E-MATURA Sławomir Wiak, Rafał Stryjek 6.1. Analiza danych zgromadzonych w bazach Zakres danych zbieranych podczas zdalnego egzaminowania w e-maturze Sposób zbierania danych w systemie informatycznym e-matura a możliwości ich analizy Elementy języka SQL służące analizie danych, które mogą być wykorzystane w systemach zdalnego egzaminowania w tym bezpośrednio z baz danych OLTP Funkcje agregujące Grupowanie Grupowanie generowanie dodatkowych podsumowań Funkcje analityczne Piwotowanie tabel Tworzenie własnych funkcji w celu użycia w języku SQL Analizy danych w e-maturze przy użyciu języka zapytań SQL Algorytmy służące wnioskowaniu Analiza, wnioskowanie i raportowanie w module e-korepetycji BUDOWANIE SYSTEMU EGZAMINACYJNEGO DLA OSÓB NIEPEŁNOSPRAWNYCH Sławomir Wiak, Maciej Krasuski, Dominik Jeske, Rafał Stryjek Wstęp Standard WCAG Widoczność interfejs użytkownika oraz informacje muszą być widoczne dla wszystkich użytkowników Wytyczna 1.1 [1] standardu WCAG 2.0 wymaga, aby były zapewnione teksty alternatywne dla wszelkich nietekstowych elementów znajdujących się na stronie Zapewnienie zawartości alternatywnej dla elementów multimedialnych według wytycznej numer 1.2 specyfikacji WCAG 2.0: Stworzona zawartość może być prezentowana na różne sposoby bez utraty informacji jaką niesie (np. z uproszczonym interfejsem użytkownika) zgodnie z wytyczną numer 1.3 specyfikacji WCAG 2.0:

7 Spis treści Informacje znajdujące się na pierwszym planie powinny być wyraźnie odseparowane od tła zgodnie z wytyczną numer 1.4 specyfikacji WCAG 2.0: Dostępność z klawiatury wszystkie funkcjonalności powinny być dostępne z klawiatury Wszystkie funkcjonalności zgodnie z wytyczną numer 2.1 specyfikacji WCAG 2.0 powinny być dostępne z klawiatury bez wprowadzania ograniczeń czasowych na wciśnięcie klawiszy. Wyjątkiem są funkcjonalności uzależnione od ruchu wykonanego przez użytkownika a nie jedynie punktu końcowego tego ruchu: Zgodnie z wytyczną numer 2.2 specyfikacji WCAG 2.0 użytkownik powinien mieć wystarczającą ilość czasu na przeczytanie i użycie treści: Zgodnie z wytyczną numer 2.3 specyfikacji WCAG 2.0 należy unikać treści, które mogą spowodować problemy związane ze światłoczułością: Mechanizmy pomocne w znalezieniu informacji, orientacji i nawigacji zgodnie z wytyczną numer 2.4 specyfikacji WCAG 2.0: Pomaganie w unikaniu błędów oraz ułatwianie poprawiania błędów, które się pojawiły zgodnie z wytyczną numer 2.5 specyfikacji WCAG 2.0: Informacje prezentowane w interfejsie użytkownika oraz sterowanie nim musi być zrozumiałe Tekst powinien być czytelny i zrozumiały (wytyczna numer 3.1 ze specyfikacji WCAG 2.0): Przewidywalność treść powinna pojawiać się w przewidywalnych miejscach (wytyczna numer 3.2 w specyfikacji WCAG 2.0): Zawartość stron musi zapewniać pracę z szeroką gamą oprogramowania użytkownika, włączając technologie wspomagające Kompatybilność maksymalizacja zgodności z obecnym i przyszłym oprogramowaniem użytkownika wraz z technologiami pomocniczymi (wytyczna numer 4.1 ze specyfikacji WCAG 2.0): Podsumowanie IMPLEMENTACJA WZORCÓW ARCHITEKTONICZNYCH MICROSOFT PRISM I MVVM W SYSTEMIE E-MATURA Sławomir Wiak, Maciej Król, Piotr Ilski 8.1. Architektura systemu e-matura Architektura trójwarstwowa Modularność Modularność w e-maturze Ponowne wykorzystanie kodu Dynamiczne ładowanie modułów Testowanie jednostkowe Opis głównych modułów systemu e-matura Moduł logowania Moduł domowy Moduł egzaminu Moduł menu Moduł aktualności Moduł administratora Moduł zarządzający (nauczyciela) Moduł ankiety Implementacja wzorca MVVM w systemie e-matura

8 Spis treści Opis wzorca MVVM Struktura wzorca MVVM Wybrane elementy wzorca MVVM Implementacja MVVM w projekcie e-matura. Struktura przykładowego modułu POMIAR OSIĄGNIĘĆ STUDENTÓW W KONTEKŚCIE MATURY Z MATEMATYKI Adam Depta, Gertruda Gwóźdź-Łukawska, Krzysztof Kisiel NOWE FUNKCJONALNOŚCI PLATFORMY STOSOWANEJ W PROJEKCIE E-POGOTOWIE MATEMATYCZNE W KONTEKŚCIE E-MATURY Dorota Krawczyk-Stańdo, Grzegorz Kusztelak, Jacek Stańdo Wprowadzenie Proponowane nowe funkcjonalności Nowe funkcjonalności w akcji PRZEGLĄD WYNIKÓW MATUR Z MATEMATYKI W KONTEKŚCIE E-MATURY NA PRZYKŁADZIE WYNIKÓW Z II LO IM JANA PAWŁA II ZE ZDUŃSKIEJ WOLI Adam Depta, Renata Długosz, Konrad Szumigaj Wprowadzenie Dlaczego szkoła bierze udział w projekcie Jak odbierany jest projekt e-matura w środowisku szkolnym? Opis i opracowanie wyników WYKORZYSTANIE WYNIKÓW SPRAWDZIANÓW I EGZAMINÓW ZEWNĘTRZNYCH W EWALUACJI PRACY SZKOŁY Grzegorz Gaworski Wprowadzenie Wykorzystanie wniosków z analizy wyników sprawdzianów i egzaminów zewnętrznych w planowaniu pracy szkoły na przykładzie badania przeprowadzonego w roku 2005 na terenie województwa łódzkiego Ewaluacja w nadzorze pedagogicznym STRATEGIA INFORMATYCZNA ORGANIZACJI KOMERCYJNEJ I PROJEKTU E-MATURA Adam Becht, Konrad Szumigaj Wprowadzenie Uzasadnienie Cel wprowadzenia innowacji Opis innowacji, w tym produktu finalnego Plan działań w procesie testowania produktu finalnego Sposób sprawdzenia, czy innowacja działa Strategia upowszechniania Strategia włączania do głównego nurtu polityki Kamienie milowe etapów projektu Analiza ryzyka Podsumowanie