Aspekty wprowadzania zmiany technologii oceniania

Transkrypt

1 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. Aspekty wprowadzania zmiany technologii oceniania Małgorzata Dudkiewicz-Świerzyńska Przemysław Kuś Andrzej Folwaczny PRZYGOTOWANIE KADRY PRZYGOTOWANIE SYSTEMU INFORMATYCZNEGO PODZIAŁ KOMPETENCJI W SYSTEMIE EGZAMINACYJNYM 1

2 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. PRZYGOTOWANIE KADRY Małgorzata Dudkiewicz-Świerzyńska PLANOWANIE SZKOLEŃ PLANOWANO 62 EKSPERTÓW ZREALIZOWANO 64 EKSPERTÓW PLANOWANO 9062 OSÓB ZREALIZOWANO 9128 OSÓB PLANOWANO 2500 MMA ZREALIZOWANO 3998 MMA PLANOWANO 6500 GM ZREALIZOWANO 5066 GM 2

3 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. REKRUTACJA UCZESTNIKÓW SZKOLEŃ EKSPERTÓW EGZAMINATORÓW Strona internetowa OŚRODKI SZKOLENIOWE Ośrodki e-oceniania wybierano na terenie poszczególnych OKE Typowano szkoły z dobrze wyposażonymi pracowniami komputerowymi Uwzględniano liczbę komputerów, ich wyposażenie oraz szybkość łącza internetowego OKE Gdańsk 4 ośrodki OKE Jaworzno 5 ośrodków OKE Kraków 11 ośrodków OKE Łomża 6 ośrodków OKE Łódź 3 ośrodki OKE Poznań 8 ośrodków OKE Warszawa 7 ośrodków OKE Wrocław 6 ośrodków 3

4 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. SZKOLENIA EKSPERTÓW PROWADZONE PRZEZ CZŁONKÓW ZESPOŁU WDROŻENIOWEGO DWUDNIOWE ZORGANIZOWANE W WARSZAWIE POZNAWANIE APLIKACJI SCORIS ORAZ ZADAŃ EKSPERTÓW Rola ekspertów w nowym systemie oceniania Menedżer monitoruje przebieg procesów, m.in.: skanowanie, ocenianie prac, przetwarzanie wyników, generowanie danych do rozliczeń finansowych Koordynator określa m.in.: strategię oceniania, strukturę zespołów egzaminatorów, przydział zadań do poszczególnych trybów (ćwiczeniowego, kwalifikowania, kontrolowania) Inżynier systemu ekspert ds. integracji systemów informatycznych, transferu danych i scalania 4

5 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. SZKOLENIA TRENERÓW PROWADZONE PRZEZ CZŁONKÓW ZESPOŁU WDROŻENIOWEGO ORAZ KOORDYNATORÓW DWUDNIOWE, ZORGANIZOWANE W WARSZAWIE PRZYGOTOWYWAŁY DO SZKOLENIA EGZAMINATORÓW UKOŃCZYŁO 61 TRENERÓW GM I 76 TRENERÓW MMA MODUŁY SZKOLENIA EGZAMINATORÓW UMIEJĘTNOŚĆ POBIERANIA I INSTALOWANIA APLIKACJI SCORIS POZNAWANIE APLIKACJI JAKO NARZĘDZIA DO PUNKTOWANIA ODPOWIEDZI ZDAJĄCYCH KOMUNIKOWANIE W SYSTEMIE JAKOŚĆ OCENIANIA 5

6 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. Szkolenia egzaminatorów GM lp miejscowość Numer kodów 1 Białystok GP02 2 Białystok GP03 3 Bydgoszcz GP04 4 Ciechanów GP05 5 Kalisz GP06 6 Katowice GP01 7 Kielce GP07 8 Kraków GP08 9 Łomża GP09 10 Łódź GP10 11 Łódź GP11 12 Nowy Sącz GP12 13 Ostrołęka GP13 14 Poznań GP14 15 Przemyśl GP15 16 Radom GP16 17 Siedlce GP17 18 Słupsk GP18 19 Szczecin GP19 20 Tarnów GP20 21 Toruń GP21 LICZBA GRUP EGZAMINATORÓW Przykład na podstawie szkolenia z 20 lipca 2013 roku Szkolenia egzaminatorów MMA lp miejscowość Numer kodów 1 Częstochowa MP02 2 Dębica MP03 3 Kielce MP04 4 Koszalin MP05 5 Koszalin MP06 6 Kraków MP07 7 Rzeszów MP08 8 Rzeszów MP09 ŁĄCZNA LICZBA GRUP SZKOLENIOWYCH 621 BADANIE EWALUACYJNE Ankiety ewaluacyjne wypełniło 50 EKSPERTÓW (forma papierowa) 89 TRENERÓW (elektroniczna ankieta) 8380 EGZAMINATORÓW (elektroniczna ankieta) 6

7 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. Zadania PZE w opinii trenerów W e-ocenianiu nie ma odbioru kartonów, liczenia, przydziału i odbioru arkuszy; nie ma zliczania i pakowania kart; nie ma kontroli podpisów i wypełnień na kartach; korzystniejszy jest system kwalifikacji egzaminatorów, śledzenia postępów w pracy oraz wspierania ich w ocenianiu. Monitorowanie statusu egzaminatorów, możliwość zauważenia egzaminatora, który ma problemy ze stosowaniem kryteriów oceniania. Lepszy wgląd w arkusze sprawdzane w grupie. Przewodniczący w e-ocenianiu wykonuje zadania, które do tej pory wykonywał weryfikator merytoryczny, może również zarządzać czasem pracy egzaminatorów (gdy trzeba, to można zatrzymać egzaminatora, który spieszy się ze sprawdzaniem prac i sprawdza niedokładnie) przewodniczący nie zajmuje się wypełnianiem dokumentacji. PRZESZKOLENI EGZAMINATORZY 7

8 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. Mamy przygotowaną w każdej okręgowej komisji egzaminacyjnej grupę ekspertów i egzaminatorów gotowych do podjęcia pracy w nowym systemie PRZYGOTOWANIE SYSTEMU INFORMATYCZNEGO Przemysław Kuś 8

9 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. TEMATYKA 1. System SCORIS - wymagania i konfiguracja 2. Aplikacja SCORIS Assessor 3. Skanowanie i przesyłanie prac 4. Wymiana danych z systemem SCORIS - stan integracji systemów 5. Bezpieczeństwo systemu System SCORIS - wymagania i konfiguracja Architektura klient serwer Środowisko Microsoft Windows Rola serwera programu scoris Serwer WWW Serwer aplikacji Serwer plików Serwer SQL Serwer Active Directory Serwer raportów Szczegóły Warstwa WWW scoris: strony WWW i usługi sieciowe Warstwa aplikacji scoris Serwer plików scoris, na którym przechowywane są obrazy prac Serwer bazy danych scoris Serwer poświadczeń logowania użytkowników Dodatkowy serwer, wspomagający raportowanie scoris 9

10 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. System SCORIS - wymagania i konfiguracja Aplikacja scoris Assessor Aplikacja dla egzaminatorów Środowisko Microsoft Windows Wymagane połączenie internetowe 10

11 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. Skanowanie i przesyłanie prac Skanowanie i indeksowanie prac w 1 lokalizacji lub w kliku centrach (rozproszone) Ładowanie obrazów i metadanych SETH (produkt firmy RM) lub OPOS (stworzony w projekcie) Integracja systemów - OPOS OPOS Oprogramowanie Pośredniczące między OKE a SCORIS Wykonawca: Zakład Elektronicznej Techniki Obliczeniowej w Katowicach sp. z o.o. Stan realizacji: gotowe Licencja: pełna, z wszelkimi prawami do modyfikacji 11

12 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. Integracja systemów - OPOS Środowisko Linux + JAVA Dwukierunkowa komunikacja z usługami sieciowymi systemu SCORIS Interfejs dla CKE i wszystkich OKE Przesyłanie i pobieranie danych przez użytkowników Obsługa wszystkich danych wykorzystywanych w systemie SCORIS, m.in.: sesja, arkusz, szkoły, zdający, obrazy prac, oceny Sprawdzanie poprawności, podział na poszczególne OKE Metody przesyłania danych: formularz www, pliki csv, FTP Integracja systemów - OPOS 12

13 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. Stan integracji systemów Bezpieczeństwo systemu SERWERY Infrastruktura fizyczna odpowiadająca wymogom prawnym Firewall Dostęp tylko przez serwer www KLIENT WS-Security (X.509) Szyfrowanie SSL Silne hasła użytkowników OPOS Podwójne szyfrowanie SSL Silne hasła użytkowników 13

14 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. ORGANIZACJA WSPARCIA W TRAKCIE SZKOLEŃ I SESJI Andrzej Folwaczny STRUKTURA WSPARCIA EGZAMINATORZY HELPDESK (PIERWSZA LINIA WSPARCIA) DRUGA LINIA WSPARCIA TRZECIA LINIA WSPARCIA 14

15 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. PROBLEMY ROZWIĄZYWANE PRZEZ ZESPÓŁ WSPARCIA Zakres Problem Zgłoszenia Udzielone odpowiedzi Instalacja programu Nie mogę pobrać aplikacji Nie mogę zainstalować Nie mogę się zalogować Praca z programem scoris Assessor Nie mogę pobrać prac do oceny Nie mogę przesłać prac Nie mogę otwierać wiadomości Nie mogę zgłosić szczególnego przypadku Inne zgłoszenia (poza skalsyfikowanymi powyżej ) Razem SZCZEGÓLNE PRZYPADKI ZGŁOSZONE PODCZAS SESJI Szczególny przypadek Standardowe Dyslektycy Dodatkowy obraz w arkuszu 57 2 Niewłaściwa kolejność stron w zestawie 12 4 Niewłaściwy arkusz 50 1 Potrzeba ponownego skanowania Rozwiązanie nieczytelne Rozwiązanie wykraczające poza schemat oceniania Sklejone arkusze Razem W sesji

16 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. OCZEKIWANIA EGZAMINATORÓW Pomoc w procesie instalacji oprogramowania na komputerach i logowania do systemu Pomoc w obsłudze aplikacji i rozwiązywania problemów występujących z ich obsługą w trakcie oceniania DOCELOWA ORGANIZACJA WSPARCIA Wprowadzenie jednego numeru telefonu z wirtualną centralą obsługującą wiele numerów dla pracowników udzielających pomocy Poszerzenie funkcjonalności aplikacji do udzielania wsparcia egzaminatorom online (Hesk) 16

17 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. PODZIAŁ KOMPETENCJI W SYSTEMIE EGZAMINACYJNYM Andrzej Folwaczny Zadania i instytucjonalny podział ról 17

18 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. PROCES E-OCENIANIA OBEJMUJE NOWE UTRZYMANIE I ZARZĄDZANIE SYSTEMEM INFORMATYCZNYM (SCORIS) NOWE GROMADZENIE I WPROWADZANIE DANYCH: ZDAJĄCYCH, EGZAMINATORÓW, O STRUKTURZE ARKUSZA STRATEGIĘ I STANDARDY OCENIANIA ZMIANA ORGANIZACJĘ ZESPOŁÓW EGZAMINATORÓW NOWE SKANOWANIE PRAC I PRZESYŁANIE ZINDEKSOWANYCH OBRAZÓW DO SYSTEMU SZKOLENIA EGZAMINATORÓW OCENIANIE PRAC ZMIANA PUBLIKOWANIE WYNIKÓW EGZAMINU ORAZ SPRAWOZDAŃ NOWE WSPARCIE DLA EGZAMINATORÓW ASPEKTY ZARZĄDZANIA Merytoryczne Technologiczne Organizacyjne 18

19 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. CENTRUM ZARZĄDZAJĄCE MODEL SCENTRALIZOWANY TECHNOLOGIA Zarządzanie systemem informatycznym Wprowadzanie ustawień sesji do systemu Monitorowanie procesu oceniania Generowanie raportów i opracowanie sprawozdań ORGANIZACJA Planowanie struktury zespołów egzaminatorów Prowadzenie rozliczeń finansowych ZAGADNIENIA MERYTORYCZNE Strategia i kryteria oceniania (Schemat oceniania, podział na grupy zadań) Zarządzanie jakością oceniania w tym standaryzacja Programy szkoleń egzaminatorów Format arkuszy i strategia skanowania Komunikowanie wyników odbiorcom UCZESTNICY SYSTEMU TECHNOLOGIA Wprowadzenie danych zdających i egzaminatorów Skanowanie i przesyłanie danych do systemu Generowanie raportów i opracowanie sprawozdań ORGANIZACJA Przygotowanie danych zdających i egzaminatorów Rekrutacja i zatrudnianie egzaminatorów Szkolenie egzaminatorów do sesji Prowadzenie rozliczeń finansowych ZAGADNIENIA MERYTORYCZNE Pobieranie wyników z systemu, druk świadectw Komunikowanie wyników odbiorcom CENTRUM ZARZĄDZAJĄCE TECHNOLOGIA Zarządzanie systemem informatycznym ORGANIZACJA Planowanie struktury zespołów egzaminatorów MODEL ROZPROSZONY ZAGADNIENIA MERYTORYCZNE Strategia i kryteria oceniania (Schemat oceniania, podział na grupy zadań) Programy szkoleń egzaminatorów Format arkuszy i strategia skanowania UCZESTNICY SYSTEMU TECHNOLOGIA Monitorowanie procesu oceniania Generowanie raportów i opracowanie sprawozdań Wprowadzenie danych zdających i egzaminatorów Wprowadzanie ustawień sesji do systemu Skanowanie i przesyłanie danych do systemu Generowanie raportów i opracowanie sprawozdań ORGANIZACJA Przygotowanie danych zdających i egzaminatorów Rekrutacja i zatrudnianie egzaminatorów Szkolenie egzaminatorów do sesji Prowadzenie rozliczeń finansowych ZAGADNIENIA MERYTORYCZNE Pobieranie wyników z systemu, druk świadectw Komunikowanie wyników odbiorcom Zarządzanie jakością oceniania w tym standaryzacja 19

20 Projekt współfinansowany ze środków Unii Europejskiej w ramach Europejskiego. Dziękujemy za uwagę 20