CAMBRIDGE ESOL PRETESTING (PILOTAś EGZAMINÓW CAMBRIDGE ESOL)

Transkrypt

1 CAMBRIDGE ESOL PRETESTING (PILOTAś EGZAMINÓW CAMBRIDGE ESOL) Wszystkie materiały egzaminacyjne ESOL (egzaminy z języka angielskiego dla obcokrajowców) Uniwersytetu Cambridge są poddawane pretestingowi/pilotaŝowi zanim zostaną wykorzystane w prawdziwych egzaminach. PoniŜszy dokument ma na celu wyjaśnić waŝność pretestingu/pilotaŝu oraz przedstawić informacje niezbędne dla osób biorących udział w tym procesie. CO TO JEST PRETESTING? Uniwersytet Cambridge pragnie zapewnić taki poziom trudności egzaminów językowych, który w najbardziej obiektywny sposób będzie odzwierciedlać wiedzę i umiejętności językowe. W tym celu Uniwersytet Cambridge przeprowadza szczegółowe analizy statystyczne testów pilotaŝowych, które pozwolą stworzyć egzaminy odpowiadające pod względem poziomu oraz zawartości lingwistycznej egzaminom z wcześniejszych sesji. Zanim jakieś pytania zostaną umieszczone w prawdziwych egzaminach ESOL Uniwersytet Cambridge poddaje je pretestingowi/pilotaŝowi na róŝnych grupach studentów. Zazwyczaj studenci biorący udział w tym pilotaŝu są równieŝ zarejestrowani na prawdziwy egzamin. Grupa co najmniej 150 studentów pochodzących z róŝnych środowisk i posługujących się róŝnymi językami ojczystymi bierze udział w kaŝdym pretestingu. W skali globalnej co roku Cambridge wysyła 150 tysięcy testów pilotaŝowych. PROCES PRETESTINGU/PILOTAśU Przygotowanie i zebranie pytań egzaminacyjnych odbywa się co najmniej trzy lata przed datą ich faktycznego wykorzystania. Po całkowitym zredagowaniu pytania trafiają do pilotaŝowego banku/pretest bank. PilotaŜ/pretest jest skonstruowany z kilku części, które w swym układzie są podobne do prawdziwego egzaminu. Po tym jak studenci podejdą do testów w centrach pilotaŝowych zostają one z powrotem wysłane do Cambridge gdzie są 1

2 poddane szczegółowej ocenie i analizie. Dzięki temu Uniwersytet Cambridge jest w stanie ustalić czy poziom trudności danych pytań/zadań zgadza się z przyjętym poziomem trudności dla konkretnego typu egzaminu. KaŜde przeredagowanie klucza odpowiedzi oraz samych zadań moŝe wymagać przesłania danego ćwiczenia lub całej części testu do ponownego pilotaŝu. Po zaakceptowaniu wszystkich części egzaminu zadania zostają umieszczone w banku prawdziwych egzaminów/live exam bank i są gotowe do wykorzystania. Zadania mogą być uŝyte w prawdziwych egzaminach za co najmniej 2 lata od daty umieszczenia ich w tym rejestrze. Opracowanie Dalsza przeróbka PilotaŜ Przeredagowanie Ocena pilotaŝu Odrzucone pytań/zadań (analiza statystyczna, pytania odpowiedzi i komentarze) Zaakceptowane pytania CO OBEJMUJE PRETEST/PILOTAś? 2

3 Zestaw materiałów pretestingowych obejmuje: Instrukcje dla osób nadzorujących egzamin Rejestrację studenta Arkusze zadań Tzw. anchor test z arkuszem informacji o studencie Formularz odpowiedzi (OMR) umoŝliwiający komputerową poprawę odpowiedzi Formularz dla osób nadzorujących egzamin Płytę CD lub kasetę z nagraniami do zadań z rozumienia ze słuchu Test pilotaŝowe mogą się róŝnić w swojej długości, ale są tak zaprojektowane, aby zmieścić się w czasie wyznaczonych zajęć dydaktycznych. KaŜdy test pilotaŝowy zawiera 3 lub 4 części z zadaniami podobnymi do tych, które są uŝywane w czasie prawdziwego egzaminu. Egzamin pilotaŝowy jest więc wartościowym ćwiczeniem próbnym przed przystąpieniem przez studenta do prawdziwego egzaminu. Niektóre testy pilotaŝowe mają na celu przegląd zadań do zmienionych edycji danego egzaminu i nie pojawią się w czasie prawdziwych egzaminów jeszcze przez jakiś czas. W kaŝdym razie pilotaŝ zmienionej edycji danego egzaminu ma na celu ocenę tych samych obszarów językowych co edycja wcześniejsza, a przy okazji daje studentom moŝliwość zapozania się z nowymi typami zadań egzaminacyjnych. INFORMACJE OD OSÓB NADZORUJĄCYCH EGZAMIN Kwestionariusz, który wypełniają osoby nadzorujące egzamin jest źródłem wielu bardzo waŝnych informacji dla Uniwersytetu Cambridge. Wszystkie zebrane w nim informacje są szczegółowo omawiane i pomagają zadecydować czy dane materiały pretestingowe są odpowiednie do wprowadzenia w przyszłości jako prawdziwe zadania egzaminacyjne. TZW. ANCHOR TEST ORAZ ARKUSZ INFORMACJI O STUDENCIE Prawdziwe egzaminy są konstruowane z zadań z wielu róŝnych egzaminów pilotaŝowych. Z tego teŝ powodu Uniwersytet Cambridge pragnie sprawdzić względną trudność egzaminów pilotaŝowych poprzez początkowy minutowy anchor test. 3

4 Trudność tego testu początkowego jest porównywana z poziomem trudności wszystkich kolejnych zadań wypełnianych przez kandydatów w tej samej sesji pilotaŝowej. Arkusz informacji o studencie wypełniany jeszcze przed początkowym anchor testem pozwala na porównanie ze sobą wszystkich uczestników pilotaŝu. Intencją Uniwersytetu Cambridge jest, aby róŝnorodna grupa studentów przystąpiła do egzaminu pilotaŝowego. ARKUSZE ODPOWIEDZI Egzaminy pilotaŝowe ESOL podobnie jak prawdziwe egzaminy uŝywają arkuszy odpowiedzi, z których wybrane zadania są skanowane przez komputer. Oznacza to, Ŝe studenci muszą wypełnić je ołówkiem zaciemniając odpowiednie pola, podkreślając litery lub wpisując właściwe słowa i wyraŝenia. KaŜdy arkusz odpowiedzi mający być poddany komputerowej korekcie (OMR) jest specjalnie przygotowany dla danej szkoły. KaŜdy student otrzymuje własny czterocyfrowy numer identyfikacyjny, który musi umieścić na wszystkich arkuszach odpowiedzi. Zadaniem nadzorujących egzamin jest szczegółowa kontrola dopełnienia tego zalecenia. W JAKI SPOSÓB PUBLIKOWANE SĄ WYNIKI EGZAMINU PILOTAśOWEGO? Wszystkie egzaminy pilotaŝowe są poprawiane i oceniane w przeciągu 2-3 tygodni od otrzymania ich przez Cambridge ESOL. Szkoły otrzymują ogólny wynik dla kaŝdej części egzaminu wypełnionej przez ich studentów. W JAKI SPOSÓB POWINNO SIĘ NADZOROWAĆ EGZAMIN PILOTAśOWY? Ogólnie przyjmuje się, Ŝe egzaminy pilotaŝowe nie zawsze mogą odbywać się w tych samych miejscach co prawdziwe egzaminy i nie zawsze mogą być nadzorowane przez przedstawicieli Cambridge ESOL. JednakŜe zarówno dla dobra uczestników jak i wiarygodności egzaminów pilotaŝowych nadzór nad pretestingiem powinien przebiegać 4

5 dokładnie w ten sam sposób i z tą samą starannością co w trakcie prawdziwych egzaminów. Uczestnicy pilotaŝu nie mogą rozmawiać ani uŝywać słowników. Ze wględu na wykorzystanie materiałów pilotaŝowych w przyszłych prawdziwych sesjach egzaminacyjnych naleŝy je traktować jako dokumenty niezwykle poufne. Wszystkie materiały pretestingowe muszą być zwrócone do Cambridge ESOL, a osoby je nadzorujące powinny zadbać o ich bezpieczeństwo przez cały okres pilotaŝu. Kopiowanie tych materiałów jest surowe wzbronione. Dziękujemy Państwu za zainteresowanie pretestingiem/egzaminem pilotaŝowym. Uniwersytet Cambridge ma nadzieję, Ŝe uznacie ten pomysł za korzystny dla Waszych Studentów a Wasze opinie i komentarze wpłyną na kształt oraz zawartość prawdziwych egzaminów Cambridge ESOL (z języka angielskiego dla obcokrajowców). 5