Rachunek prawdopodobienstwa i statystyka W 13: Projektowanie eksperymentow Jak napisać raport z badań Dr Anna ADRIAN Paw B5, pok 407 adan@agh.edu.pl Konsultacje piątki godz.14.00-14.45
Goals are dreams with deadlines * Każde badanie (naukowe) przebiega w czasie i ma swój początek, cel (wymarzony ), Termin zakończenia/ osiągnięcia celu (deadline) Badanie jest procesem następujących kolejno etapów: sformułowania pytań/ hipotez, opracowania projektu/planu badań realizacji badań (według przygotowanego planu) analizy i interpretacji wyników opracowania raportu, sformułowania wniosków/twierdzeń * Diana Scharf-Hunt, Studying smart: Time menagement
Od problemu do pytania badawczego - formułowanie pytań / hipotez Ujęzykowienie problemu to nadanie mu formy pytania. Pytanie badawcze brzmi jak konkretne zadanie do rozwiązania Kto zrozumiał zdanie pytanie, ten tym samym nie wie jeszcze, jak będzie brzmiała prawdziwa odpowiedź na nie, zna już jednak jej brzmienie do pewnego stopnia (Ajdukiewicz: Język i poznanie) Np. P: Kto odkrył Amerykę? O: X odkrył Amerykę Rozróżnia się dwa podstawowe rodzaje pytań badawczych: Rozstrzygające: np. Czy wzrośnie wydajność pracownika, gdy dostanie 5 % podwyżki? Odp. Tak/Nie Dopełnienia: Zaczynające się od słów kiedy, w jakim zakresie, np O ile wzrośnie wydajność pracownika jeśli dostanie 5 % podwyżki??,
Jak poprawnie sformułować pytanie badawcze Pytanie musi być wyrażone w języku danej dziedziny wiedzy jasne, zrozumiałe dla specjalistów z dziedziny, zawierające tylko takie terminy co do znaczenia których nikt nie ma wątpliwości np. dobrze sformułowane : Jaki jest zakres pamięci roboczej ; źle sformułowane : Ile mieści się w pamięci rozstrzygalne tzn. współcześnie istnieją takie środki, metody i narzędzia, które umożliwiają znalezienie odpowiedzi. Każde pytanie ma ukryte założenia (wg Ajdukiewicza) pozytywne; przynajmniej jedna odpowiedź jest prawdziwa negatywne; przynajmniej jedna z możliwych odpowiedzi jest nieprawdziwa Pytania nie spełniające obu założeń są to pytania źle postawione
Formułowanie hipotez badawczych Hipoteza badawcza to zdanie twierdzące, dotyczące przewidywanego wyniku eksperymentu. Nie może być zbyt ogólna, bo umożliwia wiele rodzajów generalizacji Powinna być prosta. Powinna być empirycznie sprawdzalna. Np. Pod koniec XVII wieku uczeni uważali, że spalanie polega ubywaniu czegoś (substancji palnej) ze spalanego przedmiotu. Lavoisier spalił pewną substancję w kontrolowanych warunkach i stwierdził, że masa popiołu jest większa od masy spalanego ciała) Prawo naukowe to potwierdzona i wyrażona w nieco ogólniejszej postaci hipoteza badawcza.
Projektowanie eksperymentu- Zmienne w eksperymentach Eksperyment to procedura, w której badacz manipuluje co najmniej jedną zmienną, dokonuje pomiaru innej zmiennej i stara się kontrolować wpływ pozostałych zmiennych. Nieistotne zakłócające uboczne Istotne główne Zmienne niezależne Zmienne zależne
Przykład eksperymentu psychologicznego efekt Rosenthala Uczenie szczurów odnajdywania drogi w labiryncie: Utworzono dwie grupy szczurów pobrane losowo z jednej populacji Podzielono studentów, uczestników eksperymentu na dwie grupy A studenci badający szczury wiedzą, że uczą szczury ze specjalnej hodowli, bardziej inteligentne od przeciętnych, bystrzejsze od innych B- studenci badający szczury wiedzą,, że uczą szczury najmniej bystre Klasyfikacja zmiennych niezależnych Główna: instrukcja stwierdzająca przynależność szczurów do grupy bystre lub nierozgarnięte Istotne ale aktualnie nie interesujące badacza tzw zmienne uboczne, obejmują różnice indywidualne, badanych, czynnikami zewnętrznymi w jakich przebiega eksperyment, błędami w konstrukcji samego eksperymentu. Ich wpływ można kontrolować na dwa sposoby poprzez ustalenie wartości na stałym poziomie np. wszystkie badania o tej samej porze poprzez losowy dobór wartości zmiennej ( losowy wybór szczurów)
Przykład eksperymentu kwalifikacja zmiennych Zmienne zakłócające, zmienne losowe, których wpływ jest niekontrolowany, stanowią największą grupę. Czasem trudno zdecydować czy dana zmienna jest zakłócająca czy uboczna, jej kwalifikacja zależy od wiedzy i intuicji badacza, jeśli są wątpliwości to warto pamiętać: Jeśli podejrzewasz, że zmienna może mieć wpływ, to lepiej ją kontrolować niż nie kontrolować Kwalifikacja zmiennych niezależnych zawsze musi wynikać z problemu badawczego Szczególnie przykrą podgrupę stanowią okazjonalne zmienne zakłócające, np. ktoś wszedł do laboratorium i przeszkodził w obserwacji, niedyspozycja badacza lub badanego. Wpływ zmiennych okazjonalnych należy minimalizować, ale w Uniwersytecie New York wykonano eksperyment, gdzie uczyniono zmienną zakłócającą główną zmienną.
Eksperyment A Bargh i m.chen - NYU Dwie grupy studentów miały uporządkować fragmenty zdań w języku angielskim. W grupie I znalazły się słowa odnoszące się do uprzejmości : cierpliwy, uprzejmy, pełen szacunku W II grupie słowa odnoszące się do wrogości: agresywny, przerywać, nieuprzejmy, przeszkadzać Podczas badania ktoś nagle wchodził do laboratorium, prosił badacza o krótką rozmowę na korytarzu, ten zakłopotany przepraszał osobę badaną i prosił, żeby jak skończy znalazła go na korytarzu. Znaleźć nie było trudno, ale badacz był zajęty rozmowa i nie zwracał uwagi na swoich studentów. 67% osób układających zdania w których były słowa wrogie przerywało badaczowi rozmowę przed upływem 10 min a tylko 16 % spośród tych, w których układance znajdowały się słowa uprzejmościowe.
Zmienna zależna Odnosi się do jakiegoś zjawiska (cechy, czynnika), którego pojawienie się jest skutkiem, rezultatem zadziałania innego zjawiska (cechy, czynnika) traktowanego jako przyczyna (powód) tego pierwszego Zależność oznacza w tym wypadku zależność od zmiennej niezależnej Dane, czyli wartości zmiennej zależnej, pojawiają się jako reakcja na zmiany zmiennej niezależnej, zwłaszcza głównej zmiennej Analiza zmiennej zależnej ma doprowadzić do celu; rozwiązania postawionego problemu
Operacjonalizacja zmiennych Zdania teoretyczne i zdania empiryczne T: Krzysiek ma większą zdolność myślenia dedukcyjnego niż Piotrek E: Krzysiek rozwiązał więcej zadań z logiki niż Piotrek Pytanie badawcze zwykle formułujemy w terminach teoretycznych, a wyniki przeprowadzonego eksperymentu, to zdania empiryczne. Jeśli poprawnie zoperacjonalizujemy terminy teoretyczne, to możemy poprawnie odpowiedzieć na postawione pytanie badawcze. Stąd wynikają spory akademickie merytoryczne, dotyczące treści istotnej dla sprawy, kwestia stawianych pytań i udzielanych odpowiedzi metodologiczne, dotyczące metody ujęcia treści, czyli operacjonalizacji zmiennych
Projektowanie eksperymentów Badanie eksperymentalne przeprowadzamy po to by zweryfikować postawioną hipotezę. Przed zaplanowaniem eksperymentu muszę znać odpowiedzi na następujące pytania: Co chcę wiedzieć, jakiej formy odpowiedzi oczekuję, jaka precyzja uzyskanej wiedzy mnie zadowala? Z jaką dokładnością chcę to wiedzieć; dotyczy to sposobu operacjonalizacji zmiennych oraz sposobu pomiaru (pozyskiwania) wartości empirycznych wskaźników teoretycznych terminów O jakiej grupie chcę to wiedzieć (losowa próbka statystyczna), tu projektuje się układ grup badawczych
Układ z dwoma grupami badawczymi Zmienna niezależna dwuwartościowa, kategoryzująca (płeć, rodzaj instrukcji) Warunki poprawności układu Randomizacja, losowy przydział do grupy Procedura eksperymentalna jest identyczna dla wszystkich badanych Procedura pomiaru zmiennej zależnej jest identyczna dla każdego przypadku niezależnie od przynależności do grupy Warunki te muszą być szczególnie uważnie sprawdzane przy badaniu istot żywych
Układ z powtarzanymi pomiarami W badaniach osób nigdy nie wiemy czy rozkład cech osób z jednej grupy jest taki sam jak rozkład cech osób z drugiej grupy błąd próbkowania. W praktyce stosuje się eksperyment na jednej grupie z powtarzanymi pomiarami zmiennej zależnej ( np. przed i po szkoleniu) Zalety układu Te same osoby w różnych sytuacjach dają różne odpowiedzi Zmniejsza liczbę osób uczestniczących w eksperymencie Utrzymanie takiego samego związku pomiędzy wizją eksperymentu badacza tym jak go rozumieją osoby badane Wady układu Uczestnicy mogą odgadnąć prawdziwy cel badań i intencje eksperymentatora i manipulować odpowiedziami Możliwość korygowania reakcji i świadomego modyfikowania zachowań przez osoby badane
Badanie eksperymentalne i różnicowe Pretest i posttest zmiennej zależnej Eksperymentu z powtarzanymi pomiarami nie da się przeprowadzić gdy zmienna niezależna jest zmienną różnicującą grupy badane ze względu na jakąś stałą cechę obiektów, np. analiza wpływu miejsca zamieszkania (wieś, mm, śm, dm) na dostęp do edukacji ( liczba studentów na 1000 mieszkańców. Szczególną wersją planu z powtarzanymi pomiarami jest wykonanie pomiaru zmiennej zależnej beż żadnej dodatkowej stymulacji pretest Po stymulacji posttest W tym przypadku zmienna otrzymana jako pretest może być traktowana jak zmienna niezależna (np. wpływ wypicia 100 ml alkoholu na czas reakcji)
Realizacja badań Plan czterogrupowy Salomona Argumenty osobiste teoretyczne Pomiar etnocentryzmu Pretest i Posttest Grupa 1 Grupa 2 Tylko Postest Grupa 3 Grupa 4 Pozwala na kontrolowanie wpływu zarówno pretestu jak i zmiennej niezależnej ale wymaga dwóch grup więcej niż dwugrupowy Interpretacja takich testów jest nieco bardziej skomplikowana
Realizacja badań Eksperyment czteroczynnikowy zeznania prawdziwe fałszywe tempo dyktowania wolne 0% 12% szybkie 44% 65% Układy eksperymentalne w których przydział do grup następuje według więcej niż jednego kryterium nazywa się eksperymentami czynnikowymi
Analiza wyników badań Badania bez manipulacji eksperymentalnej
Zmiana dolnej wartości pierwszej klasy Od zera Od minimum
Wykresy skategoryzowane; ramkowe
Testowanie hipotez
Wykresy skategoryzowane; interakcji
Raport Raport powinien zawierać następujące części Tytuł powinien być w pełni zrozumiały niezależnie od tekstu, zwięźle przedstawiać temat pracy, dokładnie odpowiadać treści pracy, Streszczenie (opcjonalne) Wprowadzenie Opis metody Prezentacja wyników Dyskusja wyników i wnioski Literatura Załączniki
Raport - Wprowadzenie Wprowadzenie powinno zawierać trzy następujące elementy: Przedstawienie problemu dlaczego problem jest ważny, dlaczego podejmuję te badania związek pomiędzy problemem a stawianymi hipotezami związek prowadzonych badań z innymi badaniami w dziedzinie Opis wcześniej opublikowanych badań mających związek z problemem najważniejszy jest trafny wybór przytaczanych wyników dotychczasowych badań w realizowanym przez Ciebie temacie nie przytacza się podręczników i publikacji marginalnie związanych z tematem należy kierować się logiką wywodu, nie czasem wydania publikacji unikać zbyt szczegółowych wyjaśnień Zdefiniowanie celu badań i proponowany sposób rozwiązania problemu zdefiniowanie analizowanych zmiennych zależnych zmiennych niezależnych (główne, uboczne, zakłócające) sformułowanie hipotez badawczych wybór testów
O błędach w badaniach statystycznych Badania, zarówno pełne jak i częściowe, zawsze obciążone są błędami, związanymi z: organizacją eksperymentu, niedokładnością pomiarową, przetwarzaniem wyników, w badaniach częściowych z niedokładnością odwzorowania struktury populacji w strukturę próbki