Ray Poynter The Handbook of Online and Social Media Research PART I.1 ONLINE QUANTITATIVE SURVEY RESEARCH ILOŚCIOWE BADANIA ONLINE
Tytułem wstępu Ray Poynter HoOaSMR Zbiór ogólnych porad Nieco dla opornych Powtórzenia w treści na przestrzeni rozdziałów Skracam: To co raczej mniej istotne (przykład: czy i jak konwertować badanie nie-online na online? ) Pomijam: Absolutne podstawy (przykład: co to guzik następna strona w ankiecie ) Słownictwo angielskie/polskie 2
Plan prezentacji 1. Ogólnie o ilościowych badaniach online 2. Oprogramowanie do ankiet w sieci 3. Projektowanie kwestionariuszy online 4. Podsumowanie projektowania kwestionariuszy 3
Rozdział 1. Ogólnie o ilościowych badaniach online (oryg. Overview of online quantitative research)
Krok po kroku Tworzenie kwestionariusza Programowanie kwestionariusza (-) Umieszczenie kwestionariusza na serwerze (-) Testowanie (-) Zaproszenie ludzi do badania (+) Zbiórka i monitoring danych (+) Zamknięcie badania, pobór danych itp. (+) 5
Rodzaje kwestionariuszy internetowych Web survey Email survey W treści maila Jako załącznik do maila Downloadable survey (patrz np.: smartfony ) 6
Szukanie respondentów Online Access Panels Client databases Marketing databases Client panels Website visitors River sampling 7
Przenoszenie badań online Problem odpowiedniej próby Wielkość próby Porównanie prób ze starszych badań z nową Problem pytań <- czy da się je skutecznie zadać przez sieć? Czy odpowiedzi będą te same? Wybrać podobne, czy ulepszone? Równoległe badania by określić zmiany Czy różnice daje się wymodelować 8
Rozdział 2. Oprogramowanie do ankiet w sieci (oryg. Web Survey Systems)
Główne pytania Czy skorzystać z gotowego oprogramowania Czy je zakupić, czy stworzyć Software, czy SAAS (Software as a Service) Koszt Limity Ochrona danych i bezpieczeństwo Raporty i monitoring Współpraca z innymi narzędziami Przystępność ankiety Umiejętności badaczy 10
Funkcje Narzędzia do tworzenia Możliwości testowania Zarządzanie projektem i monitoring Multimedia Interfejs graficzny Zarządzanie panelem Raportowanie Analiza Międzynarodowość Mobile Research Hybrid survey options Ochrona i bezpieczeństwo Moduły technik marketingowych Skale Język programistyczny 11
Rozdział 3. Projektowanie kwestionariuszy online (oryg. Designing Online Surveys)
Problem 1. wypełnianie samemu Prosty język i minimalizacja ilości słów przy pozostawieniu jasności przekazu Uprzejmość i przyjazność Orientacja w kwestionariuszu podział na opisane sekcje, pasek postępu itp.. Jak najkrótsza i najprzyjemniejsza ankieta Podziękowanie na końcu! Warto na końcu poprosić o komentarz! 13
Problem 2. Layout pytań na stronie/ekranie Pasek przesuwania: brak vs poziomy vs pionowy Preferuje się dzielenie na strony Ile pytań na stronę? Razem pytania pokrewne Więcej na jednej stronie to: Poczucie końca Mniej kliknięć Mniej nagłówków 14
Problem 2. Layout pytań na stronie/ekranie 2 Strony za długie na ekran Różne ekrany Dużo stron Dzielenie zbyt długich pytań. Inne ich rozkładanie Drop-down nieefektywne 15
Problem 3. Cofanie Niegdyś przycisk stop -> intuicyjnie usunięty Za: Daje poczucie kontroli Pozwala na poprawę błędów Przeciw: Utracenie pierwszego co przyjdzie do głowy Zmiany na podstawie przyszłych pytań (np.: celowe skracanie ankiet) Auto-advance (za) Uwaga 1: zależy od ankiety Uwaga 2: może istnieje funkcja zapamiętywania zmian? 16
Problem 4. Przymusowe wypełnianie Za: Tylko pełne obserwacje Przeciw: Response rate w dół Kompromis: Pytania zamknięte przymusowe, ale z opcją: wolę nie odpowiadać 17
Problem 5. Nagłówki, progress, itp.. Nagłówki ważne, gdy następuje zmiana tematyki, formy itp.. Orientacja w kwestionariuszu wspomaga motywację do ukończenia: UWAGA: ma pomagać i motywować musi dobrze odzwierciedlać postęp 18
Problem 6. Auto-advance Za: Prędkość i jej poczucie. Także mniej kliknięć Przeciw: Tylko do zamkniętych o jednym wyborze Nie mieszać! Uwaga: zastanawia mnie response-rate brak poczucia kontroli lub niewygoda 19
Problem 7. Pierwsza strona Zachęcające powitanie Pytania na pierwszej stronie Patrz pop-up tu zwłaszcza na plus Zasady (może być pod przyciskiem next ) Część może być pod linkiem Ale: najważniejsze punkty rzeczywista informacja 20
Problem 8. Ostatnia strona Podziękowania Informacje, też o np. nagrodach itp.. Komentarz Co teraz? Pytania na ostatniej? raczej nie: Grozi wyłączeniem za pomocą x Odwraca uwagę od informacji Zamknięcie zostawić użytkownikowi Lub przekierowanie: z powrotem do panelu, lub np.: na ipiracy.wne.uw.edu.pl 21
Problem 9. Przyjazność badania Ważny: layout; długość i rodzaj pytań Czyli zwalczamy satisficing Główne aspekty: Czynnik podstawowy: ludzie Ulepszanie kwestionariuszy Jakość i zaangażowanie Multimedia Ocena skutków 22
Czynnik podstawowy: ludzie 1) Prosimy o pomoc! 2) Odrzucanie Lepiej dobierać respondentów Przesunąć pytania kwalifikujące bliżej początku Dostarczyć informacje pozwalające na samoocenę Jeśli nie da rady to udawać że dokończyli 3) Podobne pytania/ identyczne pytania Jeśli już muszą być to obok siebie 4) Nieszczerość co do długości Ostrożny dobór słów i poprawianie informacji na podstawie wypełnień 5) Zachęta i jej wartość Omówienie z członkami panelu 6) Uprzejmość 23
Ulepszanie kwestionariuszy 1 Narracyjne prowadzenie Długie/nudne kwestionariusze Bez zachęt wypadanie respondentów Z zachętami satisficing Rada: nie dłuższe niż medianowa długość w np.: panelu Pytania z błędami lub bez sensu grids i drop-down Nie robić! Umniejszyć liczbę odpowiedzi itp. (analiza czynnikowa itp.) 24
Ulepszanie kwestionariuszy 2 Listy odpowiedzi: Podwójne odpowiedzi (np.: smaczne i tanie ) Nakładające się przedziały (np.: 10-20; 20-30 ) Zbyt trudny techniczny język Brak właściwej odpowiedzi Więcej niż jedna odp. (np.: pytanie o system) lub niejasność Rada: w razie czego odpowiedzi: inne, nie wiem, nie dotyczy 25
Ulepszanie kwestionariuszy 3 Łatwiejsze rozumienie Uniwersalny język Prosty, niezłożony Język między krajami Tyle słów ile trzeba, ale nie więcej Odpowiedzi mogą tłumaczyć pytanie (male/female) Pogrubianie (nie podkreślanie) ważnych słów, zmian Kierunek czytania 26
Engagement initiatives Multimedia (np.: flash) Należy uważać mogą poprawić wrażenia, ale: Mogą powodować błędy/ Ograniczyć ilość respondentów mogących wziąć udział 27
Ocena wpływu Dodanie suwaków, inteligentnych okienek tekstowych itp.: Dłuższy czas trwania Część danych lepszych (suwaki->mniej straightline) Część danych gorsza (10 pustych okienek vs okienka po kolei) Część danych bez zmian Część danych inna, ale ciężko ocenić czy na + czy Respondenci szczęśliwsi Ale niektórzy nie rozumieją 28
Multimedia i ich skutki - obrazki Jako ilustracja do paru pytań (np.: produkt do oceny) Jako część pytania -> np.: odpowiedzi Jako część designu Co poszczególny respondent zobaczy Jak obrazek wyjdzie Czy respondent spojrzy na obrazek Rozmiar obrazków (szczegóły kontra bezpieczny rozmiar) Więc: Sprawdzanie wielkości ekranu użytkownika Uwzględnienie pytania o system w kontekście obrazków Pytanie testowe o obrazek Ważne obrazki dobrze umiejscowione (wysoko); nad next/submit Opcja powiększenia obrazka np.: pop-up 29
Multimedia i ich skutki - audio Niekażdy może odtworzyć Brak technicznej możliwości Za słabe łącze Niekompatybilny format pliku Pytania: Czy plik jest słyszalny? Czy wysłuchają do końca? Rady: Wstępna informacja o obecności audio Plik testowy Niedostępność guzika next nim skończy się plik (?) Szansa na ponowny odsłuch 30
Multimedia i ich skutki - video Podobne problemy jak obrazki Podobne problemy jak audio Rady analogiczne do tych przy plikach audio 31
Interaktywne komponenty Przesuwadła, drag & drop, Sortowanie, Guziczki i grids, Wyświetlacze 3D, Książki/artykuły o przewracalnych stronach Problemy? Czy będzie odpowiednio działać? Czy respondent będzie w stanie ich używać? Rada: Test na początku 32
Problem 10. Szkicowanie zaproszeń 1) Respondent musi otworzyć 2) Musi skorzystać Rady: Personalizowane zaproszenia + prosty link Początek o co chodzi Od kogo i skąd posiadany adres e-mail Informacja ile potrwa Dostępna opcja wypisania się z listy 33
Problem 10. Szkicowanie zaproszeń 2 Rady: Opis zachęty Wspomnienie o terminie końca Możliwość dowiedzenia się więcej o projekcie i badaczu Zapewnienie o bezpieczeństwie Wystarczająco informacji do self-screen, ale nie więcej 34
Problem 11. Jakość i etyka Szczerość Cel badania Długość/ pasek postępu Niezbieranie niepotrzebnych informacji Kontrola dostępu do ankiet Testowanie ankiet 35
Podsumowanie Self-completion Przejrzystość, zrozumiałość, zaangażowanie Krótkość Minimum słów Pytania respondent friendly Maksymalna widoczność zawartości ankiety Pierwsza strona: główne informacje i zezwolenia Ostatnia strona: podziękowanie i miejsce na komentarz Bardziej skomplikowany -> więcej testowania Dwa cele: a) spełnić cele badania b) niezrazić respondenta do badań. 36
KONIEC