Ray Poynter The Handbook of Online and Social Media Research

Transkrypt

1 Ray Poynter The Handbook of Online and Social Media Research PART I.1 ONLINE QUANTITATIVE SURVEY RESEARCH ILOŚCIOWE BADANIA ONLINE

2 Tytułem wstępu Ray Poynter HoOaSMR Zbiór ogólnych porad Nieco dla opornych Powtórzenia w treści na przestrzeni rozdziałów Skracam: To co raczej mniej istotne (przykład: czy i jak konwertować badanie nie-online na online? ) Pomijam: Absolutne podstawy (przykład: co to guzik następna strona w ankiecie ) Słownictwo angielskie/polskie 2

3 Plan prezentacji 1. Ogólnie o ilościowych badaniach online 2. Oprogramowanie do ankiet w sieci 3. Projektowanie kwestionariuszy online 4. Podsumowanie projektowania kwestionariuszy 3

4 Rozdział 1. Ogólnie o ilościowych badaniach online (oryg. Overview of online quantitative research)

5 Krok po kroku Tworzenie kwestionariusza Programowanie kwestionariusza (-) Umieszczenie kwestionariusza na serwerze (-) Testowanie (-) Zaproszenie ludzi do badania (+) Zbiórka i monitoring danych (+) Zamknięcie badania, pobór danych itp. (+) 5

6 Rodzaje kwestionariuszy internetowych Web survey survey W treści maila Jako załącznik do maila Downloadable survey (patrz np.: smartfony ) 6

7 Szukanie respondentów Online Access Panels Client databases Marketing databases Client panels Website visitors River sampling 7

8 Przenoszenie badań online Problem odpowiedniej próby Wielkość próby Porównanie prób ze starszych badań z nową Problem pytań <- czy da się je skutecznie zadać przez sieć? Czy odpowiedzi będą te same? Wybrać podobne, czy ulepszone? Równoległe badania by określić zmiany Czy różnice daje się wymodelować 8

9 Rozdział 2. Oprogramowanie do ankiet w sieci (oryg. Web Survey Systems)

10 Główne pytania Czy skorzystać z gotowego oprogramowania Czy je zakupić, czy stworzyć Software, czy SAAS (Software as a Service) Koszt Limity Ochrona danych i bezpieczeństwo Raporty i monitoring Współpraca z innymi narzędziami Przystępność ankiety Umiejętności badaczy 10

11 Funkcje Narzędzia do tworzenia Możliwości testowania Zarządzanie projektem i monitoring Multimedia Interfejs graficzny Zarządzanie panelem Raportowanie Analiza Międzynarodowość Mobile Research Hybrid survey options Ochrona i bezpieczeństwo Moduły technik marketingowych Skale Język programistyczny 11

12 Rozdział 3. Projektowanie kwestionariuszy online (oryg. Designing Online Surveys)

13 Problem 1. wypełnianie samemu Prosty język i minimalizacja ilości słów przy pozostawieniu jasności przekazu Uprzejmość i przyjazność Orientacja w kwestionariuszu podział na opisane sekcje, pasek postępu itp.. Jak najkrótsza i najprzyjemniejsza ankieta Podziękowanie na końcu! Warto na końcu poprosić o komentarz! 13

14 Problem 2. Layout pytań na stronie/ekranie Pasek przesuwania: brak vs poziomy vs pionowy Preferuje się dzielenie na strony Ile pytań na stronę? Razem pytania pokrewne Więcej na jednej stronie to: Poczucie końca Mniej kliknięć Mniej nagłówków 14

15 Problem 2. Layout pytań na stronie/ekranie 2 Strony za długie na ekran Różne ekrany Dużo stron Dzielenie zbyt długich pytań. Inne ich rozkładanie Drop-down nieefektywne 15

16 Problem 3. Cofanie Niegdyś przycisk stop -> intuicyjnie usunięty Za: Daje poczucie kontroli Pozwala na poprawę błędów Przeciw: Utracenie pierwszego co przyjdzie do głowy Zmiany na podstawie przyszłych pytań (np.: celowe skracanie ankiet) Auto-advance (za) Uwaga 1: zależy od ankiety Uwaga 2: może istnieje funkcja zapamiętywania zmian? 16

17 Problem 4. Przymusowe wypełnianie Za: Tylko pełne obserwacje Przeciw: Response rate w dół Kompromis: Pytania zamknięte przymusowe, ale z opcją: wolę nie odpowiadać 17

18 Problem 5. Nagłówki, progress, itp.. Nagłówki ważne, gdy następuje zmiana tematyki, formy itp.. Orientacja w kwestionariuszu wspomaga motywację do ukończenia: UWAGA: ma pomagać i motywować musi dobrze odzwierciedlać postęp 18

19 Problem 6. Auto-advance Za: Prędkość i jej poczucie. Także mniej kliknięć Przeciw: Tylko do zamkniętych o jednym wyborze Nie mieszać! Uwaga: zastanawia mnie response-rate brak poczucia kontroli lub niewygoda 19

20 Problem 7. Pierwsza strona Zachęcające powitanie Pytania na pierwszej stronie Patrz pop-up tu zwłaszcza na plus Zasady (może być pod przyciskiem next ) Część może być pod linkiem Ale: najważniejsze punkty rzeczywista informacja 20

21 Problem 8. Ostatnia strona Podziękowania Informacje, też o np. nagrodach itp.. Komentarz Co teraz? Pytania na ostatniej? raczej nie: Grozi wyłączeniem za pomocą x Odwraca uwagę od informacji Zamknięcie zostawić użytkownikowi Lub przekierowanie: z powrotem do panelu, lub np.: na ipiracy.wne.uw.edu.pl 21

22 Problem 9. Przyjazność badania Ważny: layout; długość i rodzaj pytań Czyli zwalczamy satisficing Główne aspekty: Czynnik podstawowy: ludzie Ulepszanie kwestionariuszy Jakość i zaangażowanie Multimedia Ocena skutków 22

23 Czynnik podstawowy: ludzie 1) Prosimy o pomoc! 2) Odrzucanie Lepiej dobierać respondentów Przesunąć pytania kwalifikujące bliżej początku Dostarczyć informacje pozwalające na samoocenę Jeśli nie da rady to udawać że dokończyli 3) Podobne pytania/ identyczne pytania Jeśli już muszą być to obok siebie 4) Nieszczerość co do długości Ostrożny dobór słów i poprawianie informacji na podstawie wypełnień 5) Zachęta i jej wartość Omówienie z członkami panelu 6) Uprzejmość 23

24 Ulepszanie kwestionariuszy 1 Narracyjne prowadzenie Długie/nudne kwestionariusze Bez zachęt wypadanie respondentów Z zachętami satisficing Rada: nie dłuższe niż medianowa długość w np.: panelu Pytania z błędami lub bez sensu grids i drop-down Nie robić! Umniejszyć liczbę odpowiedzi itp. (analiza czynnikowa itp.) 24

25 Ulepszanie kwestionariuszy 2 Listy odpowiedzi: Podwójne odpowiedzi (np.: smaczne i tanie ) Nakładające się przedziały (np.: 10-20; ) Zbyt trudny techniczny język Brak właściwej odpowiedzi Więcej niż jedna odp. (np.: pytanie o system) lub niejasność Rada: w razie czego odpowiedzi: inne, nie wiem, nie dotyczy 25

26 Ulepszanie kwestionariuszy 3 Łatwiejsze rozumienie Uniwersalny język Prosty, niezłożony Język między krajami Tyle słów ile trzeba, ale nie więcej Odpowiedzi mogą tłumaczyć pytanie (male/female) Pogrubianie (nie podkreślanie) ważnych słów, zmian Kierunek czytania 26

27 Engagement initiatives Multimedia (np.: flash) Należy uważać mogą poprawić wrażenia, ale: Mogą powodować błędy/ Ograniczyć ilość respondentów mogących wziąć udział 27

28 Ocena wpływu Dodanie suwaków, inteligentnych okienek tekstowych itp.: Dłuższy czas trwania Część danych lepszych (suwaki->mniej straightline) Część danych gorsza (10 pustych okienek vs okienka po kolei) Część danych bez zmian Część danych inna, ale ciężko ocenić czy na + czy Respondenci szczęśliwsi Ale niektórzy nie rozumieją 28

29 Multimedia i ich skutki - obrazki Jako ilustracja do paru pytań (np.: produkt do oceny) Jako część pytania -> np.: odpowiedzi Jako część designu Co poszczególny respondent zobaczy Jak obrazek wyjdzie Czy respondent spojrzy na obrazek Rozmiar obrazków (szczegóły kontra bezpieczny rozmiar) Więc: Sprawdzanie wielkości ekranu użytkownika Uwzględnienie pytania o system w kontekście obrazków Pytanie testowe o obrazek Ważne obrazki dobrze umiejscowione (wysoko); nad next/submit Opcja powiększenia obrazka np.: pop-up 29

30 Multimedia i ich skutki - audio Niekażdy może odtworzyć Brak technicznej możliwości Za słabe łącze Niekompatybilny format pliku Pytania: Czy plik jest słyszalny? Czy wysłuchają do końca? Rady: Wstępna informacja o obecności audio Plik testowy Niedostępność guzika next nim skończy się plik (?) Szansa na ponowny odsłuch 30

31 Multimedia i ich skutki - video Podobne problemy jak obrazki Podobne problemy jak audio Rady analogiczne do tych przy plikach audio 31

32 Interaktywne komponenty Przesuwadła, drag & drop, Sortowanie, Guziczki i grids, Wyświetlacze 3D, Książki/artykuły o przewracalnych stronach Problemy? Czy będzie odpowiednio działać? Czy respondent będzie w stanie ich używać? Rada: Test na początku 32

33 Problem 10. Szkicowanie zaproszeń 1) Respondent musi otworzyć 2) Musi skorzystać Rady: Personalizowane zaproszenia + prosty link Początek o co chodzi Od kogo i skąd posiadany adres Informacja ile potrwa Dostępna opcja wypisania się z listy 33

34 Problem 10. Szkicowanie zaproszeń 2 Rady: Opis zachęty Wspomnienie o terminie końca Możliwość dowiedzenia się więcej o projekcie i badaczu Zapewnienie o bezpieczeństwie Wystarczająco informacji do self-screen, ale nie więcej 34

35 Problem 11. Jakość i etyka Szczerość Cel badania Długość/ pasek postępu Niezbieranie niepotrzebnych informacji Kontrola dostępu do ankiet Testowanie ankiet 35

36 Podsumowanie Self-completion Przejrzystość, zrozumiałość, zaangażowanie Krótkość Minimum słów Pytania respondent friendly Maksymalna widoczność zawartości ankiety Pierwsza strona: główne informacje i zezwolenia Ostatnia strona: podziękowanie i miejsce na komentarz Bardziej skomplikowany -> więcej testowania Dwa cele: a) spełnić cele badania b) niezrazić respondenta do badań. 36

37 KONIEC