Analiza jakościowa vs. ilościowa w badaniach ankietowych

admin
admin
Dodane przezadmin
18 minut czytania

Analiza ilościowa w badaniach ankietowych mierzy zjawiska za pomocą liczb i zamkniętych pytań, pokazując precyzyjną skalę problemu, podczas gdy analiza jakościowa skupia się na otwartych odpowiedziach, tłumacząc ukryte motywacje, frustracje i emocje respondentów. Używam obu tych metod na co dzień, bo gołe cyfry powiedzą Ci tylko, ilu dokładnie klientów porzuciło koszyk w Twoim sklepie, ale dopiero ich własne słowa wyjaśnią, dlaczego to zrobili.

Prawdę mówiąc, kiedyś wierzyłem tylko w arkusze kalkulacyjne. Ekscel. Wykresy. Sztywne dane. Myślałem, że jeśli zapytam tysiąc osób o ocenę od jeden do pięciu, dostanę pełen obraz sytuacji. Błąd. Ogromny błąd. Przejechałem się na tym jakieś cztery lata temu. Wypuściłem ankietę satysfakcji dla nowej aplikacji. Średnia ocena wynosiła 4.7. Sukces? Tak myślałem. Miesiąc później 40% użytkowników skasowało konta. Dlaczego? Bo nie dałem im pola tekstowego, w którym mogliby napisać, że aplikacja pożera baterię telefonu w trzy godziny. Cyfry kłamały, bo zadałem złe pytania.

Słuchaj, to nie jest tak, że jedna metoda bije drugą na głowę. One po prostu wykonują inną robotę. Wyobraź sobie, że pieczesz ciasto. Ilościówka to waga kuchenna. Mówi Ci, że wsypałeś 200 gramów mąki. Jakościówka to moment, w którym próbujesz surowego ciasta palcem i czujesz, że zapomniałeś dodać cukru. Potrzebujesz obu tych rzeczy, żeby nikt nie wypluł Twojego wypieku.

Czym różni się analiza jakościowa od ilościowej w ankietach?

Różnica sprowadza się do formatu danych i sposobu, w jaki zmuszam swój mózg do ich przetworzenia. Kiedy robię analizę ilościową, patrzę na twarde wybory. Ludzie klikają w kropki. Wybierają płeć, przedział wiekowy, zarobki, albo zaznaczają odpowiedź „zdecydowanie się zgadzam”. Zbieram to wszystko, wrzucam w program i widzę, że 73% kobiet z dużych miast uważa mój produkt za drogi. Konkret. Szybka piłka.

Analiza jakościowa to zupełnie inna bajka. Tu czytam tekst. Czasem to jedno słowo, czasem elaborat na pół strony. Ludzie wylewają swoje żale, rzucają pomysłami, a czasami po prostu przeklinają. Muszę to przeczytać, zrozumieć kontekst i znaleźć wzorce. Zamiast liczyć kliknięcia, szukam znaczeń.

Zebrałem te różnice w prostą tabelę, żebyś od razu widział, z czym masz do czynienia, kiedy siadasz do projektowania formularza.

Cecha badania Analiza ilościowa (Liczby) Analiza jakościowa (Słowa)
Cel główny Zmierzyć zjawisko. Odpowiedzieć na pytanie „ile?” oraz „kto?”. Zrozumieć zjawisko. Odpowiedzieć na pytanie „dlaczego?” oraz „jak?”.
Typ pytań Zamknięte, jednokrotnego lub wielokrotnego wyboru, skale ocen. Otwarte, prośby o opinię, rozwinięcie myśli.
Wielkość próby Duża. Zwykle od kilkuset do kilku tysięcy osób, by wynik miał sens statystyczny. Mała. Nawet 10-30 dobrze dobranych osób da Ci masę wiedzy.
Sposób analizy Matematyka, statystyka, uśrednianie, wykresy kołowe i słupkowe. Czytanie, kategoryzowanie wypowiedzi, szukanie emocji i ukrytych potrzeb.

Kiedy wybrać badania ilościowe a kiedy jakościowe?

Zawsze zadaję sobie jedno pytanie przed startem: czy ja w ogóle wiem, o co chcę zapytać? Jeśli wypuszczam nowy produkt na rynek i nie mam pojęcia, jak ludzie go używają, robię badanie jakościowe. Daję im puste pole. Nie sugeruję odpowiedzi. Zrobiłem tak przy testowaniu kursu online. Zapytałem 50 osób: „Co sprawiło Ci największą trudność?”. Spodziewałem się narzekania na trudny materiał. Wiesz, co odpisali? Że odtwarzacz wideo nie zapamiętuje momentu, w którym przerwali oglądanie. Nigdy bym na to nie wpadł, gdybym dał im zamkniętą listę opcji do wyboru.

Ilościówkę wybieram wtedy, gdy chcę coś udowodnić. Mam hipotezę. Przypuszczam, że czerwony przycisk na stronie działa lepiej niż zielony. Wtedy puszczam test do tysiąca osób, każę im klikać i liczę procenty. Tu nie ma miejsca na gdybanie. Albo wynik wynosi 60%, albo 40%. Krótka piłka.

Jak analizować pytania otwarte w ankiecie?

To boli. Naprawdę. Analiza tekstu to najtrudniejszy etap całej zabawy z ankietami. Kiedyś drukowałem arkusze i mazałem po nich zakreślaczami. Teraz mam na to sprytny system. Wyobraź sobie, że dostajesz 300 odpowiedzi na pytanie „Dlaczego zrezygnowałeś z naszej subskrypcji?”. Nie możesz po prostu przeczytać tego przy kawie i stwierdzić „aha, chyba chodzi o kasę”. Musisz to uporządkować.

Robię to w trzech krokach. Zawsze w tej samej kolejności.

  • Krok pierwszy: Szybkie skanowanie. Przelatuję wzrokiem przez pierwsze 50 odpowiedzi. Nie analizuję ich głęboko. Szukam powtarzających się słów. Widzę „cena”, „drogo”, „nie stać mnie”. Widzę też „trudne”, „nie rozumiem”, „skomplikowane”.
  • Krok drugi: Tworzenie tagów. Na podstawie tego szybkiego czytania wymyślam kategorie. Nazywam je prosto. Koduję odpowiedzi. Zamiast czytać elaboraty, przypisuję im etykiety: „CENA”, „UX”, „BRAK CZASU”, „OBSŁUGA KLIENTA”.
  • Krok trzeci: Tagowanie całości. Siadam do arkusza i przy każdym wierszu wpisuję odpowiedni tag. Czasem jedna wypowiedź dostaje dwa tagi, bo klient narzeka i na cenę, i na interfejs.

Właściwie to zamieniam w ten sposób dane jakościowe na ilościowe. Policzę te tagi. I nagle z wielkiego bałaganu słów wychodzi mi twardy wynik: 145 osób odeszło przez cenę, a 80 przez zły interfejs. Mam dowód dla szefa. Mam dowód dla siebie.

Czy da się policzyć emocje z odpowiedzi tekstowych?

Tak. I robię to regularnie. Nazywa się to analizą sentymentu. Kiedyś musiałem to robić ręcznie (choć moja żona do dziś uważa, że to po prostu wymówka, żeby dłużej gapić się w monitor z kubkiem zimnej kawy). Oceniałem każdą wypowiedź jako pozytywną, neutralną albo negatywną. Minus jeden, zero, plus jeden.

Teraz pomagam sobie narzędziami. Wrzucam tekst, a skrypt mówi mi, ile w nim złości, a ile radości. Sprawdziłem to ostatnio na grupie 120 opinii o pewnym sklepie z butami. Wynik ogólny w gwiazdkach wynosił 4.2. Całkiem nieźle. Ale analiza sentymentu w tekstach pokazała coś przerażającego. Aż 65% wypowiedzi miało silne nacechowanie negatywne. Dlaczego? Ludzie dawali 5 gwiazdek za same buty, ale w komentarzu wylewali wiadro pomyj na firmę kurierską, która rzucała paczkami przez płot. Gwiazdki tego nie wyłapały. Tekst tak.

Jakie błędy popełniam przy tworzeniu ankiet?

Oj, lista jest długa. Czasami myślę, że zjadłem zęby na badaniach, a potem puszczam formularz i łapię się za głowę. Mój największy grzech? Pytania podwójne. Zdarzało mi się pytać: „Czy nasz produkt jest szybki i łatwy w obsłudze?”. Respondent zaznaczał „nie”. I co teraz? Nie wiem, czy produkt jest wolny, czy trudny. A może jedno i drugie? Zmarnowałem pytanie. Zmarnowałem czas użytkownika.

Inny błąd to używanie żargonu. W jednym z testów zapytałem użytkowników o ich preferencje dotyczące „responsywności interfejsu”. Z 200 osób wypełniających ankietę, połowa zaznaczyła odpowiedź środkową, tak zwane „nie mam zdania”. Dopiero w pytaniu otwartym na końcu ktoś napisał: „Panie, a co to w ogóle znaczy ta responsywność?”. Musiałem wyrzucić całe badanie do kosza. Od tamtej pory tłumaczę wszystko łopatologicznie. Pytam: „Czy strona dobrze działa na Twoim telefonie?”. Prosto. Jak do człowieka na przystanku autobusowym.

Ile pytań powinna mieć dobra ankieta?

Im mniej, tym lepiej. Kropka. Przetestowałem to brutalnie. Wysłałem do swojej bazy mailingowej dwa różne linki. Grupa A dostała ankietę z pięcioma pytaniami. Grupa B dostała kwestionariusz na piętnaście pytań. Obie ankiety dotyczyły tego samego tematu.

Wyniki? Grupa A wygenerowała mi 42% wypełnień. Grupa B? Zaledwie 11%. Co więcej, w tej dłuższej ankiecie jakość odpowiedzi spadała drastycznie po ósmym pytaniu. Ludzie zaczynali klikać byle co. W pytaniach otwartych na końcu wpisywali „ok”, „nie wiem”, albo wstawiali losowe litery, żeby tylko system przepuścił ich dalej.

Teraz trzymam się żelaznej zasady. Pięć pytań zamkniętych i jedno otwarte na koniec. Jeśli potrzebuję wiedzieć więcej, dzielę badanie na dwa mniejsze i wysyłam w różnym czasie. Ludzie nie mają dla Ciebie czasu. Pogódź się z tym.

Jak połączyć dane liczbowe z tekstem od użytkowników?

To jest prawdziwa magia. Zawsze zaczynam od liczb, żeby znaleźć anomalię, a potem nurkuję w tekst, żeby ją wyjaśnić. Opowiem Ci, jak to wygląda w praktyce. Prowadziłem projekt dla firmy sprzedającej oprogramowanie. Zobaczyłem w danych ilościowych, że na jednym konkretnym kroku formularza rejestracyjnego odpada aż 45% użytkowników. Liczby krzyczały: „Tu jest problem!”.

Ale liczby nie mówiły mi, co mam naprawić. Mógłbym zgadywać i zmieniać kolory przycisków przez pół roku. Zamiast tego uruchomiłem na tej konkretnej podstronie króciutką ankietę jakościową. Jedno pole tekstowe, które pojawiało się, gdy użytkownik kierował kursor do zamknięcia karty. Pytanie brzmiało: „Czego Ci teraz zabrakło?”.

Zebrałem 80 odpowiedzi. Prawie połowa z nich brzmiała podobnie: „Nie chcę podawać numeru karty kredytowej przed darmowym testem”. Boom. Zagadka rozwiązana. Usunęliśmy wymóg podawania karty. Konwersja skoczyła o 30%. Ilościówka pokazała mi gdzie szukać. Jakościówka powiedziała mi co zmienić.

Jakich narzędzi używam do analizy wyników?

Przerobiłem dziesiątki aplikacji. Niektóre kosztowały majątek, a działały gorzej niż zwykły notatnik. Obecnie mam swój stały zestaw, który robi robotę i nie wymaga doktoratu z informatyki.

Narzędzie Do czego go używam? Dlaczego je lubię?
Google Forms / Typeform Do zbierania danych. Zwykłe formularze. Są darmowe (lub tanie) i każdy umie je wypełnić bez instrukcji.
Excel / Google Sheets Do czyszczenia danych i robienia tabel przestawnych. Nikt nie wymyślił nic lepszego do szybkiego liczenia procentów i tagowania tekstu.
Hotjar Do ankiet na stronie (pop-upy) i map cieplnych. Łapię ludzi dokładnie w momencie, gdy coś ich irytuje na mojej stronie.
ChatGpt / Claude Do wstępnej analizy tysięcy odpowiedzi otwartych. Oszczędza mi 10 godzin czytania. Proszę AI o wyciągnięcie 5 głównych problemów z pliku.

Dlaczego ludzie kłamią w ankietach internetowych?

No i właśnie dotknęliśmy najciemniejszego sekretu branży badawczej. Ludzie kłamią. Czasami robią to z premedytacją, ale częściej po prostu nieświadomie. Istnieje coś takiego jak błąd pożądania społecznego. Brzmi mądrze, ale mechanizm jest prostacki. Chcemy wypaść lepiej, niż jest w rzeczywistości. Nawet przed anonimowym formularzem.

Kiedyś zapytałem w ankiecie grupę 300 osób o to, jak często czytają książki branżowe. Ponad 70% zaznaczyło opcję „przynajmniej raz w miesiącu”. Rewelacja, naród ekspertów. Dwa tygodnie później, w innej ankiecie skierowanej do tej samej grupy, poprosiłem o wpisanie tytułu ostatnio przeczytanej książki branżowej w pole tekstowe. Prawie 60% zostawiło to pole puste. Reszta wpisywała tytuły sprzed pięciu lat. Liczby wykreowały piękną iluzję, którą tekst brutalnie zniszczył.

Ludzie kłamią też dlatego, że chcą szybko skończyć. Myślisz, że ktoś przeczyta długą instrukcję przed wypełnieniem formularza? Zapomnij. Skrolują, klikają cokolwiek i biegną dalej. Dlatego tak rygorystycznie wyrzucam z bazy wyniki, które zostały wypełnione w podejrzanie krótkim czasie. Jeśli przeczytanie pytań zajmuje minimum dwie minuty, a ktoś wysłał ankietę po piętnastu sekundach, usuwam ten wiersz bez mrugnięcia okiem. To śmieci, które tylko zepsują mi statystykę.

FAQ – najczęstsze pytania o analizę ankiet

Czy muszę znać się na statystyce, żeby analizować ankiety?

Nie potrzebujesz wyższej matematyki do podstawowych badań. Wystarczy, że rozumiesz procenty i wiesz, jak wyciągnąć średnią. Do prostych ankiet konsumenckich na kilkudziesięciu osobach to absolutnie wystarczy. Schody zaczynają się dopiero przy badaniach naukowych na tysiącach osób.

Co zrobić, gdy odpowiedzi otwarte są wulgarne lub złośliwe?

Czytam je podwójnie uważnie. Wulgaryzmy to znak, że trafiłem w czuły punkt. Klient nie przeklina bez powodu. Zazwyczaj pod tą złością kryje się gigantyczny błąd w moim produkcie lub obsłudze. Filtruję emocje i szukam konkretnego zarzutu.

Ile osób musi wypełnić ankietę, żeby wynik był wiarygodny?

W analizie ilościowej celuję minimum w 100-200 odpowiedzi, żeby wykluczyć przypadek. W analizie jakościowej zdarzało mi się zmieniać całą strategię firmy na podstawie dogłębnych rozmów i ankiet z zaledwie 12 użytkownikami. Wszystko zależy od tego, czego szukasz.

Czy mogę mieszać pytania otwarte i zamknięte w jednej ankiecie?

Zdecydowanie tak. To moja ulubiona metoda. Zawsze daję pytanie zamknięte (np. ocena 1-5), a tuż pod nim pole otwarte z prośbą o uzasadnienie wyboru. Dzięki temu od razu łączę twardą daną z kontekstem.

Jak zachęcić ludzi do wypełniania ankiet?

Mówię wprost, ile czasu im to zajmie. Jeśli piszę w mailu „Wypełnij ankietę, to potrwa równe 60 sekund”, mam o połowę więcej kliknięć niż przy ogólnym „Podziel się opinią”. Czasem oferuję mały rabat za pomoc, ale uważam z tym, by nie przyciągnąć łowców okazji, którzy naklikają bzdur dla zniżki.

Dlaczego moje wykresy z ankiet nic mi nie mówią?

Zapewne zadałeś zbyt ogólne pytania. Jeśli pytasz „Czy lubisz nasz sklep?”, odpowiedź „Tak” nie daje Ci żadnej wiedzy o tym, co robić dalej. Zawsze pytaj o konkretne zachowania z przeszłości, a nie o ogólne deklaracje.

Z każdym kolejnym wypuszczonym formularzem uczę się pokory. Kiedyś myślałem, że perfekcyjnie ułożone pytania gwarantują idealne dane. Bzdura. Najwięcej dowiedziałem się o swoim biznesie wtedy, gdy zapomniałem ustawić limitu znaków w pytaniu otwartym i jeden wkurzony klient napisał mi esej na osiemset słów o tym, jak beznadziejnie procesujemy zwroty. Ten jeden facet bez litości zrównał z ziemią moje piękne, zielone wykresy w Excelu, które pokazywały rzekome 90% satysfakcji. Od tamtego dnia przestałem traktować liczby jak wyrocznię. Cyfry są tylko mapą. To słowa ludzi są terenem, po którym stąpasz. A Ty? Kiedy ostatnio sprawdziłeś, czy Twoje ankiety naprawdę zmuszają do myślenia, czy tylko dają Ci iluzję kontroli, w którą tak bardzo chcesz wierzyć?

Udostępnij ten artykuł