Go to our global site (EN/PL)
W poszukiwaniu nowych metod poprawy jakości prób
2010-08-23
„Innowacyjne metody poprawy jakości badań prowadzonych przez internet” to nazwa projektu realizowanego przez firmę badawczą Gemius SA w ramach przedsięwzięcia „IniTech”. Celem prac, dofinansowywanych przez Narodowe Centrum Badań i Rozwoju, jest stworzenie nowych rozwiązań poprawiających jakość prób zbieranych w badaniach online.
Zdefiniowanie czynników skłaniających respondentów do wypełniania ankiet badawczych, porównanie metod redukcji skrzywienia zebranych prób oraz opracowanie nowych rozwiązań poprawiających ich jakość – to główne cele przedsięwzięcia. O znaczeniu odpowiedniego doboru próby w procesie badawczym mówi Marek Młodożeniec, konsultant w Dziale Metodologii Gemius SA:
Aby dowiedzieć się, co Polacy pamiętają z czytanych w szkole Trenów Kochanowskiego, nie można pytać o to tylko studentów przechodzących korytarzem wydziału polonistyki. Nie miałoby też sensu najbardziej nawet gruntowne przepytanie z Kochanowskiego wszystkich szoferów, kominiarzy lub przedstawicieli władz lokalnych, choćby łącznie było ich bardzo wielu.
Bardziej rozsądne byłoby już zapytanie o znajomość Trenów co piątą spośród osób, których nazwisko zaczyna się na „f”, a numer PESEL kończy na „37”. Aby bowiem powiedzieć coś pewnego o szerszej grupie (populacji), należy starannie wybrać z niej podgrupę (próbę), niekoniecznie bardzo liczną, ale za to w taki sposób, by warunek zaliczenia do próby nie wiązał się z badanym zjawiskiem. Daje to gwarancję kontroli nad wielkością tzw. błędu statystycznego, który jest popełniany przy wnioskowaniu z próby o populacji. Ponieważ zazwyczaj nie wszyscy „wybrańcy” są osiągalni i chcą brać udział w ankietach, trzeba też później skorygować zebrane dane, posługując się wiedzą o tym, jakie każda osoba miała szanse, by wziąć udział w badaniu. Te szanse są również wyrównywane podczas realizacji badania. To wszystko wymaga wiedzy i doświadczenia, które stale gromadzimy i wykorzystujemy w projekcie IniTech.
Po ośmiu miesiącach wytężonej pracy nad projektem, którego zakończenie zaplanowano na październik 2010 roku, Gemius prezentuje pierwsze wnioski. Udoskonalono sposób ważenia danych. Stosowany wcześniej mechanizm ważenia był zależny od błędów losowych w próbie określającej strukturę demograficzną. Często prowadził do przypisania wag skrajnie niskich, powodujących zmniejszenie efektywnej liczebności prób po zważeniu, lub bardzo wysokich, co z kolei rodziło ryzyko niestabilności wyników. Po serii testów zaproponowano nową metodę – stabilną oraz zdolną skutecznie niwelować skrzywienie próby.
Zdefiniowano również zestaw cech wpływających na szanse wypełnienia ankiety badawczej, dzięki czemu możliwe będzie opracowanie nowych standardów konstrukcji kwestionariuszy. Określono które cechy respondentów mają istotne znaczenie dla budowy wagi w badaniach online. Wykazano również skuteczność metod ważenia, które opierają się na deklaracjach respondentów co do częstotliwości oraz chęci brania udziału w badanich online.
Przed metodologami z Gemius jest jeszcze sporo pracy. Podjęte działania stanowią podstawę do budowy modeli Propensity Score Weighting i innych algorytmów ważenia niestratyfikacyjnego. W planach mają również zaproponowanie innych niż ważenie metod poprawy jakości próby – optymalizację sposobu zadawania i wyświetlania pytań w ankiecie internetowej oraz dostosowanie schematu emisji zaproszeń do badań tak, aby zawczasu niwelować skrzywienie prób.
Pobierz komunikat w formacie DOC
Kontakt prasowy:
Aleksandra Teodorczyk - aleksandra.teodorczyk@gemius.pl