Zainspirowani Wikipedią, naukowcy społeczni wprowadzają rewolucję w ankietach internetowych

Zbieranie danych o ludzkich preferencjach i działaniach jest chlebem powszednim wielu badań w naukach społecznych. Ale jak najlepiej zebrać te dane, od dawna jest przedmiotem zażartej debaty.

Socjolodzy mają zasadniczo dwie możliwości. Z jednej strony istnieją badania opinii publicznej oparte na zestawie pytań wielokrotnego wyboru, tzw. podejście zamknięte. Z drugiej strony, istnieją podejścia otwarte w formie wywiadów, w których respondenci mogą swobodnie wyrażać swoje zdanie. Każda metoda ma oczywiście ważne zalety i wady.

Dziś Matthew Salganik z Princeton University w New Jersey i Karen Levy z New York University zarysowują zupełnie nowy sposób gromadzenia danych inspirowany nową generacją systemów agregacji informacji, takich jak Wikipedia. Podobnie jak Wikipedia ewoluuje z biegiem czasu w oparciu o wkład uczestników, wyobrażamy sobie ewoluującą ankietę opartą na wkładach respondentów, mówią.

Mówią, że nowe podejście może dostarczyć spostrzeżeń, które byłyby trudne do uzyskania innymi metodami. Ale stanowi również wyzwanie dla socjologów, zwłaszcza jeśli chodzi o analizę zebranych w ten sposób danych.

Projekty takie jak Wikipedia są wynikiem treści generowanych przez użytkowników na masową skalę. Pytanie, które zadają Salganik i Levy, brzmi, czy ankiety mogą być również konstruowane przez samych respondentów, przynajmniej częściowo.

Aby się tego dowiedzieć, ci faceci opracowali nowy rodzaj mechanizmu zbierania danych, który nazywają ankietą wiki. Rozpoczyna się to od zestawu pytań początkowych, ale pozwala respondentom dodawać własne pytania w miarę trwania ankiety.

Ta ankieta wiki ma szczególną formę, w której respondenci są proszeni o wybranie jednej z dwóch opcji: na przykład czy wolą pozycję A czy pozycję B. Ale co najważniejsze, mogą również dodać nowy przedmiot, który zostanie zaprezentowany przyszłym uczestnikom. W miarę upływu czasu liczba pozycji do wyboru rośnie, ponieważ respondenci proponują własne pomysły.

Ten rodzaj badania parami ma wiele zalet. Salganik i Levy podkreślają, że ten format pozwala uczestnikom odpowiedzieć na tyle wyborów, ile chcą. Nazywają to chciwością własności.

Ten rodzaj ankiety pozwala również respondentom na dodawanie nowych elementów, kiedy tylko zechcą, dzięki czemu jest wyjątkowo oparty na współpracy. Wreszcie, pary prezentowane nowym uczestnikom mogą być wybrane w sposób maksymalizujący uczenie się na podstawie wcześniejszych odpowiedzi, tak aby ankieta wiki mogła się dostosowywać w miarę jej rozwoju.

Aby przetestować pomysł, Salganik i Levy stworzyli darmową stronę internetową o nazwie www.allourideas.org na którym każdy może utworzyć ankietę wiki w parach i zebrać respondentów z grupy docelowej, która jest zachęcana do udziału. Od 2010 r. ta witryna zawierała około 5000 ankiet typu wiki w parach, które obejmowały 200 000 elementów i zebrały 5 milionów odpowiedzi.

Salganik i Levy szczegółowo omawiają przykład badania przeprowadzonego przez Biuro Planowania Długoterminowego i Zrównoważonego Rozwoju prowadzonego przez burmistrza Nowego Jorku. Organizacja ta chciała zrozumieć pomysły mieszkańców dotyczące planu zrównoważonego rozwoju miasta i zintegrować wszelkie nowe myśli.

Biuro Burmistrza zaczęło od listy 25 elementów źródłowych, które poproszono o porównanie w parach, jednocześnie zachęcając uczestników do dodawania własnych pomysłów. Na przykład, ludzie zostali poproszeni o wybór między otwartymi dziedzińcami szkolnymi w całym mieście jako publicznymi placami zabaw a zwiększeniem nasadzeń drzew w dzielnicach o wysokim wskaźniku astmy.

W ciągu czterech miesięcy 1436 respondentów wniosło do ankiety ponad 30 000 odpowiedzi i 464 nowe pomysły. Pod koniec ankiety osiem z dziesięciu najwyżej punktowanych pomysłów zostało wniesionych przez samych respondentów.

Obejmowały one pomysły, które prawdopodobnie nie zostałyby zrealizowane za pomocą innych metod gromadzenia danych, takich jak Utrzymywanie wody pitnej w Nowym Jorku w czystości poprzez zakaz szczelinowania w zlewni Nowego Jorku oraz Podłączanie statków do sieci elektrycznej, aby nie pozostawały bezczynne w porcie, co zmniejsza emisje o wartości odpowiadającej 12 000 samochodów na statek.

Salganik i Levy szybko zwracają uwagę, że ich metoda wymaga dalszych badań.

W szczególności muszą lepiej zrozumieć spójność i trafność generowanych przez siebie odpowiedzi. Można to zrobić, porównując wyniki z wynikami zebranymi za pomocą innych form gromadzenia danych.

Co więcej, analizowanie danych z ankiet w parach wiki jest nadal czymś w rodzaju eksperymentu statystycznego. I stanowią wyzwanie dla społeczności statystycznej, aby znaleźć najskuteczniejsze sposoby wydobywania informacji z tego rodzaju procesu.

To interesujące nowe podejście, które umożliwia zbieranie danych, które trudno byłoby uzyskać innymi metodami. W szczególności umożliwia zbieranie danych w sposób, który odzwierciedla dobrze znany długoterminowy rozkład płatników.

Na przykład w Wikipedii większość informacji jest wyczuwana przez niewielką część redaktorów. Gdyby Wikipedia zezwoliła na 10 i tylko 10 zmian na redaktora — podobnie jak w ankiecie, która wymaga od respondentów wypełnienia tylko jednego formularza — wykluczyłoby to około 95% wprowadzonych zmian, mówią Salganik i Levy.

Oczywiście tego rodzaju stronniczość należy uwzględnić, jeśli chodzi o analizę danych. I na tym polega poważne wyzwanie. Czas na zajęcie się statystykami.

Nr ref.: arxiv.org/abs/1202.0500 Ankiety Wiki: Otwarte i wymierne gromadzenie danych społecznościowych

ukryć