3.5.2 ankete Wiki

Wiki ankete omogućiti nove hibride zatvorenih i otvorenih pitanja.

Uz postavljanje pitanja u više prirodnih vremena iu prirodnijim kontekstima, nova tehnologija omogućuje nam i promjenu oblika pitanja. Većina upitnih pitanja zatvorena je, a ispitanici su odabrali s fiksnim skupom izbora koje su napisali istraživači. Ovo je proces koji jedan istaknuti istraživač istraživača naziva "stavljanje riječi u ljudska usta". Na primjer, ovdje je zatvoreno pitanje ankete:

"Ovo drugo pitanje je na temu rada. Molim Vas, pogledajte ovu karticu i recite mi koja bi stvar na ovom popisu koju biste najviše voljeli u poslu?

1. Visoki prihod
2. Nema opasnosti od pucanja
3. Radno vrijeme je kratko, puno slobodnog vremena
4. Šanse za napredovanje
5. Rad je važan i daje osjećaj uspjeha. "

Ali jesu li ti jedini mogući odgovori? Mogu li istraživači propustiti nešto važno ograničavajući odgovore na ove pet? Alternativa zatvorenim pitanjima je otvoreno pitanje ankete. Evo isto pitanje postavljeno u otvorenom obliku:

"Ovo slijedi pitanje je na temu rada. Ljudi traže različite stvari u poslu. Što bi vas najviše vole u poslu? "

Iako ta dva pitanja izgledaju sasvim slična, eksperiment istraživanja Howarda Schumana i Stanleya Presser (1979) pokazali su da mogu proizvesti vrlo različite rezultate: gotovo 60% odgovora na otvoreno pitanje nisu uključeni u pet odgovora stvorenih istraživačima ( slika 3.9).

Slika 3.9: Rezultati eksperimenta koji pokazuju da odgovori mogu ovisiti o tome postavlja li se pitanje u zatvorenom ili otvorenom obliku. Prilagođena od Schuman and Presser (1979) , tablica 1.

Iako otvorena i zatvorena pitanja mogu donijeti sasvim različite informacije i oboje su bili popularni u ranim danima ankete istraživanja, zatvorena pitanja su došli da dominiraju polju. Ova dominacija nije zato što se dokazano da su zatvorena pitanja pružila bolje mjerenje, već zato što su mnogo lakše koristiti; proces analize otvorenih pitanja je sklon pogreškama i skupo. Odstupanje od otvorenih pitanja nesretno je jer upravo informacije koje istraživači nisu znali prije vremena mogu biti najvrjedniji.

Međutim, prijelaz iz ljudskog podučavanja na računalno upravljane ankete, predlaže novi put iz ovog starog problema. Što ako sada imamo pitanja ankete koja kombiniraju najbolje značajke otvorenih i zatvorenih pitanja? To jest, što ako imamo anketu koja je otvorena za nove informacije i proizvodi odgovore koji se lako mogu analizirati? To je upravo ono što smo Karen Levy i ja (2015) pokušali stvoriti.

Konkretno, Karen i ja mislili smo da web lokacije koje prikupljaju i obrađuju sadržaj koji je stvorio korisnik mogu biti u stanju informirati dizajn novih vrsta anketa. Posebno smo bili inspirirani Wikipedijom - prekrasnim primjerom otvorenog, dinamičnog sustava upravljanog od strane korisnika koji je generirao sadržaj - pa smo našem novom istraživanju nazvali wiki istraživanje . Baš kao što je Wikipedija razvija tijekom vremena se temelji na idejama njegovih sudionika, zamislili smo anketu koja razvija tijekom vremena temelji se na idejama njegovih sudionika. Karen i ja razvili smo tri svojstva koja bi trebala zadovoljiti wiki ankete: oni bi trebali biti pohlepni, suradnički i prilagodljivi. Zatim smo s timom programera web stranice izradili web stranicu koja bi mogla pokrenuti anketu wiki: www.allourideas.org .

Postupak prikupljanja podataka u wiki istraživanju ilustrira projekt koji smo učinili s Uredom gradonačelnika New Yorka kako bismo integrirali ideje stanovnika u PlaNYC 2030, plan gradske održivosti New Yorka. Kako bi započeli proces, gradonačelnik je izradio popis od 25 ideja temeljenih na njihovom prijašnjem pristupu (npr. "Zahtijevaj sve velike zgrade da bi se unaprijedile energetske učinkovitosti" i "Učite djecu o zelenim problemima kao dio školskog programa"). Koristeći ove 25 ideje kao sjeme, gradonačelnik je postavio pitanje "Što mislite da je bolja ideja za stvaranje zelenije, veće New Yorka?" Ispitanici su predstavljeni parom ideja (npr. "Otvorite školske objekte diljem grada kao javna igrališta "i" Povećanje ciljane sadnje stabala u susjedstvu s visokim stopama astme "), a zamoljeni su da izaberu između njih (slika 3.10). Nakon odabira, ispitanici su odmah predstavljeni s još jednim slučajno odabranim parom ideja. Oni su bili u mogućnosti nastaviti prenositi informacije o njihovim željama sve dok su željeli glasovanjem ili odabirom "Ne mogu odlučiti". Odlučujuće, u bilo kojem trenutku, ispitanici su mogli doprinijeti vlastitim idejama koje - Ured gradonačelnika - postao je dio zbirke ideja koje će se predstaviti drugima. Dakle, pitanja koja su sudionici primili bili su istodobno otvoreni i zatvoreni.

Slika 3.10: Sučelje za wiki istraživanje. Panel (a) prikazuje zaslon odgovora i ploča (b) prikazuje zaslon s rezultatima. Reprodukirano dopuštenjem Salganik and Levy (2015) , slika 2.

Ured gradonačelnika pokrenuo je svoje istraživanje o wiki u listopadu 2010. u kombinaciji s nizom zajedničkih sastanaka kako bi dobili povratnu informaciju od stanovnika. Tijekom približno četiri mjeseca, 1.436 ispitanika pridonijelo je 31.893 odgovora i 464 novih ideja. Kritično, 8 od 10 najboljih ideja za bodovanje prenijeli su sudionici umjesto da su dio skupa ideja sjemena iz gradonačelnika. I, kao što opisujemo u našem radu, isti obrazac, s prenesenim idejama koje ocjenjuju bolje od ideja o sjemenu, događa se u mnogim anketama wiki. Drugim riječima, budući da su otvoreni za nove informacije, istraživači su u stanju naučiti stvari koje bi propustili korištenjem zatvorenijih pristupa.

Osim rezultata tih specifičnih anketa, naš projekt wiki istraživanja također ilustrira kako struktura troškova digitalnog istraživanja znači da se istraživači sada mogu baviti svijetom na nešto drugačiji način. Akademski istraživači sada mogu izgraditi stvarne sustave koje mogu koristiti mnogi ljudi: imamo domaćin više od 10.000 anketa na wiki i prikupili smo više od 15 milijuna odgovora. Ta sposobnost stvaranja nečega što se može upotrijebiti na ljestvici proizlazi iz činjenice da kada je web stranica izgrađena, ona u osnovi ne košta da bi ona bila slobodno dostupna svima u svijetu (naravno, to ne bi bilo istinito ako bismo imali ljudske - dodijeljeni intervjui). Nadalje, ova skala omogućuje različite vrste istraživanja. Na primjer, ovi 15 milijuna odgovora, kao i naš tok sudionika, pružaju vrijednu probnu verziju za buduća metodološka istraživanja. Opisujem više o drugim istraživačkim mogućnostima koje stvaraju strukture digitalnih dobnih troškova - osobito nula varijabilnih podataka o troškovima - kada razgovaram o pokusima u poglavlju 4.