4.5.1.2 Construieste - ti propriul experiment

Construirea propriului experiment ar putea fi costisitoare, dar vă va permite să creați experimentul pe care îl doriți.

In plus fata de suprapunând experimente pe partea de sus a mediilor existente, puteți construi, de asemenea, propriul experiment. Principalul avantaj al acestei abordări este de control; dacă sunteți construirea experimentului, vă puteți crea mediul și tratamentele pe care le doriți. Aceste medii experimentale personalizate pot crea oportunități de a testa teorii care sunt imposibil de a testa în medii care apar în mod natural. Principalele dezavantaje ale construirii propriului dvs. experiment sunt că poate fi costisitoare și că mediul pe care sunt capabili de a crea nu s-ar putea avea realismul unui sistem în mod natural. Cercetatorii au construiesc propriul experiment, de asemenea, trebuie să aibă o strategie de recrutare a participanților. Atunci când se lucrează în sistemele existente, cercetătorii aduc, în esență, experimentele participanților acestora. Dar atunci cand cercetatorii construi propriul lor experiment, ei au nevoie să aducă participanților să-l. Din fericire, servicii, cum ar fi Amazon Mechanical Turk (MTurk) poate oferi cercetatorilor un mod convenabil de a aduce participanților la experimentele lor.

Un exemplu care ilustrează virtuțile mediilor personalizate pentru testarea teorii abstracte este experimentul laborator digital de Gregory Huber, Seth Hill, Gabriel Lenz (2012) . Experimentul explorează o posibilă limitare practică a funcționării guvernării democratice. Studiile anterioare non-experimentale ale alegerilor actuale sugerează că alegătorii nu sunt în măsură să evalueze cu exactitate performanța politicienilor tradiționali. În special, alegătorii par să sufere de trei prejudecăți: 1) sa axat pe recente, mai degrabă decât performanța cumulativă; 2) manipulabili de retorică, încadrare și de marketing; și 3) influențate de evenimente care nu au legătură cu performanța care îi revin, cum ar fi succesul echipei locale de sport și de vreme. În aceste studii anterioare, cu toate acestea, a fost greu să se izoleze oricare dintre acești factori, de la toate celelalte lucruri care se întâmplă în alegeri reale, murdar. Prin urmare, Huber si colegii sai au creat un mediu de vot extrem de simplificat pentru a izola și apoi de studiu experimental, fiecare dintre aceste trei prejudecăți posibile.

Așa cum am descrie experimental, mai jos, acesta va suna foarte artificială, dar amintiți-vă că realismul nu este un scop în experimente stil de laborator. Mai degrabă, scopul este de a izola în mod clar procesul pe care încearcă să studieze, iar această izolare etanșă uneori nu este posibilă în studiile cu mai mult realism (Falk and Heckman 2009) . În plus, în acest caz particular, cercetătorii au afirmat că, dacă alegătorii nu se pot evalua în mod eficient performanța în această setare extrem de simplificată, atunci ei nu vor fi în stare să o facă într-un cadru mai realist, mai complexe.

Huber si colegii sai au folosit pe Amazon Mechanical Turk (MTurk) pentru a recruta participanți. Odată ce un participant la dat consimțământul în cunoștință de cauză și a trecut un test scurt, i sa spus că ea a participat la o rundă de joc pentru a câștiga 32 jetoane care ar putea fi convertite în bani reali. La începutul jocului, fiecare participant a fost spus că a fost repartizat un "repartitor" care ar da token-uri ei liber fiecare rundă și că unele au fost mai generoase repartitoarelor decât altele. În plus, fiecare participant a fost, de asemenea, a spus că va avea o șansă de a păstra fie repartitor ei sau trebuie să primească o nouă după 16 runde de joc. Avand in vedere ceea ce stiti despre Huber si obiectivele de cercetare colegilor, puteți vedea că repartitorul reprezintă un guvern și această alegere reprezintă o alegere, dar participanții nu au fost conștienți de obiectivele generale ale cercetării. In total, Huber si colegii sai au recrutat aproximativ 4.000 de participanti, care au plătit aproximativ 1,25 $ pentru o sarcină care a luat aproximativ 8 minute.

Să ne amintim că una dintre concluziile din studiile anterioare a fost că alegătorii recompensa și de a pedepsi furnizorii tradiționali pentru rezultate, care sunt în mod clar în afara controlului lor, cum ar fi succesul echipelor sportive locale și de vreme. Pentru a evalua dacă deciziile participanților la vot ar putea fi influențate de evenimentele pur aleatorii în stabilirea lor, Huber si colegii sai au adaugat o loterie la sistemul lor experimental. La fiecare runda a 8 sau a etapei a 16 (de exemplu, chiar înainte de șansa de a înlocui repartitorului) participanții au fost plasate la întâmplare într-o loterie în cazul în care unele câștigat 5000 de puncte, unele câștigate 0 puncte, iar unele au pierdut 5000 de puncte. Această loterie a fost destinat pentru a imita o veste bună sau rea, care este independent de performanța politicianului. Chiar dacă participanții s-au spus în mod explicit că loterie nu are legătură cu performanța alocator lor, rezultatul loteriei încă afectat deciziile participanților. Participanții care au beneficiat de loterie au mai multe sanse de a pastra alocator lor, iar acest efect a fost mai puternic atunci când loterie a avut loc în runda 16-dreapta înainte de înlocuire de decizie decât atunci când sa întâmplat în runda 8 (Figura 4.14). Aceste rezultate, impreuna cu rezultatele mai multor alte experimente din hartie, a condus Huber si colegii sai pentru a concluziona că , chiar și într - un cadru simplificat, alegătorii au dificultăți în a lua decizii înțelepte, un rezultat care a afectat cercetarea viitoare cu privire la procesul de luare a deciziilor la vot (Healy and Malhotra 2013) . Experimentul de Huber și colegii arată că MTurk pot fi folosite pentru a recruta participanți pentru experimente de tip laborator pentru a testa exact teorii specifice. Ea arată, de asemenea, valoarea de a construi propriul mediu experimental: este greu de imaginat modul in care aceste procese aceleași ar fi putut fi izolate atât de curat în orice altă setare.

Figura 4.14: Rezultatele de la Huber, Hill, și Lenz (2012). Participanții care au beneficiat de loterie au fost mai probabil să-și păstreze alocator lor, iar acest efect a fost mai puternic atunci când loterie a avut loc în runda 16-dreapta înainte de înlocuire de decizie decât atunci când sa întâmplat în runda 8.

Figura 4.14: Rezultatele de la Huber, Hill, and Lenz (2012) . Participanții care au beneficiat de loterie au fost mai probabil să-și păstreze alocator lor, iar acest efect a fost mai puternic atunci când loterie a avut loc în runda 16-dreapta înainte de înlocuire de decizie decât atunci când sa întâmplat în runda 8.

În plus față de construirea experimente de laborator cum ar fi, cercetatorii pot construi, de asemenea experimente, care sunt mai mult domeniu cum ar fi. De exemplu, Centola (2010) a construit un experiment pe teren digital pentru a studia efectul structurii rețelei sociale asupra răspândirii comportamentului. Întrebarea lui de cercetare i-au cerut să respecte același comportament răspândire în populații care au avut diferite structuri de rețele sociale, dar au fost altfel imposibil de distins. Singura modalitate de a face acest lucru a fost cu un personalizat, experiment construit la comandă. În acest caz, Centola a construit o comunitate de sanatate bazate pe web.

Centola a recrutat aproximativ 1500 de participanti cu publicitatea pe site-urile de sanatate. Atunci când participanții au sosit la comunitatea-care a on-line a fost numit Stil de viață sănătos Rețeaua-au cu condiția consimțământului informat și apoi au fost atribuite "amici de sănătate." Din cauza modului Centola atribuite acestor amici de sănătate a fost capabil de a lega împreună diferite structuri de rețele sociale în diferite grupuri. Anumite grupuri au fost construite pentru a avea retele aleatoare (în cazul în care toată lumea a fost la fel de probabil să fie conectate) și alte grupuri au fost construite pentru a avea rețele de clustere (în cazul în care conexiunile sunt mai dense pe plan local). Apoi, Centola a introdus un nou comportament în fiecare rețea, șansa de a înregistra un nou site cu informații suplimentare de sănătate. Ori de câte ori cineva a semnat pentru acest site nou, toți prietenii ei de sanatate a primit un e-mail care anunță acest comportament. Centola a constatat că acest comportament de înscriere-up pentru nou-site-ul răspândit mai departe și mai rapid în rețeaua de cluster decât rețeaua aleatoare, o constatare care a fost contrar unor teorii existente.

În general, construirea propriul dvs. experiment vă oferă mult mai mult control; aceasta vă permite să construiască cel mai bun mediu posibil pentru a izola ceea ce vrei să studiezi. Este greu de imaginat cum oricare dintre aceste experimente ar fi putut fi efectuate într-un mediu deja existent. În plus, construirea propriul sistem scade probleme de natură etică în jurul experimentarea în sistemele existente. Când vă construiți propriul experiment, cu toate acestea, executați în multe dintre problemele cu care sunt întâlnite în experimente de laborator: recrutarea participanților și preocupările legate de realism. Un dezavantaj final este că construirea propriul dvs. experiment poate fi costisitoare și consumatoare de timp, deși , așa cum demonstrează aceste exemple, experimentele pot varia de la medii relativ simple (cum ar fi studiul de vot de către Huber, Hill, and Lenz (2012) ) la relativ medii complexe (cum ar fi studiul rețelelor și contagiune prin Centola (2010) ).