Lab kísérletek hez vezérlés, szántóföldi kísérletekben hez realizmus, és a digitális területen kísérletek egyesítik ellenőrzési és realizmus léptékben.
Kísérletek jönnek a különböző formájú és méretű. De annak ellenére, hogy ezek a különbségek, a kutatók megállapították, hogy hasznos szervezni kísérletek egy folytonosság mentén között laboratóriumi kísérleteket és helyszíni kísérletek. Most azonban a kutatók is szervez kísérletek egy folytonosság mentén az analóg és a digitális kísérletek kísérletek. A kétdimenziós tervezési tér segít megérteni a erősségek és gyengeségek a különböző megközelítések és javaslatot tehetnek a legnagyobb lehetőséget (4.1 ábra).
A múltban, a legfontosabb, hogy a kutatók a szervezett kísérletekben mentén laboratóriumi területen dimenzió. A legtöbb kísérlet a társadalomtudományok laboratóriumi kísérletekben, ahol egyetemi hallgatók végre furcsa feladatokat a laborban tanfolyam hitel. Az ilyen típusú vizsgálatok dominál a pszichológiai kutatások, mert lehetővé teszi a kutatók számára, igen specifikus kezelések célja, hogy teszteljék nagyon specifikus elméletek a társadalmi viselkedés. Bizonyos problémák azonban valami úgy érzi, egy kicsit furcsa rajz határozott következtetéseket az emberi viselkedést az ilyen szokatlan végző személyek ilyen szokatlan feladatok ilyen szokatlan környezetben. Ezek az aggodalmak vezettek mozgalom felé szántóföldi kísérletek. A szántóföldi kísérleteket egyesítik a jó design randomizált kontroll kísérletek több reprezentatív csoportok résztvevői, teljesítő több a közös feladatokat, több természetes beállításokat.
Bár néhány ember úgy gondolja, a laboratóriumi és terepi kísérletek konkurens módszerek, a legjobb, ha úgy gondolja, ezek a kiegészítő módszerek más erősségeit és gyengeségeit. Például Correll, Benard, and Paik (2007) egyaránt használható került a laboratóriumi és terepi kísérlet, hogy megpróbálja megtalálni a forrását a "anyaság büntetést." Az Egyesült Államokban, az anyák kevesebbet keresnek pénzt, mint a gyermektelen nők, még akkor is, összehasonlítva a nők hasonló képességek dolgozik hasonló munkakörben. Sok lehetséges magyarázat van erre mintát, és az egyik, hogy a munkaadók elfogult ellen anyák. (Érdekes, hogy az ellenkezője tűnik igaznak az apáknak: hajlamosak többet keresnek, mint hasonló gyermektelen férfiak). Annak érdekében, hogy értékelni a lehetséges elfogultság ellen anyák Correll és kollégái futott két kísérlet: az egyik a laborban, és egy a területen.
Először is, egy laborkísérletet Correll és kollégái azt mondta a résztvevők, akik egyetemi hallgatók, hogy a kaliforniai székhelyű induló kommunikációs cég folytat álláskereső az a személy, hogy vezesse az új keleti parti gazdasági osztály. A diákok azt mondták, hogy a vállalat azt akarták, hogy segítséget a felvételi folyamatot, és arra kérték, hogy vizsgálja felül összefoglalóira több lehetséges jelöltet, és hogy értékeljék a jelölteket a dimenziók száma, mint az intelligenciájuk, melegség, és az elkötelezettség a munka. Továbbá, a diákok is megkérdezték, hogy azt javasolja, bérbeadása a kérelmező, és mit fognak ajánlani, mint egy kezdő fizetés. Számotokra, hogy a diákok, azonban az önéletrajzokat specifikusan kialakítani, hogy hasonló, kivéve egy dolgot: néhány folytatódik jelezte anyaság (felsorolásával részvétel a szülő-tanár egyesület), és néhány nem. Correll megállapította, hogy a hallgatók kevésbé valószínű, hogy javasolja bérbeadása az anyák és biztosítják számukra a kisebb kezdő fizetést. Továbbá, egy statisztikai elemzést mind a minősítési és a bérleti kapcsolatos döntések, Correll megállapította, hogy az anyák hátrányok nagyrészt azzal magyarázható, hogy az anyák voltak eddig alacsonyabb szempontjából kompetencia és elkötelezettség. Más szóval, Correll azt állítja, hogy ezek a vonások a mechanizmus, amelyen keresztül az anyák hátrányos. Így ez a labor kísérlet engedélyezett Correll és kollégái mérésére okozati hatása, és egy lehetséges magyarázata, hogy a hatás.
Persze, lehet, hogy szkeptikus következtetések levonására az egész amerikai munkaerő-piaci alapuló döntések néhány száz egyetemisták, akik valószínűleg soha nem volt egy teljes munkaidős állás, nemhogy állók. Ezért Correll és kollégái is végzett egy kiegészítő mezőt kísérletet. A kutatók reagáltak arra a több száz meghirdetett álláslehetőségek küldött hamis kísérőlevél és folytatja. Hasonlóan az anyag bizonyítottan az egyetemisták, néhány folytatódik jelezte anyaság és néhány nem. Correll és munkatársai azt találták, hogy az anyák voltak kevésbé valószínű, hogy hívják vissza az interjút, mint egyformán képzett gyermektelen nők. Más szóval, a valós munkáltatók így következményes döntéseket a természeti környezetben viselkedett ugyanúgy, mint a hallgatók. Vajon hogy hasonló döntéseket ugyanezen okból? Sajnos, nem tudjuk. A kutatók nem tudták, hogy kérje a munkáltatók, hogy értékelje a jelölt vagy megmagyarázni a döntést.
Ez a két kísérlet sokat elárul laboratóriumi és helyszíni kísérletek általában. Lab kísérletek a kutatók közel teljes ellenőrzést a környezet, amelyben a résztvevők döntéseket. Így például, a laboratóriumi készülékre, Correll volt képes biztosítani, hogy az önéletrajzokat olvastuk, csendes környezetben; A szántóföldi kísérletben néhány folytatódik talán nem is olvasta el. Továbbá, mivel a résztvevők a laborban környezetben tudják, hogy ők is vizsgálták, a kutatók gyakran képesek további adatokat gyűjtsenek, amelyek segíthetnek megérteni, hogy miért a résztvevők hozzák meg döntéseiket. Például Correll kérte a résztvevők a laborkísérletet értékeléshez a jelöltek különböző dimenziók. Ez a fajta eljárás adat segíthet a kutatók a mechanizmusok megértése mögött különbségek hogyan résztvevők kezelni az önéletrajzokat.
Másrészt, ezek a pontosan ugyanazon jellemzőkkel, hogy én csak le, mint előnyöket is néha tekinthető hátrányai. A kutatók, akik inkább szántóföldi kísérletek azt állítják, hogy a résztvevők a laboratóriumi kísérletekben is nagyon különbözően, amikor azokat szoros megfigyelés. Például a laborkísérletet résztvevők sejteni lehetett a cél a kutatás és megváltozott a viselkedésük, hogy ne jelenik meg elfogult. Továbbá, a kutatók, akik inkább szántóföldi kísérletek lehet érvelni, hogy a kis különbségek folytatódik csak kiemelkedik a nagyon tiszta, steril laboratóriumi körülmények között, és így a labor kísérlet túlbecsülik a hatását anyaság valódi munkaerő-felvételi döntéseket. Végül sok hívei szántóföldi kísérletek kritizálni laboratóriumi kísérletek támaszkodás WEIRD résztvevők: elsősorban a diákok a nyugati, művelt, iparosodott, gazdag és demokratikus országok (Henrich, Heine, and Norenzayan 2010) . A kísérletek szerint Correll és munkatársai (2007) bemutatják a két véglet a laboratóriumi területen kontinuum. Ebben a két véglet között van a különböző hibrid pályaművek megközelítések, mint hozza a nem tanulók egy laborban, vagy megy a pályán, de még mindig van a résztvevők végre egy szokatlan feladat.
Amellett, hogy a laboratóriumi területen dimenzió, amely már a múltban, a digitális kor azt jelenti, hogy a kutatók most egy másik jelentős dimenziója mentén, mely kísérleteket változhat: az analóg-digitális. Ahogy vannak tiszta laboratóriumi kísérletekben tiszta szántóföldi kísérletekben, és a különböző hibridek között, vannak tiszta analóg kísérletek, tiszta digitális kísérletek, és a különböző hibridek. Ez trükkös ajánlani formális definíciója ezt a dimenziót, de hasznos munkadefiníciót hogy teljesen digitális kísérletek kísérletek, amelyek élnek a digitális infrastruktúra toborozni résztvevők véletlenszerű, szállít kezelések, és mérjük eredmények. Például Restivo és van de Rijt által (2012) tanulmánya barnstars és a Wikipedia volt teljesen digitális kísérlet mert használják a digitális rendszerek mind a négy ezeket a lépéseket. Hasonlóképpen teljesen analóg kísérleteket kísérleteket, amelyek nem élnek a digitális infrastruktúra bármelyik négy lépést. Sok klasszikus kísérletek pszichológia analóg kísérletek. Ebben a két véglet között van részben digitális kísérletek együttesével az analóg és digitális rendszerek négy lépést.
Kritikusan, a lehetőségeket, hogy fut a digitális kísérletek nem csak az interneten. A kutatók futhat részben digitális kísérletek segítségével a digitális eszközök a fizikai világot, hogy szállít kezelések vagy intézkedés eredményeit. Például, a kutatók is használja az okostelefonok szállít kezelések vagy érzékelőkkel az épített környezetben mérhető eredményeket. Sőt, amint azt később látni fogjuk ebben a fejezetben, a kutatók már használt háztartási elektromos méter mérésére eredmények kísérletekben a társadalmi normák és az energiafogyasztás járó 8,5 millió háztartás (Allcott 2015) . A digitális eszközök egyre inkább integrálódott az emberek életét és érzékelők beilleszkedésre az épített környezet, ezek a lehetőségek futtatni részben digitális kísérletek a fizikai világban nagymértékben növelni. Más szóval, a digitális kísérletek nem csak az online kísérletek.
Digitális rendszerek új lehetőségeket kísérletek mindenütt végig a laboratóriumi területen kontinuum. Tiszta laboratóriumi kísérletekben például a kutatók használhatják a digitális rendszerek finomabb mérésére résztvevők viselkedésének; Egy példa az ilyen típusú továbbfejlesztett mérési szemkövetési berendezés, amely pontos és folyamatos intézkedések tekintetét helyen. A digitális korban is megteremti a lehetőséget, hogy futni laboratóriumi kísérletek, mint az interneten. Például, a kutatók gyorsan elfogadta Amazon Mechanical Turk (MTurk) toborozni résztvevők online kísérlet (4.2 ábra). MTurk mérkőzések "munkaadók", akik feladatokat, amelyeket ki kell egészíteni a "dolgozók", akik szeretnék befejezni ezeket a feladatokat arány. Szemben a hagyományos munkaerőpiac azonban a feladatokat általában csak pár percet, és az egész közötti kölcsönhatás a munkáltató és munkavállaló virtuális. Mivel MTurk utánozza szempontjai hagyományos laboratóriumi kísérletek fizető emberek a feladatok elvégzésére, hogy nem tennék szabad természetes körülmények között alkalmas bizonyos típusú kísérletek. Lényegében MTurk megteremtette az infrastruktúrát kezelő medence résztvevők-toborzás és a kifizető emberek és kutatók kihasználták, hogy az infrastruktúra, hogy bekapcsolódjanak egy mindig elérhető medence résztvevők.
Digitális kísérletek még több lehetőséget mezőszerű kísérletek. Digitális szántóföldi kísérletek kínál szoros ellenőrzés és feldolgozza az adatokat, hogy megértsék lehetséges mechanizmusok (például laboratóriumi kísérletek) és változatosabb résztvevők így valódi döntéseket a természeti környezet (például szabadföldi kísérletek). Amellett, hogy ez a kombináció a jó tulajdonságait a korábbi kísérleteket, digitális szántóföldi kísérletek is kínálnak a három lehetőséget, hogy nehéz volt az analóg laboratóriumi és szántóföldi kísérletek.
Először is, mivel a legtöbb analóg laboratóriumi és szántóföldi kísérletek több száz résztvevő, digitális területen kísérletek több millió résztvevővel. Ez a változás a skála, mert néhány digitális kísérletek adatokat produkál nulla változó költség. Azaz, ha a kutatók hoztak létre kísérleti infrastruktúra, egyre nagyobb a résztvevők száma általában nem növeli a költségeket. Növelése a résztvevők száma szorzóval 100 vagy több nem csupán mennyiségi változás, ez egy minőségi változást, mert lehetővé teszi a kutatók számára, hogy megtanulják a különböző dolgokat kísérletek (pl heterogenitása kezelés hatása), és fuss egészen más kísérleti elrendezések ( pl nagy csoport kísérlet). Ez a pont annyira fontos, én visszatér a vége felé a fejezet, amikor tanácsot adnak digitalis kísérletek.
Másodszor, mivel a legtöbb analóg laboratóriumi és szántóföldi kísérletek kezelésére résztvevők megkülönböztethetetlen kütyü, digitális szántóföldi kísérletekben gyakran háttér-információt a résztvevők a tervezési és elemzési szakaszában a kutatás. Ez a háttér információt, amely az úgynevezett előkezelés információ, gyakran elérhető digitális kísérleteket, mert zajlik teljesen mért környezetben. Például egy kutatója Facebook sokkal előkezelés információt, mint egy kutató tervezése szokásos laboratóriumi kísérletet egyetemisták. Ez a kezelés előtti információ lehetővé teszi a kutatók számára, hogy túllépjünk kezelésére résztvevők megkülönböztethetetlen kütyü. Pontosabban, a kezelés előtti információ lehetővé teszi a hatékonyabb kísérleti tervek-, mint blokkoló (Higgins, Sävje, and Sekhon 2016) , valamint a célzott résztvevők toborzása (Eckles, Kizilcec, and Bakshy 2016) -és szemléletesebben analízis, mint a becslés heterogenitás a kezelés hatása (Athey and Imbens 2016a) és kovariáns beállítási pontosság növeléséhez (Bloniarz et al. 2016) .
Harmadszor, mivel sok analóg laboratóriumi és szántóföldi kísérletek szállít kezelések és intézkedés eredmények viszonylag sűrített időt, néhány digitális területen kísérleteim során kezeléseket lehet szállítani az időben és a hatást is mérni idővel. Például Restivo és van de Rijt a kísérletben az eredmény mért napi 90 napig, és az egyik kísérlet elmondom neked később a fejezetben (Ferraro, Miranda, and Price 2011) pályák eredmények több mint 3 éven át gyakorlatilag nincs költség. Ez a három lehetőség méretű, előkezelés információt, és a hosszanti kezelése és kimenetele adat a leggyakoribb, amikor kísérletek futtatását always-on mért rendszer (lásd a 2. fejezetben bővebben mindig bekapcsolt mérőrendszerek).
Amíg a digitális szántóföldi kísérletek sok lehetőséget, ők is osztoznak bizonyos hiányosságokat mind analóg laboratóriumi és helyszíni kísérletek. Például kísérletek nem lehet használni, hogy tanulmányozza a múltban, és ők is csak becsülni hatásainak kezelések, hogy lehet manipulálni. Továbbá, bár a kísérletek kétségtelenül hasznos a szakpolitikai, pontos útmutatást tudnak nyújtani némileg korlátozott, mert a szövődmények, mint a környezeti függőség, megfelelőségi problémák, és az egyensúlyi hatások (Banerjee and Duflo 2009; Deaton 2010) . Végül digitális területen kísérletek magasztalja az etikai aggályokat által létrehozott szántóföldi kísérletek. Hívei szántóföldi kísérletek trombita képesek észrevétlenül és véletlenszerűen beavatkozni következményes döntéseit emberek millióinak. Ezek a funkciók kínálnak bizonyos tudományos előnyei, de ők is, hogy szabadföldi kísérletek etikai komplex (gondolok rá, mint a kutatók emberek gyógyításában, mint a "laboratóriumi patkányok" tömegesen). Továbbá amellett, hogy lehetséges ártalmak a résztvevőknek, digitális területen kísérletek miatt skála is aggályaikat a zavar a munka társadalmi rendszerek (pl aggodalmak romboló Wikipédia jutalmazási rendszer, ha Restivo és van der Rijt adott túl sok barnstars) .