4.6.1 Oħloq żero data tan-nefqiet varjabbli

Iċ-ċavetta għal tmexxija esperimenti kbar qed isuq ispejjeż varjabbli tiegħek għal żero. L-aħjar modi biex tagħmel dan huma awtomazzjoni u t-tfassil esperimenti pjaċevoli.

esperimenti diġitali jista 'jkollhom strutturi ta' spejjeż b'mod drammatiku differenti u dan jippermetti r-riċerkaturi biex imexxu esperimenti li kienu impossibbli fil-passat. B'mod aktar speċifiku, esperimenti ġeneralment għandhom żewġ tipi ewlenin ta 'spejjeż:. Spejjeż fissi u spejjeż varjabbli spejjeż fissi huma spejjeż li ma jbiddlux jiddependi fuq kemm il-parteċipanti għandek. Per eżempju, f'esperiment laboratorju, spejjeż fissi jista 'jkun l-ispiża ta' kiri tal-ispazju u xiri ta 'għamara. Spejjeż varjabbli, min-naħa l-oħra, it-tibdil jiddependi fuq kemm il-parteċipanti għandek. Per eżempju, f'esperiment laboratorju, spejjeż varjabbli jistgħu jiġu minn ħlas persunal u l-parteċipanti. B'mod ġenerali, esperimenti Analog għandhom spejjeż baxxi fissi u spejjeż varjabbli għoljin, u esperimenti diġitali għandhom spejjeż għoljin fissi u spejjeż varjabbli baxxi (Figura 4.18). Bil-disinn xieraq, inti tista 'ssuq l-ispiża varjabbli ta' esperiment tiegħek it-triq kollha għal żero, u dan jista 'joħloq opportunitajiet ta' riċerka eċċitanti.

Figura 4.18: Skematika ta 'strutturi ta' spejjeż fil analoga u esperimenti diġitali. B'mod ġenerali, esperimenti Analog għandhom spejjeż baxxi fissi u spejjeż varjabbli għoljin billi esperimenti diġitali għandhom spejjeż għoljin fissi u spejjeż varjabbli baxxi. L-istrutturi ta 'spejjeż differenti jfissru li l-esperimenti diġitali tista' taħdem fuq skala dan ma jkunx possibbli bl-esperimenti Analog.

Hemm żewġ elementi ewlenin ta 'varjabbli spejjeż ħlasijiet għall-istaff u l-ħlasijiet lill-parteċipanti minn u kull wieħed minn dawn jistgħu jiġu misjuqa lejn iż-żero jużaw strateġiji differenti. Ħlasijiet lill-persunal zokk mix-xogħol li l-assistenti riċerka do reklutaġġ parteċipanti, twassil trattamenti, u r-riżultati tal-kejl. Per eżempju, l-esperiment qasam Analog tat Schultz u l-kollegi (2007) dwar in-normi soċjali u l-assistenti riċerka meħtieġa għall-użu tal-elettriku biex jivvjaġġaw lejn kull dar biex iwasslu t-trattament u aqra l-electric meter (Figura 4.3). Kollha ta 'dan l-isforz billi assistenti riċerka fisser li żżid dar ġdida għall-istudju kien miżjud mal-ispiża. Min-naħa l-oħra, għall-esperiment qasam diġitali ta 'Restivo u van de Rijt (2012) dwar premjijiet fil-Wikipedija, riċerkaturi tista' żżid aktar parteċipanti fi kważi ebda spiża. Strateġija ġenerali għal tnaqqis tal-ispejjeż amministrattivi varjabbli huwa li tissostitwixxi xogħol umana (li hija għalja) mal-ħidma tal-kompjuter (li huwa rħis). Bejn wieħed u ieħor, inti tista 'tistaqsi lilek innifsek: tista dan l-esperiment taħdem filwaqt li kulħadd fit-tim tar-riċerka tiegħi huwa l-irqad? Jekk it-tweġiba hija iva, int ghamilt biċċa xogħol tajba ta 'awtomazzjoni.

It-tieni tip ewlieni ta 'l-ispiża varjabbli huwa ħlasijiet lill-parteċipanti. Xi riċerkaturi użaw Amazon Turk Mekkanika u s-swieq onlajn tax-xogħol oħra biex inaqqsu l-ħlasijiet li huma meħtieġa għall-parteċipanti. Li jsuq ispejjeż varjabbli-triq kollha lejn żero, madankollu, hu meħtieġ approċċ differenti. Għal żmien twil, ir-riċerkaturi fasslu esperimenti li huma tant boring li huma għandhom iħallsu lin-nies biex jieħdu sehem. Iżda, dak li jekk inti tista 'toħloq l-esperiment li n-nies tixtieq li tkun fil? Dan jista 'ħoss fetched, imma jien ser jagħtuk eżempju ta' hawn taħt mix-xogħol tiegħi stess, u hemm aktar eżempji fit-Tabella 4.4. Innota li dan l-approċċ għall-iddisinjar esperimenti pjaċevoli eki wħud mit-temi fil-Kapitolu 3 fir-rigward tal-iddisinjar stħarriġ aktar pjaċevoli u fil-Kapitolu 5 dwar it-tfassil ta 'kollaborazzjoni massa. Għalhekk, naħseb dak il-parteċipant jista 'jissejjaħ ukoll utent liema-tgawdija esperjenza se tkun parti dejjem aktar importanti tad-disinn riċerka fl-era diġitali.

Jekk inti tixtieq li toħloq żero esperimenti ispejjeż varjabbli tixtieq tkun taf biex jiżguraw li kollox huwa totalment awtomatizzati u li l-parteċipanti ma jeħtiġux xi pagamenti. Sabiex jintwera kif dan huwa possibli, jien ser tiddeskrivi riċerka dissertazzjoni tiegħi fuq is-suċċess u l-falliment ta 'prodotti kulturali. Dan l-eżempju juri wkoll li żero data ispiża varjabbli mhuwiex biss dwar kif isir l-affarijiet irħas. Pjuttost, huwa dwar li jippermettu esperimenti li ma jkunux possibbli mod ieħor.

dissertazzjoni tiegħi kien immotivat min-natura jistgħu jħawwdu ta 'suċċess għall-prodotti kulturali. kanzunetti hit, l-aħjar bejgħ kotba, u l-films Blockbuster huma ħafna, ħafna aktar suċċess mill-medja. Minħabba dan, is-swieq għal dawn il-prodotti huma msejħa "take-kulħadd rebbieħ" swieq. Madankollu, fl-istess ħin, li kanzunetta partikolari, ktieb, jew film se ssir b'suċċess hija oerhört imprevedibbli. Il skripts William Goldman (1989) elegantement f'sinteżi lottijiet ta 'riċerka akkademika billi qal li, meta niġu għall-tbassir suċċess, "ħadd ma jaf xejn." L-imprevedibbiltà tal-rebbieħ-jieħu-swieq kollha magħmula me wonder kemm ta' suċċess huwa riżultat ta 'kwalità u kemm huwa biss xortih. Jew, espressi kemmxejn differenti, jekk nistgħu joħolqu Dinjiet paralleli u li lilhom kollha jevolvu b'mod indipendenti, kieku l-istess kanzunetti saret popolari f'kull dinja? U, jekk le, x'jista 'jkun mekkaniżmu li tikkawża dawn id-differenzi?

Sabiex tingħata risposta għal dawn id-domandi, aħna-Peter Dodds, Duncan Watts (konsulent dissertazzjoni tiegħi), u I-dam serje ta 'esperimenti qasam online. B'mod partikolari, aħna bnew websajt imsejjaħ MusicLab fejn in-nies jistgħu jiskopru ġodda mużika, u aħna użati għal serje ta 'esperimenti. Aħna reklutati parteċipanti permezz tat-tħaddim banners fuq websajt teen-interess (Figura 4.19) u permezz ssemmi fil-midja. Il-parteċipanti li jaslu fil-website pprovduta tagħna kunsens informat, temm kwestjonarju sfond qasir, u ġew assenjati mingħajr skema għall wieħed ta 'influwenza żewġ sperimentali kondizzjonijiet indipendenti u soċjali. Fil-kondizzjoni indipendenti, il-parteċipanti għamlu d-deċiżjonijiet dwar liema kanzunetti li tisma ', minħabba biss l-ismijiet tal-faxex u l-kanzunetti. Li jingħata widen lill-kanzunetta, il-parteċipanti ġew mitluba li rata dan wara li kellhom l-opportunita (iżda mhux l-obbligu) li tniżżel il-kanzunetta. Fil-kondizzjoni influwenza soċjali, il-parteċipanti kellhom l-istess esperjenza, ħlief li huma jista 'wkoll jara kif ħafna drabi kull kanzunetta kienet tniżżlu mill-parteċipanti qabel. Barra minn hekk, il-parteċipanti fil-kundizzjoni influwenza soċjali kienu assenjati b'mod fortuwitu għal waħda mit-tmien Dinjiet paralleli li kull wieħed minnhom żviluppaw indipendentement (Figura 4.20). Meta tuża dan id-disinn, aħna dam żewġ esperimenti relatati. Fl-ewwel, aħna ppreżentat il-parteċipanti l-kanzunetti fil-grilja mhux magħżul, li tathom sinjal dgħajjef tal-popolarità. Fit-tieni esperiment, aħna ppreżentat il-kanzunetti fil klassifika, li pprovda sinjal ferm iktar b'saħħitha tal-popolarità (Figura 4.21).

Figura 4.19: Eżempju ta 'banner ad li l-kollegi tiegħi u I użati biex jirreklutaw parteċipanti għall-esperimenti MusicLab (Salganik, Dodds, and Watts 2006) .

Figura 4.20: disinn sperimentali għall-esperimenti MusicLab (Salganik, Dodds, and Watts 2006) . Il-parteċipanti kienu assenjati b'mod każwali f'wieħed minn żewġ kundizzjonijiet: l-influwenza indipendenti u soċjali. Il-parteċipanti fil-kundizzjoni indipendenti li sar l-għażliet tagħhom mingħajr l-ebda informazzjoni dwar liema nies oħra kienu għamlu. Il-parteċipanti fil-kundizzjoni influwenza soċjali ġew assenjati b'mod każwali f'wieħed mit-tmien Dinjiet paralleli, fejn jistgħu jaraw il-popolarità kif imkejla mill downloads ta 'parteċipanti minn ta' qabel kull kanzunetta fid-dinja tagħhom, iżda dawn ma setgħux tara l-ebda informazzjoni, u lanqas ma huma anki jafu dwar l-eżistenza ta ', kwalunkwe mill-dinjiet oħra.

Sibna li l-popolarità tal-kanzunetti differenti madwar id-dinja li jissuġġerixxu rwol importanti ta 'xortih. Per eżempju, fid-dinja wieħed il-kanzunetta "Lockdown" mill 52Metro daħal 1, u fi dinja wasal fil-40 barra mill-48 kanzunetti. Dan kien eżattament l-istess kanzunetta jikkompetu kontra l-istess diski, iżda fid-dinja wieħed li ltqajna xortik tajba u fl-oħrajn dan ma kienx. Barra minn hekk, billi jitqabblu r-riżultati madwar l-żewġ esperimenti sibna li l-influwenza soċjali twassal għas-suċċess aktar inugwali, li forsi joħloq l-apparenza ta 'prevedibbiltà. Iżda, tħares madwar l-dinjiet (li ma jista 'jsir barra ta' dan it-tip ta 'Dinjiet paralleli esperiment), sibna li l-influwenza soċjali attwalment żdiedu l-imprevedibbiltà. Barra minn hekk, b'mod sorprendenti, kien il-kanzunetti ta 'l-ogħla appell li għandhom l-aktar riżultati imprevedibbli (Figura 4.22).

Figura 4.21: Screenshots mill-kundizzjonijiet influwenza soċjali fil-esperimenti MusicLab (Salganik, Dodds, and Watts 2006) . Fil-kondizzjoni influwenza soċjali fl-esperiment 1, il-kanzunetti, flimkien man-numru ta 'dawnlowds preċedenti, ġew ippreżentati lill-parteċipanti rranġati grid rettangulari 16 X 3, fejn il-pożizzjonijiet tal-kanzunetti ġew assenjati b'mod każwali għal kull parteċipant. Fl-esperiment 2, il-parteċipanti fil-kundizzjoni influwenza soċjali ġew murija l-kanzunetti, b'għadd download, ippreżentati fil-kolonna wieħed fl-ordni dixxendenti tal-popolarità attwali.

Figura 4.22: Riżultati mill-esperimenti MusicLab juru r-relazzjoni bejn appell u s-suċċess (Salganik, Dodds, and Watts 2006) . L-assi x huwa s-sehem tas-suq tal-kanzunetta fid-dinja indipendenti, li jservi bħala miżura ta 'l-appell tal-kanzunetta, u l-assi y huwa s-sehem tas-suq ta' l-istess kanzunetta fil-8 dinjiet influwenza soċjali, li jservi bħala miżura tas-suċċess tal-kanzunetti. Sibna li tiżdied l-influwenza soċjali li l-parteċipanti esperjenzaw speċifikament, il-bidla fil-format mill-esperiment 1 għall-esperimentazzjoni 2 (Figura 4.21) -caused suċċess biex isiru aktar imprevedibbli, speċjalment għall-kanzunetti tal-appell ogħla.

MusicLab kienet kapaċi li jimxu għal essenzjalment mingħajr spejjeż varjabbli minħabba l-mod li dan ikun disinjat. L-ewwel, kollox kien totalment awtomatizzati allura kien kapaċi li jimxu I filwaqt li kien irqad. It-tieni nett, il-kumpens kien mużika ħielsa hekk kien hemm l-ebda spiża varjabbli kumpens parteċipant. L-użu tal-mużika bħala kumpens turi wkoll kif kultant ikun hemm kompromess bejn l-ispejjeż fissi u l-ispejjeż varjabbli. Bl-użu tal-mużika żied l-ispejjeż fissi minħabba I kellhom jqattgħu ħin iżgurar permess mill-faxex u tħejjija ta 'rapporti għall-faxex dwar reazzjoni parteċipanti l-mużika tagħhom. Iżda, f'dan il-każ, jiżdiedu l-ispejjeż fissi sabiex jitnaqqsu l-ispejjeż varjabbli kien il-ħaġa dritt li jagħmlu; dan huwa dak ppermettiet magħna biex imexxu l-esperiment li kien madwar 100 darba akbar minn esperiment laboratorju standard.

Barra minn hekk, l-esperimenti MusicLab juru li mingħajr spejjeż varjabbli ma għandux għalfejn ikun għan fih innifsu; pjuttost, jista 'jkun mezz biex tmexxi tip ġdid ta' esperiment. Avviż li aħna ma użatx kollha tal-parteċipanti tagħna li tmexxi influwenza soċjali laboratorju esperiment normali ta '100 darba. Minflok, għamilna xi ħaġa differenti, li inti tista 'taħseb bħala jaqilbu minn esperiment psikoloġiku għal esperiment soċjoloġiku (Hedström 2006) . Pjuttost milli jiffoka fuq teħid ta 'deċiżjonijiet individwali, aħna iffukat esperiment tagħna fuq popolarità, eżitu kollettiv. Din il-bidla għal riżultat kollettiv fisser li aħna meħtieġa madwar 700 parteċipant li jipproduċu punt uniku tad-dejta (kien hemm 700 ruħ f'kull wieħed mill-dinjiet paralleli). Din it-tariffa kien possibbli biss minħabba l-istruttura tal-ispejjeż tal-esperiment. B'mod ġenerali, jekk ir-riċerkaturi trid tistudja kif ir-riżultati kollettiva jinqalgħu minn deċiżjonijiet individwali, esperimenti grupp bħal MusicLab huma ferm eċċitanti. Fil-passat, dawn ġew loġistikament diffiċli, iżda dawn id-diffikultajiet huma fading minħabba l-possibbiltà ta 'żero data tan-nefqiet varjabbli.

Minbarra l jillustraw il-benefiċċji tal żero data tan-nefqiet varjabbli, l-esperimenti MusicLab juru wkoll sfida ma 'dan l-approċċ: spejjeż fissi għoljin. Fil-każ tiegħi, jien kien estremament xxurtjati li tkun tista 'taħdem ma iżviluppatur web talent jismu Peter Hausel għal madwar sitt xhur biex jinbena l-esperiment. Dan kien possibbli biss minħabba konsulent tiegħi, Duncan Watts, kienet irċeviet numru ta 'għotjiet li jappoġġjaw dan it-tip ta' riċerka. Teknoloġija tjiebet peress li aħna mibnija MusicLab fl-2004, u jkun ferm aktar faċli biex jibnu l-esperiment bħal dan issa. Iżda, l-istrateġiji għoli ta 'spejjeż fissi huma verament possibbli biss għal riċerkaturi li tista' b'xi mod ikopru dawk l-ispejjeż.

Bħala konklużjoni, esperimenti diġitali jista 'jkollhom strutturi ta' spejjeż b'mod drammatiku differenti minn esperimenti Analog. Jekk inti tixtieq li run esperimenti verament kbir, inti għandek tipprova li titnaqqas l-ispiża varjabbli tiegħek kemm jista 'jkun u idealment-triq kollha lejn 0. Tista' tagħmel dan billi awtomatizzazzjoni-mekkaniżmi ta 'esperiment tiegħek (eż, li tissostitwixxi żmien uman maż-żmien tal-kompjuter) u t-tfassil esperimenti li jridu n-nies li jkunu fil. Riċerkaturi li jista 'disinn esperimenti ma' dawn il-karatteristiċi se tkun kapaċi tmexxi tipi ġodda ta 'esperimenti li ma kinux possibbli fil-passat.