4.5.1.2 Стварыце свой ​​уласны эксперымент

Пабудова ўласнага эксперыменту можа быць дарагім, але гэта дазволіць вам стварыць эксперымент , які вы хочаце.

У дадатак да накладыванія эксперыментаў па-над існуючых асяроддзяў, вы таксама можаце стварыць свой уласны эксперымент. Асноўная перавага гэтага падыходу заключаецца ў кантролі; калі вы будуеце эксперымент, вы можаце стварыць сераду і метады лячэння, якія вы хочаце. Гэтыя зробленыя на заказ эксперыментальныя асяроддзя могуць стварыць магчымасці для праверкі тэорый, якія немагчыма праверыць у прыродных асяроддзях. Асноўнымі недахопамі пабудовы ўласнага эксперыменту з'яўляецца тое, што яно можа быць дарагім і навакольнага асяроддзя, што вы можаце стварыць не можа мець рэалізм прыроднай сістэмы. Даследчыкі будуюць свой уласны эксперымент таксама павінен мець стратэгію набору ўдзельнікаў. Пры працы ў існуючых сістэмах, даследчыкі, па сутнасці, у выніку чаго эксперыменты іх удзельнікам. Але, калі даследчыкі будуюць свой уласны эксперымент, яны павінны прынесці удзельнікаў да яго. На шчасце, такія паслугі, як Amazon Механічны турак (MTurk) можа даць даследчыкам зручны спосаб прыцягнуць удзельнікаў сваіх эксперыментаў.

Адзін прыклад , які ілюструе годнасці заказных асяроддзяў для тэставання абстрактныя тэорыі з'яўляецца лічбавай лабараторыі эксперымент Грэгары Huber, Сэт - Хіл і Габрыэль Ленца (2012) . Эксперымент даследуе магчымыя практычныя абмежаванні для функцыянавання дэмакратычнага кіравання. Якія раней не-эксперыментальныя даследаванні рэальных выбараў сведчаць пра тое, што выбаршчыкі не ў стане дакладна ацаніць эфектыўнасць дзеючых палітыкаў. У прыватнасці, выбаршчыкі, па ўсёй бачнасці пакутуюць ад трох ухілаў: 1) размешчаны на нядаўнім, а не сукупнага выканання; 2) манипулируемой рыторыкай, кадравання і маркетынгу; і 3) пад уплывам падзей, якія не маюць дачынення да дзейнага прадукцыйнасці, такіх як поспех мясцовай спартыўнай каманды і ўмоў надвор'я. У гэтых ранніх даследаваннях, аднак, гэта было цяжка вылучыць які-небудзь з гэтых фактараў, ад усіх іншых рэчаў, што адбываецца ў рэальным, брудных выбараў. Таму Хубер і яго калегі стварылі вельмі спрошчаную сераду галасавання, з тым каб ізаляваць, а затым вывучаць эксперыментальна, кожны з гэтых трох магчымых зрушэннях.

Як я апісваць эксперыментальнае прылада пад ёй будзе гучаць вельмі штучна, але памятайце, што рэалізм не з'яўляецца мэтай у эксперыментах лабараторыі стылі. Хутчэй, мэта складаецца ў тым, каб выразна аддзяліць працэс , які вы спрабуеце вучыцца, і гэта жорсткай ізаляцыі часам не ўяўляецца магчымым у даследаваннях з больш рэалізму (Falk and Heckman 2009) . Акрамя таго, у дадзеным канкрэтным выпадку, даследчыкі сцвярджаюць, што калі выбаршчыкі не могуць эфектыўна ацэньваць працу ў гэтай вельмі спрошчанай налады, то яны не збіраюцца, каб быць у стане зрабіць гэта ў больш рэалістычнай, больш складанай абстаноўцы.

Хубер і яго калегі выкарысталі Amazon Mechanical Turk (MTurk) набраць удзельнікаў. Пасля таго, як удзельнік пры ўмове інфармаванай згоды і прайшоў кароткі тэст, ёй сказалі, што яна прымала ўдзел у 32 раўндзе гульні, каб зарабіць жэтоны, якія могуць быць ператвораныя ў рэальныя грошы. У пачатку гульні кожны ўдзельнік сказалі, што яна была прызначаная "аллокатора", які дасць ёй свабоду жэтонаў кожны раўнд і што некаторыя размеркавальнікі былі больш шчодрымі, чым іншыя. Акрамя таго, кожны з удзельнікаў таксама было сказана, што яна будзе мець магчымасць альбо захаваць яе аллокатора або быць прызначаны новы пасля 16 раўндаў гульні. Улічваючы тое, што вы ведаеце пра Huber і даследчых мэтаў калегаў, вы можаце ўбачыць, што размеркавальнікам ўяўляе ўрад, і гэты выбар ўяўляе сабой выбары, але ўдзельнікі не ведалі агульных мэтаў даследавання. У агульнай складанасці Хубер і яго калегі набраныя каля 4000 удзельнікаў, якія заплаціў каля $ 1,25 за задачы, якая заняла каля 8 хвілін.

Нагадаем, што адзін з высноваў з папярэдніх даследаванняў было тое, што ўзнагароджанне выбаршчыкаў і караць за вынікі дамінуючых аператараў, якія відавочна па-за іх кантролю, такіх як поспех мясцовых спартыўных каманд і ўмоў надвор'я. Для таго, каб ацаніць, ці можа быць пад уплывам чыста выпадковых падзей у іх рашэння аб устанаўленні удзельнікаў галасавання, Хубер і яго калегі дадалі латарэю да іх эксперыментальнай сістэме. У любым 8-м раўндзе або 16-га тура (гэта значыць непасрэдна перад шанец замяніць аллокатора) ўдзельнікі былі выпадковым чынам размешчаны ў латарэі, дзе некаторыя выйграў 5000 ачкоў, некаторыя выйгралі 0 ачкоў, а некаторыя страцілі 5000 пунктаў. Гэтая латарэя была прызначана для імітацыі добрыя або дрэнныя навіны, што не залежыць ад выканання палітык. Нават калі ўдзельнікі былі відавочна сказана, што латарэя не была звязаная з выкананнем іх размеркавальнікам, зыход латарэі да гэтага часу ўплыў рашэнняў удзельнікаў. Удзельнікі, якія дасталі выгаду з латарэі, больш верагодна, каб трымаць іх аллокатора, і гэты эфект быў мацней, калі латарэі адбылося ў трэцім раўндзе 16-направа да замены прыняцця, чым калі гэта здарылася ў 8-м раўндзе (мал 4,14). Гэтыя вынікі, разам з вынікамі шэрагу іншых эксперыментаў у працы пад кіраўніцтвам Хубер і яго калег зрабіць выснову , што нават у спрошчанай абстаноўцы, выбаршчыкі маюць цяжкасці прымаць мудрыя рашэнні, вынік , які паўплываў будучых даследаванняў аб прыняцці выбаршчык рашэнняў (Healy and Malhotra 2013) . Эксперымент Huber і калегаў паказвае, што MTurk могуць быць выкарыстаны для набору ўдзельнікаў для эксперыментаў лабараторыі стылі, каб сапраўды праверыць вельмі канкрэтных тэорый. Ён таксама паказвае каштоўнасць пабудовы ўласнай эксперыментальнай асяроддзя: цяжка сабе ўявіць, як гэтыя ж працэсы маглі быць ізаляваныя так чыста ў любой іншай абстаноўцы.

Малюнак 4.14: Вынікі Huber, Hill, and Lenz (2012) . Удзельнікі, якія дасталі выгаду з латарэі, больш верагодна, каб захаваць сваю аллокатора, і гэты эфект быў мацней, калі латарэі адбылося ў трэцім раўндзе 16-направа да замены прыняцця, чым калі гэта здарылася ў 8-м раўндзе.

У дадатак да стварэння лабараторыі падобныя эксперыменты, даследчыкі могуць таксама пабудаваць эксперыменты, якія з'яўляюцца больш поля тыпу. Напрыклад, Centola (2010) пабудаваў эксперымент лічбавага поля з мэтай вывучэння ўплыву структуры сацыяльнай сеткі на распаўсюд паводзін. Яго даследаванні пытанне патрабаваў ад яго, каб назіраць такія ж паводзіны, распаўсюд у папуляцыях, якія мелі розныя сацыяльныя сеткавыя структуры, але былі неадрозныя. Адзіны спосаб зрабіць гэта з зробленай на заказ, заказнога эксперыменту. У гэтым выпадку Чентола пабудаваў вэб-супольнасць у галіне аховы здароўя.

Чентола на працу каля 1500 удзельнікаў з рэкламай на сайтах здароўя. Калі ўдзельнікі прыбылі ў онлайн-супольнасць, якое называецца Здаровы лад жыцця Сетка-яны далі інфармаваныя згоду, а затым былі прызначаныя "прыяцелям здароўя". З-за спосабу Чентола прысвоенага гэтыя прыяцелямі здароўя ён быў у стане звязаць разам розныя сацыяльныя сеткавыя структуры ў розных групы. былі пабудаваны Некаторыя групы, каб мець выпадковыя сеткі (дзе ўсе былі ў роўнай ступені верагодна, будуць падлучаныя) і былі пабудаваныя іншыя групы, каб мець кластарныя сеткі (дзе злучэння з'яўляюцца больш лакальна шчыльна). Затым Чентола увёў новае паводзіны ў кожнай сеткі, магчымасць зарэгістравацца для новага вэб-сайта з дадатковай інфармацыі аб стане здароўя. Кожны раз, калі хто-то падпісаўся на гэты новы вэб-сайт, усё яе прыяцелямі здароўя атрымалі ліст, абвясціўшы гэта паводзіны. Чентола выявіў, што такія паводзіны падпісвання-на новы сайт-распаўсюджвацца далей і хутчэй у кластарнай сеткі, чым выпадковай сеткі, знаходжання, якая была ў адрозненне ад некаторых існуючых тэорый.

У цэлым, стварыць свой уласны эксперымент дае значна большы кантроль; яна дазваляе пабудаваць найлепшыя ўмовы, каб ізаляваць тое, што вы хочаце вучыцца. Цяжка сабе ўявіць, як любы з гэтых эксперыментаў можна было б праводзіць ва ўжо існуючую асяроддзе. Акрамя таго, будаваць сваю ўласную сістэму зніжае этычныя праблемы вакол эксперыментаваць ў існуючых сістэмах. Калі вы будуеце свой уласны эксперымент, тым не менш, вы сутыкнецеся многія з праблем, якія сустракаюцца ў лабараторных эксперыментах рэкрутынгу удзельнікаў і заклапочанасці з нагоды рэалізму. Канчатковы недахопам з'яўляецца тое, што стварыць свой ​​уласны эксперымент можа быць дарагім і адымае шмат часу, хоць , як паказваюць гэтыя прыклады, эксперыменты могуць вар'іравацца ад адносна простых асяроддзяў (напрыклад, пры вывучэнні галасавання Huber, Hill, and Lenz (2012) ) у адносна складаных асяроддзяў (напрыклад, даследаванні сетак і ланцуговай рэакцыі па Centola (2010) ).