4.4 Að flytja út einföldum tilraunum

Við skulum fara út fyrir einfaldar tilraunir. Þrír hugmyndir eru gagnlegar fyrir ríkar tilraunir: gildi, ólíkleiki meðferðaráhrifa og aðferða.

Vísindamenn sem eru nýjar tilraunir einbeita sér oft að mjög ákveðnum, þröngum spurningu: Er þessi meðferð "vinna"? Til dæmis hvetur símtal frá sjálfboðaliði einhvern til að kjósa? Breytir vefsíðahnappur frá bláu til grænu aukið smellihlutfallið? Því miður losa ótrúlega um hvað "verk" hindrar þá staðreynd að þröngt beitt tilraunir segja ekki raunverulega hvort meðferðin "virkar" almennt. Frekari, þröngt beittar tilraunir svara miklu nákvæmari spurningu: Hver er meðaláhrif þessarar sérstakrar meðferðar við þessa tiltekna framkvæmd fyrir þennan hóp þátttakenda á þessum tíma? Ég mun kalla tilraunir sem leggja áherslu á þessa þröngu spurningu einfalda tilraunir .

Einföldar tilraunir geta veitt dýrmætar upplýsingar, en þeir geta ekki svarað mörgum spurningum sem eru bæði mikilvægar og áhugaverðar, svo sem hvort einhver sé fyrir hendi sem meðferðin hafði stærri eða minni áhrif. hvort það sé annar meðferð sem væri skilvirkari; og hvort þessi tilraun tengist breiðari félagslegu kenningum.

Til að sýna fram á gildi flutnings umfram einfaldar tilraunir, skulum við líta á hliðstæða reit tilraunar af P. Wesley Schultz og samstarfsmönnum um tengslin milli félagslegra staðla og orkunotkun (Schultz et al. 2007) . Schultz og samstarfsmenn hékku á 300 heimilum í San Marcos í Kaliforníu, og þessir porthangers skiluðu mismunandi skilaboðum sem ætluðu að hvetja til orkusparnaðar. Þá mældu Schultz og samstarfsmenn áhrif þessara skilaboða á raforkunotkun, bæði eftir eina viku og eftir þrjár vikur; sjá mynd 4.3 fyrir nánari lýsingu á tilraunahönnuninni.

Mynd 4.3: Skýringarmynd á tilraunahönnun frá Schultz et al. (2007) . Reynslan í akstri fólst í að heimsækja um 300 heimili í San Marcos í Kaliforníu fimm sinnum á átta vikna tímabili. Á hverri heimsókn tóku vísindamenn handvirkt lestur úr mælingu húsnæðisins. Á tveimur af heimsóknum lögðu þeir fram dyr á hverju húsi og veittu upplýsingar um orkunotkun heimilanna. Rannsóknarspurningin var hvernig innihald þessara skilaboða myndi hafa áhrif á orkunotkun.

Tilraunin hafði tvö skilyrði. Í fyrsta lagi fengu heimili almennar orkusparandi ráð (td nota aðdáendur í stað loftræstis) og upplýsingar um orkunotkun þeirra miðað við meðalorkunotkun í hverfinu þeirra. Schultz og samstarfsmenn kölluðu þetta lýsandi staðlað skilyrði vegna þess að upplýsingar um orkunotkun í hverfinu veittu upplýsingar um dæmigerð hegðun (þ.e. lýsandi staðal). Þegar Schultz og samstarfsmennirnir horfðu á orkunotkun í þessum flokki, virtist meðferðin ekki hafa áhrif, hvorki á stuttum tíma né lengri tíma; Með öðrum orðum virtist meðferðin ekki "vinna" (mynd 4.4).

Sem betur fer höfðu Schultz og samstarfsmenn ekki náð sér fyrir þessari einföldu greiningu. Áður en tilraunin hófst gerðu þeir rök fyrir því að þungir notendur rafmagns fólks yfir miðju gætu dregið úr neyslu þeirra og að léttir notendur rafmagns fólks undir meðaltali gætu reyndar aukið neyslu þeirra. Þegar þeir horfðu á gögnin, þá er það nákvæmlega það sem þeir fundu (mynd 4.4). Þannig, hvað leit út eins og meðferð sem hafði engin áhrif var í raun meðferð sem átti tvær móti áhrif. Þessi viðbragðsmikla hækkun meðal léttnotenda er dæmi um boomerang áhrif , þar sem meðferð getur haft hið gagnstæða áhrif frá því sem var ætlað.

Mynd 4.4: Niðurstöður úr Schultz et al. (2007) . Pallborð (a) sýnir að lýsandi viðmiðunarmeðferðin hefur áætlaðan meðaltal meðaltalsmeðferð. Hins vegar sýnir spjaldið (b) að þessi meðaltal meðferðaráhrif séu í raun samsett af tveimur móti áhrifum. Fyrir þungur notandi minnkaði meðferðin notkun en fyrir léttar notendur auknar meðferðin notkun. Að lokum sýnir spjaldið (c) að annarri meðferðin, sem notaði lýsandi og lögboðin viðmið, hafði u.þ.b. sömu áhrif á þungur notendur en dregið úr boomerang áhrifum á ljósnotendur. Aðlagað frá Schultz et al. (2007) .

Samhliða fyrsta skilyrðinu rann Schultz og samstarfsmenn einnig annað skilyrði. Heimilin í öðru ástandinu fengu nákvæmlega sömu meðferðarreglur um orkusparandi ráð og upplýsingar um orkunotkun heimila sinna samanborið við meðaltal fyrir hverfið þeirra - með einum smá viðbót: fyrir fólk með undir meðaltal neyslu, bættu vísindamenn við: ) og fyrir fólk með yfir meðaltal neyslu sem þeir bættu við :( Þessar broskörlum voru hannaðar til þess að kveikja á því sem vísindamenn kölluðu lögboðnar reglur . Viðmiðunarmörk vísa til skynjun á því sem almennt er samþykkt (og hafnað) en lýsandi viðmið vísar til skynjun á hvað er almennt gert (Reno, Cialdini, and Kallgren 1993) .

Með því að bæta þessu litla broskalli minnkaði vísindamenn verulega boomerang áhrif (mynd 4.4). Þannig að með því að gera þessa einfalda breytingu - breyting sem var hvatt af abstrakt félagslegum sálfræðilegum kenningum (Cialdini, Kallgren, and Reno 1991) - vísindamenn gátu snúið forriti sem virtist ekki virka í einum sem virkaði, og samtímis, þeir gátu stuðlað að almenna skilning á því hvernig samfélagsleg viðmið hafa áhrif á mannleg hegðun.

Á þessum tímapunkti gætirðu þó tekið eftir því að eitthvað er svolítið öðruvísi um þessa tilraun. Sérstaklega hefur tilraunin af Schultz og samstarfsmönnum ekki raunverulega stjórnhóp á sama hátt og slembiraðað stjórnað tilraunir gera. Samanburður á þessari hönnun og Restivo og van de Rijt sýndu muninn á tveimur helstu tilraunum. Í hönnun á milli einstaklinga , eins og Restivo og van de Rijt, er meðhöndlunarhópur og eftirlitshópur. Í innan-einstaklingum hönnun, á hinn bóginn, hegðun þátttakenda er borið saman fyrir og eftir meðferð (Greenwald 1976; Charness, Gneezy, and Kuhn 2012) . Í tilraunum innan efnis er það eins og hver þátttakandi starfi sem eigin stjórnhópur hennar. Styrkur milli myndefna er að þeir veita vernd gegn confounders (eins og ég lýsti hér að ofan), en styrk innanforsenda tilrauna er aukin nákvæmni áætlana. Að lokum, til að skýra hugmynd sem mun koma síðar þegar ég býð ráð um hönnun á stafrænum tilraunum, blandar hönnunin saman betri nákvæmni innanhússhönnunar og verndar gegn því að hönnunin á milli einstaklinga (mynd 4.5) sé á milli.

Mynd 4.5: Þrír tilraunaverkefni. Standard slembiraðað samanburðarrannsóknir nota hönnun milli einstaklinga . Dæmi um hönnun milli einstaklinga er Restivo og Van de Rijt (2012) tilraun á barnstars og framlagi til Wikipedia: Rannsakendur handahófsins skiptir þátttakendur í meðferð og eftirlitshópa, veittu þátttakendum í meðferðarhópnum barnstar og borið saman niðurstöður fyrir tveir hópar. The second tegund af hönnun er innan-einstaklingum hönnun. Í tveimur tilraunum í rannsóknum Schultz og samstarfsmanna (2007) um félagslegar reglur og orkunotkun er gerð grein fyrir hönnun innanhúss: vísindamenn bera saman rafmagnsnotkun þátttakenda fyrir og eftir meðferð. Innanhúss hönnun býður upp á betri tölfræðilega nákvæmni en þau eru opin fyrir mögulegum confounders (td breytingar á veðri milli formeðferðar og meðferðartíma) (Greenwald 1976; Charness, Gneezy, and Kuhn 2012) . Innan-einstaklingar hönnun er einnig stundum kallað endurteknar aðgerðir hönnun. Að lokum sameinast blandað hönnun aukinnar nákvæmni innanhússhönnunar og verndar gegn því að hönnun á milli myndefna berist. Í blönduðu hönnun samanstendur rannsóknir breytingin á niðurstöðum fyrir fólk í meðferð og eftirlitshópum. Þegar vísindamenn hafa áður upplýsingar um formeðferð, eins og raunin er í mörgum stafrænum tilraunum, eru blönduð hönnun yfirleitt æskileg fyrir hönnun milli einstaklinga vegna þess að þau leiða til betri nákvæmni mata.

Á heildina litið sýna hönnun og niðurstöður rannsóknarinnar af Schultz og samstarfsfólki (2007) gildi þess að færa sig út fyrir einfaldar tilraunir. Sem betur fer þarft þú ekki að vera skapandi snillingur til að hanna tilraunir eins og þetta. Félagsvísindamenn hafa þróað þrjú hugmyndir sem leiða þig í átt að ríkari tilraunum: (1) gildi, (2) ólíkleika meðferðaráhrifa og (3) aðferðir. Það er ef þú heldur þessum þremur hugmyndum í huga þegar þú ert að hanna tilraunina þína, þú verður að sjálfsögðu að búa til fleiri áhugaverð og gagnleg tilraun. Til þess að lýsa þessum þremur hugtökum í verki lýsi ég fjölda eftirfylgni að hluta til í stafrænu sviði, byggt á glæsilegri hönnun og spennandi árangri Schultz og samstarfsmanna (2007) . Eins og þú munt sjá, með meiri varkárri hönnun, framkvæmd, greiningu og túlkun getur þú líka farið út fyrir einfaldar tilraunir.