Le të shkojmë përtej eksperimenteve të thjeshta. Tre koncepte janë të dobishme për eksperimente të pasura: vlefshmëria, heterogjeniteti i efekteve të trajtimit dhe mekanizmat.
Studiuesit që janë të rinj për eksperimente shpesh përqendrohen në një pyetje shumë specifike dhe të ngushtë: A funksionon ky trajtim "punë"? Për shembull, a bën thirrje telefonike nga një vullnetar që të inkurajojë dikë që të votojë? A po ndryshon shkalla e klikimit përmes ndryshimit të një butoni të faqes nga blu në të gjelbër? Për fat të keq, shprehja e lirshme për atë që "punon" e errëson faktin se eksperimentet e fokusuara ngushtë nuk vërtet tregojnë nëse një trajtim "punon" në një kuptim të përgjithshëm. Përkundrazi, eksperimentet e fokusuara ngushtë përgjigjen një pyetje shumë më specifike: Cili është efekti mesatar i këtij trajtimi specifik me këtë implementim specifik për këtë popullsi të pjesëmarrësve në këtë kohë? Unë do të thërras eksperimente që përqendrohen në këtë eksperiment të thjeshtë për këtë pyetje të ngushtë.
Eksperimentet e thjeshta mund të japin informacion të vlefshëm, por nuk u përgjigjen shumë pyetjeve që janë të rëndësishme dhe interesante, sikur ka disa njerëz për të cilët trajtimi kishte një efekt më të madh ose më të vogël; nëse ekziston një trajtim tjetër që do të ishte më efektiv; dhe nëse ky eksperiment ka të bëjë me teoritë më të gjera sociale.
Në mënyrë që të tregojmë vlerën e lëvizjes përtej eksperimenteve të thjeshta, le të shqyrtojmë një eksperiment të fushës analoge nga P. Wesley Schultz dhe kolegët mbi marrëdhëniet midis normave sociale dhe konsumit të energjisë (Schultz et al. 2007) . Schultz dhe kolegët i varën dyert e shtëpive në 300 shtëpi në San Marcos, Kaliforni, dhe këto derë me derë dërguan mesazhe të ndryshme të dizajnuara për të inkurajuar ruajtjen e energjisë. Pastaj, Schultz dhe kolegët matur efektin e këtyre mesazheve në konsumin e energjisë elektrike, si pas një jave dhe pas tre javësh; shih figurën 4.3 për një përshkrim më të hollësishëm të dizajnit eksperimental.
Eksperimenti kishte dy kushte. Në të parat, ekonomitë familjare morën këshilla të përgjithshme për kursimin e energjisë (p.sh. përdorin tifozët në vend të kondicionerëve) dhe informacion rreth përdorimit të tyre të energjisë krahasuar me përdorimin mesatar të energjisë në lagjen e tyre. Schultz dhe kolegët e quajtën këtë gjendje përshkruese normative sepse informacioni rreth përdorimit të energjisë në lagje siguroi informacion rreth sjelljes tipike (p.sh. një normë përshkruese). Kur Schultz dhe kolegët shqyrtuan përdorimin e energjisë në këtë grup, trajtimi duket se nuk ka efekt, as në afat të shkurtër apo të gjatë; me fjalë të tjera, trajtimi nuk duket se "punon" (figura 4.4).
Për fat të mirë, Schultz dhe kolegët nuk u pajtuan për këtë analizë të thjeshtë. Para fillimit të eksperimentit, ata arsyetuan se përdoruesit e rëndë të rrymës - njerëzit mbi mesataren - mund të ulin konsumin e tyre dhe se përdoruesit e lehta të energjisë elektrike - njerëzit nën mesataren - mund të rritin konsumin e tyre. Kur ata shikuan të dhënat, kjo është pikërisht ajo që ata gjetën (figura 4.4). Pra, ajo që dukej si një trajtim që nuk kishte efekt ishte në të vërtetë një trajtim që kishte dy efekte të kompensimit. Kjo rritje kundërproduktive në mesin e përdoruesve të lehta është një shembull i një efekti bumerang , ku një trajtim mund të ketë efekt të kundërt nga ajo që ishte menduar.
Në të njëjtën kohë me kushtin e parë, Schultz dhe kolegët gjithashtu zhvilluan një kusht të dytë. Familjet në kushte të dyta kanë marrë të njëjtat trajtime - këshilla të përgjithshme për kursimin e energjisë dhe informacion rreth përdorimit të energjisë së familjes së tyre në krahasim me mesataren për lagjen e tyre - me një shtesë të vogël: për njerëzit me konsumim nën mesatar, hulumtuesit shtuan një: ) dhe për njerëzit me konsum më të lartë se mesatarja ata shtuan një: Këto emocionet u krijuan për të nxitur atë që kërkuesit i quajtën normat e urdhrave të injorancës.Normat injunktive i referohen perceptimeve të asaj që zakonisht miratohet (dhe nuk miratohet), ndërsa normat përshkruese i referohen perceptimeve të çfarë bëhet zakonisht (Reno, Cialdini, and Kallgren 1993) .
Duke shtuar këtë një emoticon të vogël, kërkuesit reduktuan në mënyrë dramatike efektin bumerang (figura 4.4). Kështu, duke e bërë këtë ndryshim të thjeshtë - një ndryshim që u motivua nga një teori abstrakte psikologjike sociale (Cialdini, Kallgren, and Reno 1991) - studiuesit ishin në gjendje të kthenin një program që nuk duket se funksiononte në atë që punonte, dhe, në të njëjtën kohë, ata ishin në gjendje të kontribuonin në kuptimin e përgjithshëm se si normat shoqërore ndikojnë në sjelljen njerëzore.
Në këtë pikë, megjithatë, mund të vëreni se diçka është pak më ndryshe në lidhje me këtë eksperiment. Në veçanti, eksperimenti i Schultz dhe kolegët nuk ka një grup kontrolli në të njëjtën mënyrë që bëjnë eksperimente të kontrolluara me randomizim. Një krahasim midis këtij dizajni dhe asaj të Restivo dhe van de Rijt ilustron dallimet mes dy dizajneve kryesore eksperimentale. Në mes të projekteve të subjekteve , të tilla si ajo e Restivo dhe van de Rijt, ekziston një grup trajtimi dhe një grup kontrolli. Në hartimin e subjekteve brenda , nga ana tjetër, sjellja e pjesëmarrësve krahasohet para dhe pas trajtimit (Greenwald 1976; Charness, Gneezy, and Kuhn 2012) . Në një eksperiment brenda subjektit, është sikur secili pjesëmarrës të veprojë si grup i saj i kontrollit. Fuqia e projekteve ndërmjet subjekteve është se ato ofrojnë mbrojtje kundër konfuzorëve (siç e përshkrova më herët), ndërsa forca e eksperimenteve brenda subjekteve është rritur saktësinë e vlerësimeve. Së fundi, për të parashikuar një ide që do të vijë më vonë kur të ofroj këshilla rreth dizajnimit të eksperimenteve dixhitale, një dizajn _kombëtar krijon saktësinë e përmirësuar të dizenjove brenda subjekteve dhe mbrojtjen kundër ngatërrimit të projekteve ndërmjet subjekteve (figura 4.5).
Në përgjithësi, dizajni dhe rezultatet e studimit nga Schultz dhe kolegët (2007) tregojnë vlerën e lëvizjes përtej eksperimenteve të thjeshta. Për fat të mirë, nuk duhet të jeni një gjeni krijues për të dizajnuar eksperimente si kjo. Shkencëtarët socialë kanë zhvilluar tre koncepte që do t'ju udhëheqin drejt eksperimenteve më të pasura: (1) vlefshmërinë, (2) heterogjenitetin e efekteve të trajtimit, dhe (3) mekanizmat. Kjo do të thotë, nëse i mbani parasysh këto tri ide gjatë kohës që po planifikoni eksperimentin tuaj, ju do të krijoni një eksperiment më interesant dhe më të dobishëm. Me qëllim të ilustrimit të këtyre tre koncepteve në veprim, do të përshkruaj një numër eksperimentesh në terren pjesërisht digjital të fushës që ndërtohen mbi dizajnin elegant dhe rezultatet emocionuese të Schultz dhe kolegëve (2007) . Siç do ta shihni, përmes dizajnimit, zbatimit, analizës dhe interpretimit më të kujdesshëm, edhe ju mund të lëvizni përtej eksperimenteve të thjeshta.