Tushe tana nufin nawa sakamakon wani gwajin goyi bayan wani karin general ƙarshe.
Babu gwajin da yake cikakke, kuma masu bincike sun ƙaddamar da wani ƙamus mai ƙididdiga don bayyana matsaloli masu wuya. Aminiya tana nufin hanyar da sakamakon gwaji na musamman ya goyi bayan ƙaddamarwa ta ƙarshe. Masana kimiyyar zamantakewar al'umma sun ga ya taimaka wajen tsaftace inganci zuwa manyan nau'ikan guda huɗu: ƙididdigar lissafin ƙididdiga, inganci na ciki, ingantaccen aiki, da (Shadish, Cook, and Campbell 2001, chap. 2) waje (Shadish, Cook, and Campbell 2001, chap. 2) . Gudanar da waɗannan batutuwa zai ba ka damar yin la'akari da ladabi da kuma inganta siffantawa da nazarin gwaji, kuma zai taimaka maka ka sadarwa tare da sauran masu bincike.
Ƙididdigar ƙididdigar lissafi na cibiyoyin da ke kewaye ko kimanin nazarin lissafi na gwaji ya yi daidai. A cikin mahallin Schultz et al. (2007) , irin wannan tambaya zai iya kasancewa kan ko sun lissafta siffofin da suke da shi \(p\) daidai). Ka'idodin lissafi sun buƙaci tsarawa da kuma nazarin gwaje-gwajen ba su wuce wannan littafin ba, amma ba su canza ba a cikin zamani na zamani. Abin da ya canza, duk da haka, yanayin da aka samu a cikin gwaje-gwaje na dijital ya haifar da sabon damar kamar amfani da hanyoyin amfani da na'ura don tantance bambancin ilimin maganin (Imai and Ratkovic 2013) .
Tabbatar da inganci na ciki yana kewaye da ko an tabbatar da matakan gwaji. Komawa ga gwaji na Schultz et al. (2007) , tambayoyi game da inganci na ciki zai iya kasancewa a kusa da rarrabawa, bayarwa na jiyya, da kuma auna sakamakon. Alal misali, mai yiwuwa ka damu da cewa masu taimakawa na binciken bai karanta mita lantarki ba. A gaskiya, Schultz da abokan aiki sun damu da wannan matsala, kuma suna da samfurin mita a karanta sau biyu; Abin farin ciki, sakamakon ya kasance daidai. Bugu da ƙari, gwajin Schultz da abokan aiki yana nuna babban ingancin ciki, amma wannan ba koyaushe bane: filin da ke tattare da kwarewa ta yanar gizo sau da yawa yana fuskantar matsalolin da ke ba da kyakkyawan magani ga mutanen kirki da kuma auna sakamakon ga kowa. Abin farin ciki, shekarun dijital zai iya taimakawa wajen rage damuwa game da amincin cikin gida saboda yanzu ya fi sauƙi don tabbatar da cewa an bayar da magani ga waɗanda aka kamata su karbi shi kuma su auna sakamakon ga dukan mahalarta.
Gina cibiyoyi masu inganci a kusa da wasan tsakanin bayanai da ƙaddarar hanyoyi. Kamar yadda aka tattauna a babi na 2, gine-ginen sune ka'idodi ne wanda masana kimiyyar zamantakewa ke tunani game da. Abin takaici, wadannan batutuwa masu ban mamaki ba koyaushe suna da cikakkun bayanai da ma'aunai ba. Komawa zuwa Schultz et al. (2007) , da'awar da ke bin ka'idojin zamantakewar al'umma na iya rage wutar lantarki yana buƙatar masu bincike su tsara zabin da za su yi amfani da "ka'idojin zamantakewa" (misali, imoticon) da kuma auna "amfani da wutar lantarki". A cikin nazarin analog, mutane da yawa masu bincike sun tsara nasu magani kuma sun auna sakamakon kansu. Wannan tsarin ya tabbatar da cewa, kamar yadda ya yiwu, gwaje-gwajen da aka yi daidai da kayan binciken da aka gina. A cikin gwaje-gwaje na dijital inda masu bincike suke hulɗa da kamfanoni ko gwamnatoci don yalwata jiyya da kuma yin amfani da tsarin bayanai akai-akai don auna sakamakon, wasan tsakanin gwaji da ƙaddarar hanyoyi bazai da wuya. Saboda haka, ina tsammanin cewa ingancin ginawa zai zama babban damuwa a gwaje-gwaje na dijital fiye da nazarin analog.
A ƙarshe, amincin waje yana kewaye da ko sakamakon wannan gwaji zai iya zama cikakke zuwa wasu yanayi. Komawa zuwa Schultz et al. (2007) , wanda zai iya tambayar ko wannan ra'ayi-samar wa mutane da bayanai game da amfani da makamashi a dangantaka da abokan su da siginar ka'idoji (misali, imoticon) - zai rage yawan amfani da makamashi idan aka yi ta wata hanya dabam a wani wuri daban. Domin mafi yawan tsararren gwaje-gwaje da damuwa, damuwa game da amincin waje shine mafi wuya a magance. A baya, waɗannan muhawarar game da amincin waje da yawa baya shafar komai fiye da rukuni na mutane da suke zaune cikin ɗaki suna ƙoƙari su yi tunanin abin da zai faru idan an yi matakan da hanyoyi daban-daban, ko kuma a wani wuri daban, ko tare da mahalarta . Abin farin ciki, yawan shekarun dijital ya sa masu bincike su matsawa bayan waɗannan jita-jita ba tare da bayanan ba tare da gwada haƙƙin ƙirar waje ba.
Saboda sakamakon daga Schultz et al. (2007) sun kasance masu ban sha'awa, wani kamfanin mai suna Opower ya haɗu da kayan aiki a Amurka don yin aikin magani fiye da yadu. Bisa ga zane na Schultz et al. (2007) , Opower ya kirkiro Harkokin Tsaro na Ma'aikata na gida wanda ke da ginshiƙai guda biyu: wanda yana nuna amfani da wutar lantarki ta gida da maƙwabta da alamar imoticon kuma wanda ke bada shawara don rage yawan makamashi (adadi 4.6). Sa'an nan kuma, tare da haɗin gwiwa tare da masu bincike, Opower ya gudanar da gwaje-gwajen da aka bazu don nazari akan tasirin wannan Ma'aikatar Tsaro ta Kasa. Kodayake jiyya a waɗannan gwaje-gwaje ana karɓar jiki-yawanci ta hanyar wasikar sakonni na tsohuwar samaniya - an auna sakamakon ta amfani da na'urorin dijital a cikin jiki ta jiki (misali, ƙarfin wutar lantarki). Bugu da ƙari, maimakon tattara bayanai tare da masu taimakawa na bincike a kowane gida, an yi gwaje-gwaje na Opower tare da haɗin gwiwa tare da kamfanonin wutar lantarki da ke taimakawa masu bincike don samun damar karatun wutar lantarki. Saboda haka, waɗannan gwaje-gwaje na filin lantarki na zamani sun gudana a matsayi mai yawa a farashin mai sauƙi.
A cikin farko na gwaje-gwajen da suka shafi gidaje 600,000 daga wurare daban-daban, Allcott (2011) gano cewa Hasken Tsaro na Home ya sauke amfani da wutar lantarki. A wasu kalmomi, sakamakon da yafi girma, karin nazarin gine-gine daban-daban sun kasance daidai da sakamakon daga Schultz et al. (2007) . Bugu da ƙari, a cikin binciken da aka yi na gaba da kimanin wasu miliyan 8 daga shafuka daban-daban na duniya, Allcott (2015) sake gano cewa Allcott (2015) Harkokin Tsaro na gida ya sauke amfani da wutar lantarki. Wannan gwaje-gwajen da yafi girma kuma ya bayyana wani sabon abu mai ban sha'awa wanda ba za'a iya gani ba a cikin gwaji guda daya: yawancin sakamako ya ƙi a cikin gwaje-gwaje na baya (adadi 4.7). Allcott (2015) yi la'akari da cewa wannan rushewa ya faru ne domin, a tsawon lokaci, ana amfani da maganin daban-daban na mahalarta. Bugu da ƙari, masu amfani tare da masu amfani da ƙwaƙwalwar ajiyar muhalli sun fi dacewa su dauki wannan shirin a baya, kuma abokan ciniki sun fi dacewa da magani. A yayin da masu amfani da kayan aikin da ba su da alaƙa na yanayin muhalli suka karbi shirin, tasirinsa ya bayyana. Saboda haka, kamar yadda ƙididdigar gwaji a cikin gwaje-gwajen ya tabbatar da cewa ƙungiyar kulawa da kulawa sun kasance kama da juna, bazuwar a cikin shafukan bincike suna tabbatar da cewa za a iya ƙididdiga ƙididdiga daga ɗayan ƙungiyar mahalarta yawan jama'a (tunani a baya na babi 3 game da samfurin). Idan ba a samo shafukan bincike a bazuwar ba, to, jigilar juna-ko da daga wani gwajin da aka tsara da kuma gudanar da shi - na iya zama matsala.
Tare, wadannan gwaje-gwajen Allcott (2011) a Allcott (2011) da 101 a Allcott (2015) -un samu kimanin kimanin miliyan 8.5 daga ko'ina cikin Amurka. Suna nuna cewa Ma'aikatar Tsaro ta Kasa ta rage rage yawan wutar lantarki, sakamakon da ke goyan bayan binciken Schultz da abokan aiki daga gidaje 300 a California. Baya kawai yin mahimmancin waɗannan sakamakon asali, binciken da aka biyo baya ya nuna cewa girman girman da yake ciki ya bambanta ta wuri. Wannan samfurin gwaje-gwaje kuma ya nuna karin bayani guda biyu game da gwaje-gwaje na yanki na zamani. Na farko, masu bincike za su iya magance matsalolin da suka shafi tabbas na waje idan ƙimar gwaje-gwaje masu gudana ba su da ƙarfin gaske, kuma wannan zai iya faruwa idan an riga an auna sakamako ta hanyar tsarin bayanai akai-akai. Saboda haka, yana nuna cewa masu bincike su kasance a kan ido don wasu abubuwa masu ban sha'awa da kuma muhimmancin da aka riga an rubuta, sa'an nan kuma tsara gwaje-gwaje a kan wannan kayan aikin auna. Na biyu, wannan samfurin gwaje-gwajen ya tunatar da mu cewa gwaje-gwaje na filin jannati ba kawai a layi ba ne; ƙari, Ina tsammanin za su kasance a ko'ina tare da sakamako masu yawa waɗanda aka auna ta hanyar masu aunawa a cikin gine-gine.
Nau'ikan nau'ikan ma'auni na ƙididdigar inganci guda huɗu, ƙwaƙwalwar ajiya, ingantaccen tsari, da ƙwarewar waje - samar da lissafi na tunani don taimakawa masu bincike su tantance ko sakamakon daga gwaji na musamman ya goyi bayan ƙaddamarwa na ƙarshe. Idan aka kwatanta da gwaje-gwajen analog na shekaru, a cikin gwaje-gwaje na dijital, ya kamata ya fi dacewa don magance matsalar ta waje, kuma ya kamata ya zama sauƙi don tabbatar da inganci na ciki. A gefe guda, al'amurran da suka shafi ingantaccen kwarewa zai zama ƙalubale a cikin gwaje-gwaje na shekaru dijital, musamman nazarin filin jannatin da suka haɗa da kamfani tare da kamfanoni.