4.4.1 хүчинтэй байх хугацаа

Хүчинтэй байх хугацаа нь туршилтын үр дүн нь илүү ерөнхий дүгнэлт хэр дэмжих юм.

Туршилт нь төгс биш бөгөөд судлаачид болзошгүй асуудлуудыг тодорхойлохын тулд өргөн цар хүрээтэй үг хэллэг боловсруулсан байдаг. Хүчинтэй байх хугацаа нь тухайн туршилтын үр дүн нь зарим нь илүү ерөнхий дүгнэлтийг дэмжих нь хэр хэлнэ. Статистикийн дүгнэлт хүчин төгөлдөр байдал, дотоод хүчин төгөлдөр байдал, хүчин төгөлдөр байдлыг тогтоох, гадаад хүчин зүйл (Shadish, Cook, and Campbell 2001, chap. 2) үндсэн хүчин зүйлүүдийг хуваахад тустай болохыг нийгмийн эрдэмтэд олж тогтоосон. Эдгээр үзэл баримтлалыг эзэмших нь туршилтыг зохион бүтээх, боловсронгуй болгохын тулд сэтгэцийн хяналтын хуудсыг танд өгөх бөгөөд бусад судлаачидтай харилцахад тань туслах болно.

Статистикийн дүгнэлт хүчинтэй байх төвүүд туршилтыг статистик дүн шинжилгээ хийсэн эсэх талаар эргэн тойрон гардаг. Schultz et al. (2007) , тийм асуулт нь \(p\) -н ​​утгыг зөв тооцоолсон эсэх дээр төвөгтэй байж болох юм. Статистик зарчмуудыг боловсруулах, шинжлэх шаардлагатай статистик зарчмууд нь энэ номын хамрах хүрээнээс хальсан боловч үндсэндээ дижитал байдлаар өөрчлөгдөөгүй байна. Гэвч тоон туршилтуудын мэдээллийн орчин нь эмчилгээний үр нөлөөг тооцохын тулд машины сургалтын аргыг ашиглах зэрэг шинэ боломжуудыг бий болгосон (Imai and Ratkovic 2013) .

Туршилтын процедур зөв хэрэгжсэн эсэх талаар дотоод хүчинтэй төвүүд. Schultz et al. (2007) туршилтад буцаж очно Schultz et al. (2007) , дотоод хүчин зүйлийн талаархи асуултууд нь санамсаргүй тохиолдлыг эргэн харах, эмчилгээг хүргэх, үр дагаврын хэмжилтийг төвлөрүүлдэг. Жишээ нь, судалгааны туслах ажилтнууд цахилгаан тоолуурыг найдвартай уншаагүй гэж санаа зовж магадгүй юм. Үнэн хэрэгтээ Schultz болон хамтран ажиллагсад энэ асуудлын талаар санаа зовж байсан бөгөөд тэд хоёр дахин уншсан дээж авсан байв; Аз болоход, үр дүн нь адилхан байв. Ерөнхийдөө Schultz болон түүний хамтран ажиллагчдын туршилт нь дотоод хүчинтэй байх магадлалтай боловч энэ нь үргэлж тохиолддоггүй: нарийн төвөгтэй талбарууд болон онлайн туршилтууд нь зөв хүмүүст зөв эмчилгээ хийх, хүн бүрт үр дүнг хэмжихэд бэрхшээлтэй байдаг. Аз болоход тоон нас дотоод хүчин төгөлдөр байдлын асуудлыг багасгахад тусалж чадна. Учир нь үүнийг хүлээн авах ёстой хүмүүст хүргэж, бүх оролцогчдын үр дагаврыг хэмжихэд хүргэх нь илүү хялбар болсон.

Өгөгдөл болон онолын бүтцийн хоорондох хамаарлын хүчинтэй төвүүдийг байгуул. 2-р бүлэгт авч үзсэнчлэн, бүтэц нь нийгмийн эрдэмтдийн хийдэг хийсвэр ойлголт юм. Харамсалтай нь, эдгээр хийсвэр ойлголтууд нь үргэлж тодорхой тодорхойлолт, хэмжүүрүүд байдаггүй. Schultz et al. (2007) Руу буцах Schultz et al. (2007) хэмээх нийгмийн хэм хэмжээ нь цахилгааны хэрэглээг багасгаж чаддаг гэж үздэг судлаачид "шаталсан нийгмийн хэм хэмжээ" (жишээ нь, эмзэг байдал), "цахилгааны хэрэглээ" -ийг хэмжих эмчилгээ хийхийг шаарддаг. Аналог туршилтын үед олон судлаачид өөрсдийн боловсруулалтыг хийж, өөрсдийн үр дүнг хэмжсэн. Энэ аргаар туршилтыг хийсвэр хийсвэр бүтцүүдтэй харьцуулах боломжтой. Туршилтын үр дүнг хэмжихийн тулд судлаачид компаниуд эсвэл засгийн газруудтай эмчилгээ, үр дүнг хэмжихийн тулд байнга ашигладаг тоон туршилтын системд түншүүдтэй хамтран туршиж үзэхэд туршилт болон онолын хоорондох зөрчил нь бага нягттай байж болно. Тиймээс, хүчин төгөлдөр байдлыг бий болгох нь аналоги туршилтуудаас илүү тоон туршилтууд дээр илүү их анхаарал хандуулах болно гэж би найдаж байна.

Эцэст нь, энэхүү туршилтын үр дүн бусад нөхцөл байдалд ерөнхийд нь хамаарч болох эсэхийг гадаад хүчин төгөлдөр байдлын төвүүд харуулдаг. Schultz et al. (2007) Руу буцах Schultz et al. (2007) , хүмүүс ижил хүйстэнтэйгээ холбоотой эрчим хүчний хэрэглээний тухай мэдээллээр хангах, тэдгээрийн дүрэм журмын дохио (өөрөөр хэлбэл, эмзэг байдал) - өөр өөр аргаар хийж байсан эрчим хүчний хэрэглээг багасгахад энэ санаа санаа тавих эсэхийг хэн нэгэн асуух боломжтой өөр өөр орчинд. Ихэнх сайн боловсруулагдсан, сайн ажиллагаатай туршилтуудын хувьд гадны хүчин төгөлдөр байдлыг анхаарч үзэх нь хамгийн хүндрэлтэй асуудал юм. Өнгөрсөн үед гаднын хүчин төгөлдөр байдлын тухай маргаан өрсөлдөөн нь өрөөнд сууж буй бүлэг хүмүүсээс өөр журам, өөр газар, өөр өөр оролцогчидтой хийсэн бол юу болох байсан талаар төсөөлөхийг оролдож байгаа өрөөнд . Аз болоход тоон эрин нь судлаачдад эдгээр өгөгдөлгүй зөрчилдөөнөөс цааш шилжих боломжийг олгож, гадны хүчин төгөлдөр байдлыг үнэлэх боломжийг олгодог.

Schultz et al. (2007) нь маш сонирхолтой байсан, Opower нэртэй компани АНУ-д байрладаг хэрэгслүүдтэй хамтран эмчилгээг илүү өргөн хүрээнд зохион байгуулдаг. Schultz et al. (2007) дизайныг Schultz et al. (2007) , Opower нь хоёр гол модулийг агуулсан өрхийн эрчим хүчний тайланг үүсгэсэн: нэг хөрштэйгээ харьцуулахад гэр ахуйн цахилгаан эрчим хүчний ашиглалтыг эмзэг бүлэгтэй харьцуулж, эрчим хүчний ашиглалтыг бууруулах зөвлөмж өгсөн. Дараа нь судлаачидтай хамтран Opower нь эдгээр Эрчим Хүчний Тайлангийн үр нөлөөг үнэлэх зорилгоор санамсаргүй хяналттай туршилтуудыг явуулсан. Хэдийгээр эдгээр туршилтын эмчилгээ нь ихэвчлэн хуучны эмгэн мэйл шуудангаар физик байдлаар дамждаг боловч үр дүнг физик ертөнц дэх тоон төхөөрөмжөөр (жишээлбэл, цахилгаан тоолуур гэх мэт) ашиглан хэмждэг. Цаашилбал, энэхүү мэдээллийг гараар хайж буй судлаачидтай гар аргаар зочлохын оронд эрдэм шинжилгээний ажилтнууд эрчим хүчний компаниудтай хамтран цахилгаан эрчим хүчний уншигчид хандах боломжийг олгодог. Иймээс тоон хээрийн туршилтыг бага хувьсах хэмжигдэхүүнээр их хэмжээгээр явуулсан.

Зураг 4.6: Нүүрсний Эрчим хүчний тайлан нь Нийгмийн харьцуулалтын модуль ба Action Steps Module байсан. Allcott (2011) ийн зөвшөөрлөөр Allcott (2011) , 1 ба 2-р зураг.

10 төрлийн сайтаас 600,000 өрхийг хамруулсан эхний туршилтад Allcott (2011) гэр бүлийн эрчим хүчний тайланд цахилгааны зарцуулалтыг бууруулсан гэж үзсэн. Өөрөөр хэлбэл, илүү өргөн хүрээтэй, газарзүйн хувьд янз бүрийн судалгаанаас гарсан үр дүн Schultz et al. (2007) . Түүнчлэн, 101 өөр өөр сайтаас найман сая нэмэлт өрхийг хамруулах талаар хийсэн судалгаагаар, Allcott (2015) гэр бүлийн эрчим хүчний тайланд эрчим хүчний хэрэглээг тогтмол бууруулсан байна. Илүү олон туршилтууд нь нэг туршилтанд харагдахгүй сонирхолтой шинэ загварыг илчилсэн: хожим туршилтанд нөлөөлөх хэмжээ нь багассан (зураг 4.7). Allcott (2015) энэ бууралт нь олон янзын оролцогчдод эмчилгээг үргэлжлүүлж байсан гэж үзсэн. Нэн ялангуяа, байгаль орчинд илүү анхаарал хандуулдаг хэрэглэгчдэд зориулсан програмууд нь өмнө нь програмыг илүү үр дүнтэй ашиглах боломжтой байсан бөгөөд тэдний үйлчлүүлэгчид эмчилгээнд илүү мэдрэмжтэй байв. Хүрээлэн буй орчинд төвлөрсөн бус хэрэглэгчидтэй хөтөлбөрийг хэрэгжүүлснээр түүний үр ашиг нь буурч байна. Тиймээс туршилтыг санамсаргүй байдлаар хийснээр эмчилгээ, хяналтын бүлэг ижил төстэй байдаг тул судалгааны талбайд санамсаргүй байдлаар тооцооллыг нэг бүлгийн оролцогчдоос илүү ерөнхий хүн амд тооцох боломжтой байдаг (3-р бүлэгт түүвэрлэлтийн талаар эргэцүүлэн бодох). Хэрэв судалгааны сайтууд санамсаргүй түүвэр авдаггүй бол ерөнхий загварчлал-төгс боловсруулсан туршилтаас бүрдсэн байж болно.

Зураг 4.7: Цахилгааны хэрэглээний талаархи Нүүрсний эрчим хүчний тайланд үзүүлсэн 111 туршилтын үр дүн. Хетелберийг хожим хэрэгжуулж байсан газруудад бага зэргийн нелее узуулдэг. Allcott (2015) энэ загварын гол эх сурвалж нь байгаль орчинд илүү анхаарал хандуулдаг хэрэглэгчдийн сайтууд өмнө нь хөтөлбөрийг хэрэгжүүлэх магадлал илүү байсан гэж үздэг. Allcott (2015) -аас авсан зураг 3-р зураг.

Эдгээр бүх 111 туршилт- Allcott (2011) , 10-д Allcott (2011) Allcott (2015) -т 10-д АНУ-ын бүх мужаас 8.5 сая өрх хамрагдсан байна. Тэд Нүүрсний Эрчим Хүчний Тайлан нь цахилгаан эрчим хүчний дундаж хэрэглээг бууруулж байгаа нь Швейцарийн 300 гэрээс Schultz-ийн анхны үр дүнг дэмжиж байгаа үр дүн юм. Эдгээр эх үр дүнг хуулбарлахаас гадна дараачийн туршилтууд нь байршлын хувьд нөлөөллийн цар хүрээ харилцан адилгүй байгааг харуулж байна. Туршилтын энэ багц нь хагас тоон хээрийн туршилтуудын талаархи хоёр илүү ерөнхий онолыг харуулж байна. Нэгдүгээрт, судлаачид туршилтыг явуулах зардал бага байхад гадаад хүчин зүйлүүдийн талаархи асуудлуудыг эмх цэгцтэй шийдвэрлэх боломжтой бөгөөд хэрэв үр дүнг байнга бэлэн мэдээллийн системээр хэмжсэн бол энэ нь тохиолдож болно. Тиймээс судлаачид аль хэдийн бичигдсэн байгаа сонирхолтой, чухал зан үйлийг хайж олоход бэлэн байх ёстой бөгөөд одоогийн байгаа хэмжлийн дэд бүтцийн дээр туршилтуудыг зохион байгуулах хэрэгтэйг харуулж байна. Хоёрдугаарт, энэ туршилтууд нь тоон хээрийн туршилтууд зөвхөн онлайн биш гэдгийг бидэнд сануулж байна; Тэдгээр нь хүрээлэн буй орчин дахь мэдрүүрүүдээр хэмжигддэг олон тооны үр дагаварт хүрэх болно гэж би боддог.

Үнэн зөв статистик дүгнэлтийн хүчин төгөлдөр байдал, дотоод хүчин төгөлдөр байдал, хүчин төгөлдөр байдал, хүчин төгөлдөр байдал, гадаад хүчин төгөлдөр байдлыг бий болгох дөрвөн төрөл нь сэтгэцийн хяналтын хуудсыг судлаачдад туслах зорилгоор туршилтаас гарсан үр дүнг илүү ерөнхий дүгнэлтийг дэмждэг эсэхийг үнэлэхэд тусалдаг. Аналог-насны туршилтуудтай харьцуулахад тоон туршилтуудтай харьцуулахад гадны хүчин төгөлдөр байдлыг шалгахад хялбар байх ёстой бөгөөд дотоод хүчин төгөлдөр байдлыг хангахад хялбар байх ёстой. Нөгөөтэйгүүр, тоон туршилтууд, ялангуяа тоон талбарт туршилт хийх нь компаниудтай түншлэлийг хамарсан байж магадгүй юм.