جي درستي گهڻا هڪ کان وڌيڪ عام ٿڪل جي حمايت هڪ آزمائش جي نتيجن کي وهم.
ڪو به آزمائش ڀرپور آهي، ۽ تحقيق هڪ وسيع ڪن لفظن جي لحاظ کان مسئلا بيان ڪرڻ لاء ٺاهيا ويا آهن. درستي جي حد تائين جنهن کي هڪ خاص آزمائش جي نتيجن کي ڪجهه وڌيڪ عام ٿڪل جي حمايت ڪرڻ وهم. انگن ٿڪل جي درستي، اندروني جي درستي، تعمير جي درستي، ۽ ظاهري جي درستي: سماجي سائنسدان ان کي چار مکيه قسمن ۾ درستي تقسيم ڪرڻ لاء مددگار مليا آهن (Shadish, Cook, and Campbell 2001, Ch 2) . اهي نظريا تي عبور حاصل اوھان critiquing ۽ جوڙجڪ ۽ هڪ آزمائش جو تجزيو کي بھتر ڪرڻ لاء هڪ ذهني checklist مهيا ڪندو، ۽ ان کي اوھين ٻئي تحقيق سان ڳالھ ٻولھ ڪرڻ ۾ مدد ڏيندو.
انگن ٿڪل جي درستي جي چوڌاري ڇا جي آزمائش جي انگن تجزيو درست ڪيو ويو مرڪز. جو ان سلسلي ۾ Schultz et al. (2007) اهڙي سوال ته ڇا اهي سندن ص-قدر صحيح computed تي وچ ۾ ٿئي. انگن تجزيو هن ڪتاب جي دائري کان ٻاھر آھي، پر مون کي چون ٿا ڪري سگهو ٿا ته هن جي انگن اصولن جي ڊزائن ۽ تجربن جو تجزيو ڪرڻ جي ضرورت آهي ته ڊجيٽل عمر ۾ نه تبديل ٿي ويا آهن. تنهن هوندي به، ڊجيٽل تجربن ۾ مختلف ڊيٽا ماحول نئين انگن موقعا (مثال طور، مشين سکيا طريقا استعمال ڪري علاج اثرات جي heterogeneity اندازي ڪرڻ ۾ پيدا ڪندو آھي (Imai and Ratkovic 2013) ) ۽ نئين computational مسئلن (مثال طور، تمام وڏا تجربن ۾ بلاڪ (Higgins, Sävje, and Sekhon 2016) ).
اندروني جي درستي جي چوڌاري ت تجرباتي طريقيڪار درست پرفارم ڪيا ويا مرڪز. جي آزمائش کي ريٽرننگ Schultz et al. (2007) ، اندروني جي درستي جي باري ۾ سوال جي randomization، علاج جي پهچائڻ، ۽ مالڪي جي ماپ جي چوڌاري وچ ۾ ٿي سگهي ٿي. مثال طور، توهان جو تعلق آهي ته ان جي تحقيق جي مددگارن جو بجلي ميٽر reliably پڙهڻ نه ڪيو ٿي ٿئي. حقيقت ۾، Schultz ۽ ساٿيو هن مسئلي جي باري ۾ پريشان هئا ۽ اهي ٻه ڀيرا پڙهڻ ميٽر جو هڪ نمونو هئي. خوشقسمتيء سان، جي نتيجن کي اعتراف هڪجهڙائي هئا. عام ۾، Schultz ۽ ساٿيو 'آزمائش اعلي اندروني جي درستي ڪري نظر اچن ٿا، پر هن هميشه ائين نه آهي؛ پيچيده ميدان ۽ آن لائن تجربن اڪثر اصل ۾ سڄي قوم کي حق علاج delivering ۽ هر هڪ لاء مالڪي جريب پريشاني ۾ هلائي. خوشقسمتيء سان، جي ڊجيٽل عمر اندروني جي درستي جي باري ۾ ڏک جي خاتمي، ڇاڪاڻ ته ان کي اها پهچ کي يقيني بنائڻ لاء ته جيئن جن ان کي حاصل ڪرڻ ۽ سڀني ڌرين لاء مالڪي اندازو ڪري وٺي وڃن ٿا ڪرڻ لاء ٺهيل جي علاج پهچائي ٿو جي مدد ڪري سگهي ٿو.
ڊيٽا ۽ نظرياتي constructs جي وچ ۾ شاديء جي آس پاس جي درستي مرڪز اڏيو. جيئن سوره 2 ۾ ڳالهه ٻولهه ڪئي، constructs جي باري ۾ تجريدي نظريا ته سماجي سائنسدان سبب آهن. افسوس، انهن تجريدي نظريا هميشه صاف معنائون ۽ ماپ نه ڪندا آھن. کي ريٽرننگ Schultz et al. (2007) ، جي دعوي آهي ته injunctive سماجي ريتن رسمن بجلي استعمال ڍرو ڪري سگهو ٿا ڪو علاج آهي ته "injunctive سماجي ريتن رسمن" (مثال طور، هڪ emoticon) کي بگاڙي ها ۽ "بجلي استعمال" اندازو کي ڊزائن ڪرڻ تي تحقيق جي ضرورت آهي. اينالاگ تجربن ۾، ڪيترن ئي تحقيق پنهنجي علاج ٺهيل ۽ پنهنجي مالڪي ماپي. هن اچڻ ته، ممڪن طور تي الله تعالي جي طور تي، جي تجربن جي تجريدي constructs اڀياس پئي ميچ ensures. ڊجيٽل تجربن ڪمپنين يا حڪومتن سان جتي تحقيق شريڪ علاج پهچائڻ ۽ مالڪي اندازو کي هميشه-تي استعمال ڊيٽا نظام ڪرڻ ۾، جي آزمائش ۽ نظرياتي constructs جي وچ ۾ ميچ گهٽ تنگ ٿي سگهي ٿو. اهڙيء طرح، مون کي اميد آهي ته ڪنسٽرڪٽ جي درستي اينالاگ تجربن جي ڀيٽ ۾ ڊجيٽل تجربن ۾ هڪ چئي ڳڻتي ٿي لاء توکان موڪلائين تڏھن ٿيندو.
آخر، ظاهري جي درستي جي آس پاس هن آزمائش جي نتيجن کي ٻين جي صورتحال کي generalize ها ته ڇا مرڪز. کي ريٽرننگ Schultz et al. (2007) ، هڪ، گھرو تعلق ۾ سندن توانائي جي استعمال جي باري ۾ هن هڪ ئي خيال-ڳوٺاڻن ماڻهن جي معلومات کي سندن ساٿين ۽ هڪ injunctive ريتن رسمن جي ڏي اشارو (مثال طور، هڪ emoticon) -reduce توانائي استعمال ڪري سگهندو سگهي ٿو ته ان ۾ هڪ مختلف انداز ۾ ڪيو ويو هڪ مختلف لھڻ؟ سڀ کان گهڻو-ٺهيل ۽ چڱي-هلائي تجربن لاء، ظاهري جي درستي جي باري ۾ ڏک جي سڀ کان پتو آهي. ماضي ۾، ظاهري جي درستي جي باري ۾ اهي سوال جواب ايف صرف هڪ ڪمري ۾ رهندا کي جيڪڏهن طريقا ڪم ڪيا ويا هڪ مختلف واٽ ۾، يا هڪ مختلف جاء تي، يا مختلف ماڻهن سان ڇا ٿيو ھا ڪوشش ۾ ويٺي ماڻهو جي هڪ bunch هئا. خوشقسمتيء سان، جي ڊجيٽل عمر انهن انگن اکرن-آزاد speculations کان وڃڻ ۽ empirically ظاهري جي درستي جو تعين ڪرڻ لاء تحقيق بڻائي ٿو.
ڇو جو مان هن جا نتيجا Schultz et al. (2007) پوء جوش هئا، Opower نالي هڪ ڪمپني کان وڌيڪ وڏي پيماني تي علاج ڪائنات کي گڏيل قومن ۾ عام واھپي جون شيون سان partnered. جي جوڙجڪ جي بنياد تي Schultz et al. (2007) ، Opower ترتيب جي منڍ توانائي اطلاع آهي ته ٻه مکيه ماڊيول، هڪ ڄاڻائي هڪ گھر جي بجلي استعمال هڪ emoticon ۽ توانائي استعمال (شڪل 4.6) lowering لاء ٽوٽڪا فراهم هڪ سان ان جي پاڙيسري کي مائٽ ھئي بڻايو. ان کان پوء، تحقيق سان ڀائيواري ۾، Opower randomized ڪنٽرول تجربن ورهين جي منڍ ۾ توانائي اطلاع جي اثر جو تعين ڪرڻ لاء. جيتوڻيڪ هنن تجربن ۾ جو علاج وضاحت سان پراڻي زماني جي snail ميل-ڪالهه ذريعي جسماني-عام طور تي پهچائي هئا (مثال طور، بجلي ميٽر) جي جسماني دنيا ۾ ڊجيٽل ڊوائيسز استعمال ڪري اندازو ٿي ويو. بلڪه هٿرادو هر گھر جي زيارت تحقيق جي مددگارن سان هي معلومات گڏ ڪرڻ جي ڀيٽ ۾، سنڌ جي Opower تجربن سڀني جي طاقت پڙهڻين جي رسائي حاصل ڪرڻ جي تحقيق اهڙن بجلي ڪمپنين سان ڀائيواري ۾ ٿي چڪو آهي هئا. اهڙيء طرح، اهي جزوي ڊجيٽل ميدان تجربن گهٽ variable خرچ تي هڪ تمام وڏا پيماني تي هوندا هئا.
600.000 households آس پاس جي گڏيل قومن جي 10 ڀلائي ڪمپنين جي خدمت جٽادار تجربن جي پهرين سيٽ ۾، Allcott (2011) مليو ته گهر جي توانائي رپورٽ 1.7 سيڪڙو بجلي واپرائڻ لاھي ڇڏيو. ٻين لفظن ۾، جو تمام وڏو، وڌيڪ جاگرافي طور قسمين قسمين مطالعي مان نتيجا qualitatively کان نتيجن کي ملندڙ هئا Schultz et al. (2007) . پر، ان جي اثر جي ماپ ننڍا هو: ۾ Schultz et al. (2007) جي هن بيان ۽ injective ريتن رسمن جي حالت ۾ households (جي emoticon سان هڪ) 5 سيڪڙو جي شرح سان انهن جي بجلي استعمال بيٺي. هن فرق لاء ڪهڙو سبب اڻڄاتل آهي، پر Allcott (2011) speculated ته هڪ يونيورسٽي جي ورتيون هڪ مطالعي جي حصي طور هڪ هٿ سان emoticon حاصل ڪرڻ جو هڪ کان هڪ ڪاميٽي جي روپ ۾ رپورٽ جي حصي طور هڪ طباعت emoticon حاصل ڪرڻ کان رويي تي هڪ وڏو اثر نه ٿي سگهي بجلي ڪمپنين جي.
وڌيڪ، پوء تحقيق ۾، Allcott (2015) هڪ اضافي 101 هڪ اضافي 8 لک جٽادار تجربن تي ٻڌايو. انهن جي اڳيان 101 تجربن جي گهر ۾ توانائي رپورٽ ماڻهو انهن ۾ بجليء کي واپرائڻ ڍرو ڪرڻ سبب کي جاري رکيو، پر ان جي اثرات کان به ننڍا هئا. هن کي ڪيرائڻ لاء ڪهڙو سبب معلوم ڪونه آهي، پر Allcott (2015) speculated ته رپورٽ جي effectiveness وقت تي زوال پذير ٿي، ڇاڪاڻ ته ان کي اصل ڌرين جي مختلف قسمن کي لاڳو ڪري ٿي رهيو هو بيٺو. وڌيڪ خاص وڌيڪ environmentalist علائقن ۾ عام واھپي جون شيون وڌيڪ امڪان پروگرام اڳ بڻائيندا هئا ۽ سندن گراهڪن جي علاج لاء وڌيڪ قبوليو هئا. جيئن گهٽ ماحولياتي گراهڪن سان عام واھپي جون شيون پروگرام منظور ڪيو، ان جي effectiveness رد ڪري بيٺو. اهڙيء طرح، صرف تجربن ۾ randomization طور ensures ته علاج ۽ ڪنٽرول گروپ ساڳي آهي، تحقيق جي سائيٽن ۾ randomization ensures ته ڪاٿي (واپس هوندا جي باري ۾ باب 3 ڪرڻ لاء سوچيو) هڪ کان وڌيڪ عام آبادي لاء ڌرين جي هڪ گروپ کان generalized ڪري سگهجي ٿو. تحقيق جي سائيٽن ترتيب sampled نه آهن، ته پوء فارمولو-به کي ٺهيل ۽ هلندا کان سگهندي ٿي آزمائش-سگهو ٿا.
گڏجي، اهي 111 تجربن-10 ۾ Allcott (2011) ۽ ۾ 101 Allcott (2015) سڀني کي گڏيل قومن جي حوالي کان اٽڪل 8.5 لک -involved. اهي مسلسل ڏيکاريو آهي ته گهر جي توانائي اطلاع سراسري بجلي واپرائڻ، هڪ نتيجو آهي ته ڪيليفورنيا ۾ 300 گھرن مان Schultz ۽ طريقي جي اصل پهچڻ جو حامي جي خاتمي. بس اهي اصل نتيجا replicating کان، ان جي پٺيان اپ تجربن به ڏيکاري آهي ته اثر جي ڪرائون سائيز واري هنڌ جي ڪئڊٽ کنيا. تجربن جي هن سيٽ به جزوي ڊجيٽل ميدان تجربن جي باري ۾ ٻه وڌيڪ عام جون پوائينٽون جي علامت آهي. پهريون، محقق بيروني جي درستي جي باري ۾ پتو خدشن empirically کي جڏهن تجربا ڊوڙندو جي قيمت گھٽ آهي قابل ٿي ويندي، ۽ هن نمودار ڪري سگهو ٿا ته ڪالهه اڳ ۾ ئي هڪ هميشه-تي ڊيٽا نظام جي ماپ ڪئي پئي وڃي. تنهن ڪري، ان کي مشورو ڏيندو ته تحقيق ٻين دلچسپ ۽ اهم رويي جي ته اڳ ۾ ئي رڪارڊ رهيو آهي، ۽ وري ڊزائن هن موجوده جريب ڍانچو جي مٿي تي تجربن جي نظر آئوٽ تي هجڻ گهرجي. ٻيو، تجربن جي هن سيٽ اسان کي ياد ڏياريندو آهي ته ڊجيٽل ميدان تجربن صرف آن لائن نه آهي؛ increasingly مون کي اميد آهي ته اهي سنڌ جي تعمير ماحول ۾ sensors جي ماپ ڪيترن ئي مالڪي سان هر ٿي ويندي.
جي درستي-انگن ٿڪل جي درستي جي چئن قسمن، اندروني جي درستي، تعمير جي درستي، جي مدد سان تحقيق جو تعين هڪ خاص آزمائش مان نتيجا هڪ کان وڌيڪ عام ٿڪل جي حمايت ت هڪ ذهني checklist ظاهري جي درستي-مهيا ڪري. اينالاگ عمر تجربن جي ڀيٽ ۾، ڊجيٽل عمر تجربن ۾ ان empirically ظاهري جي درستي کي خطاب ڪرڻ آسان هجڻ گهرجي ۽ ان کي اندروني جي درستي کي يقيني بڻائڻ لاء آسان ٿي وڃي. ٻئي هٿ تي، ڪنسٽرڪٽ جي درستي جي معاملن تي شايد ڊجيٽل عمر تجربن ۾ وڌيڪ مشڪل ٿي ويندي (باقي ته Opower تجربن سان ائين نه هو).