Activities

Key:

• kangélan: gampang , medium , hard , Banget hard
• mbutuhake math ( )
• mbutuhake werna ( )
• koleksi data ( )
• favorit ( )

1. [ , ] Berinsky lan kolega (2012) ngetung Teknik Turk ing bagean dening biak telu pacoban klasik. Nurun klasik Asian rongko penyakit eksprimen dening Tversky and Kahneman (1981) . Apa asil match Tversky lan Kahneman kang? Apa asil match Berinsky lan kolega? Apa-yen apa-apa-ora iki mulang kita bab nggunakake Teknik Turk kanggo nyobi survey?

2. [ , ] Ing kertas Luwih basa-in-pipi judul "We Kudu Break Up," ing ilmu jiwa sosial Robert Cialdini, salah siji penulis saka Schultz et al. (2007) , wrote bilih piyambakipun pensiun awal saka Proyek minangka profesor, ing sisih amarga saka tantangan kang ngadhepi mengkono nyobi lapangan ing disiplin (psikologi) sing utamané ngayahi nyobi Lab (Cialdini 2009) . Maca kertas Cialdini kang, lan nulis wong email urging wong reconsider kang break-up ing cahya saka kemungkinan saka nyobi digital. Gunakake conto tartamtu saka riset sing alamat uneg-uneg kang.

3. [ ] Supaya bisa nemtokake apa Kasile dhisikan cilik ngunci utawa fade adoh, van de Rijt lan lan kolega (2014) campur dadi papat sistem beda ngeklim sukses ing peserta dipilih kanthi acak, lan banjur diukur dampak jangka panjang sukses kasepakatan iki. Bisa mikir sistem liyane sing bisa mbukak nyobi padha? Ngira-ngira sistem iki ing syarat-syarat masalah regane ngelmu, algoritma confounding (ndeleng Chapter 2), lan Etika.

4. [ , ] Ing asil saka eksprimen bisa gumantung ing peserta. Nggawe eksprimen lan banjur mbukak ing Amazon Teknik Turk (MTurk) nggunakake strategi loro recruitment beda. Coba Pick Sastranegara eksprimen lan recruitment supaya asil bakal dadi beda sabisa. Contone, Sastranegara recruitment saged kanggo nganakake panambahan peserta ing esuk lan sore utawa kanggo ijol peserta karo pituwas dhuwur lan kurang. Iki jinis beda ing strategi recruitment bisa mimpin kanggo pools beda peserta lan kasil eksperimen beda. Carane beda durung asil nguripake metu? Apa sing mbukak babagan mlaku nyobi ing MTurk?

5. [ , , , ] Mbayangno sing padha planning Emosi sinau contagion (Kramer, Guillory, and Hancock 2014) . Gunakake asil saka sinau pangamatan sadurungé dening Kramer (2012) kanggo netepake nomer peserta ing saben kawontenan. Iki loro pasinaon ora cocog sampurna supaya dadi manawa kanggo tegas dhaptar kabeh pemanggih sing nggawe:

   1. Mbukak gladhi sing bakal mutusake carane akeh peserta badhe wis needed kanggo ndeteksi lan efek gedhe minangka efek ing Kramer (2012) karo \ (\ alpha = 0,05 \) lan \ (1 - \ beta = 0,8 \).
   2. Apa pitungan padha analytically.
   3. Diwenehi asil saka Kramer (2012) iki Emosi contagion (Kramer, Guillory, and Hancock 2014) liwat-powered (IE, wong iku duwe peserta liyane saka needed)?
   4. Saka pemanggih sing digawe, kang duwe efek sing paling ing pitungan Panjenengan?

6. [ , , , ] Wangsulana pitakon ing ndhuwur, nanging tinimbang nggunakake sadurungé sinau pangamatan dening Kramer (2012) migunakaké asil saka pacoban alam sadurungé dening Coviello et al. (2014) .

7. [ ] Loro Rijt et al. (2014) lan Margetts et al. (2011) loro nindakake nyobi ingkang nyinaoni proses wong ndhaftar usulan. Mbandhingaké lan kontras desain lan panemon pasinaon.

8. [ ] Dwyer, Maki, and Rothman (2015) conducted loro nyobi lapangan ing hubungan antarane aturan sosial lan prilaku proenvironmental. Punika ingkang abstrak saka kertas sing:

   "Carane bisa ilmu psychological digunakke kanggo kasurung prilaku proenvironmental? Ing loro pasinaon, campur ngarahke ing mromosiaken prilaku konservasi energi ing jedhing umum sinaoni pengaruh aturan sing deskriptif lan tanggung jawab pribadi. Ing Study 1, status cahya (IE, utawa mati) iki diapusi sadurunge wong ngetik jedhing umum unoccupied, menehi tandha ing pakewuh dèskriptif kanggo setelan sing. Peserta padha Ngartekno liyane kamungkinan kanggo nguripake lampu mati yen padha mati nalika padha mlebu. Ing Study 2, kondisi tambahan iki klebu kang pakewuh mateni lampu iki tontonan dening nyugihaké a, nanging peserta padha ora piyambak tanggung jawab kanggo ngowahi iku. tanggung jawab pribadi ngirim pengaruh sosial aturan ing prilaku; nalika peserta padha ora tanggung jawab kanggo ngowahi lampu, pengaruh pakewuh iki sudo. Asil iki nuduhaké cara aturan lan tanggung jawab pribadi deskriptif uga aturan efektifitas saka campur tangan proenvironmental. "

   Maca kertas lan désain réplikasi sinau 1.

9. [ , ] Bangunan ing pitakonan sadurunge, saiki nindakake rancangan.

   1. Carane asil mbandhingaké?
   2. Apa bisa nerangake beda?

10. [ ] Ana wis debat substansial èkspèrimèn nggunakake peserta direkrut saka Amazon Teknik Turk. Ing podo karo, ana uga wis debat substansial èkspèrimèn nggunakake peserta direkrut saka populasi mahasiswa lulus. Nulis memo loro-kaca mbandingaken lan mbedakake ing Turkers lan undergraduates minangka peserta peneliti. comparison ngirim kalebu pirembagan loro masalah ngelmu lan logistik.

11. [ Buku] Jim Manzi kang Uncontrolled (2012) iku sing wiwitan apik menyang daya saka pacobèn ing bisnis. Ing buku kang relayed crita iki:

    "Aku iki tau ing rapat karo genius bisnis bener, a billionaire poto-digawe sing wis, understating intuisi jero saka kuwasane nyobi. perusahaan ngginakaken sumber wujud nyoba kanggo nggawe gedhe layar nyimpen jendhela sing bakal narik kawigaten konsumen lan mundhak sales, minangka kawicaksanan conventional ngandika mesthinipun. Experts kasebut kanthi teliti, dites desain sawise desain, lan ing mau review test individu liwat periode taun katahan nuduhake ora efek nyebabake wujud saben desain tampilan anyar ing sales. Senior marketing lan Merchandising eksekutif ketemu karo CEO maneh asil test sajarah iki ing toto. Sawise pun kabeh data eksperimen, padha rampung sing kawicaksanan conventional ana layar salah-sing jendhela ora drive sales. tumindak sing dianjurake iki kanggo ngurangi biaya lan gaweyan ing wilayah iki. Dramatically tontonan kemampuan saka pacobèn kanggo overturn kawicaksanan conventional. Tanggepan CEO kang prasaja: 'kesimpulan iku sing perancang Panjenengan ora apik banget.' Solusi iki kanggo nambah gaweyan ing desain nyimpen tampilan, lan kanggo njaluk wong anyar kanggo nindakaken. " (Manzi 2012, 158–9)

    jinis kang sah punika badhan CEO?

12. [ ] Bangunan ing pitakonan sadurunge, mbayangno sing padha ing patemon ngendi asil saka nyobi padha rembugan. Apa sing papat pitakonan sing bisa takon, siji kanggo saben jinis sah (statistik, mbangun, internal, lan external)?

13. [ ] Bernedo, Ferraro, and Price (2014) nyinaoni efek pitung taun melu-melu daya banyu diterangake ing Ferraro, Miranda, and Price (2011) (ndeleng Tokoh 4.10). Ing koran, Bernedo lan kolega uga ngupaya ngerti mekanisme konco efek kanthi mbandingaken prilaku rumah tangga sing duwe lan wis ora dipindhah sawise perawatan iki dikirim. Kang, kira-kira, padha nyoba kanggo ndeleng apa perawatan nabrak ngarep utawa homeowner ing.

    1. Maca kertas, njlèntrèhaké desain sing, lan ngringkes temonan sing. b) Aja temonan sing impact carane kudu netepke biaya-efektifitas saka campur tangan padha? Yèn mangkono, apa? Yen ora, apa ora?

14. [ ] Ing tindakake-munggah kanggo Schultz et al. (2007) , Schultz lan kolega nindakake seri telu nyobi ing efek saka aturan sing deskriptif lan injunctive ing prilaku lingkungan beda (andhuk nganggo maneh) ing loro kahanan (a hotel lan condominium timeshare) (Schultz, Khazian, and Zaleski 2008) .

    1. Ngringkes desain lan panemon telu pacoban iki.
    2. Carane, yen ing kabeh, aja padha ngganti interpretasi saka Schultz et al. (2007) ?

15. [ ] Nanggepi Schultz et al. (2007) , Canfield, Bruin, and Wong-Parodi (2016) mlayu seri nyobi Lab-kaya sinau desain tagihan listrik. Punika carane padha njlèntrèhaké ing Abstrak:

    "Ing èksperimèn basis survey, saben peserta weruh Bill listrik hipotesis kanggo kulawarga karo nggunakake listrik relatif dhuwur, panutup informasi bab (a) nggunakake sajarah, (b) bandingaken kanggo tanggi, lan (c) nggunakake sajarah karo perabot risak. Peserta weruh kabeh jinis informasi telung format kalebu (a) tabel, (b) bar gambar, lan (c) lambang gambar. We laporan ing Katelu temuan utama. First, konsumen mangertos saben jinis informasi listrik nggunakake paling nalika presented ing Tabel, mbok menawa amarga tabel nggampangake titik maca prasaja. Kapindho, pilihan lan maksud kanggo ngirit listrik padha kuat kanggo informasi nggunakake sajarah, sawijining format. Katelu, individu karo literacy energi ngisor mangertos kabeh informasi kurang. "

    Duqu liyane pasinaon tindakake-munggah, kasil utama kapentingan ing Canfield, Bruin, and Wong-Parodi (2016) kacarita prilaku ora prilaku nyata. Apa sing kekiyatan lan kelemahane saka jinis sinau ing program riset jembare mromosiaken energi tabungan?

16. [ , ] Smith and Pell (2003) iku meta-analisis satirical pasinaon nuduhake efektifitas saka parasut. Padha nganakke:

    "Minangka karo akeh campur tangan dimaksudaké kanggo nyegah lara, efektifitas saka parasut durung ngalami evaluasi kaku dening nggunakake trials kontrol randomized. Advocates medicine adhedhasar bukti wis ngritik Adoption campur tangan mandhiri kanthi nggunakake data mung pangamatan. We mikir sing kabeh padha entuk manfaat yen protagonists paling radikal medicine adhedhasar bukti diatur lan melu ing wuta pindho, randomized, placebo kontrol, silang nyoba parachute ing. "

    Tulis op-ed cocok kanggo koran readership umum, kayata The New York Times, alesan marang fetishization saking bukti èkspèrimèn. Nyedhiyani tartamtu, conto konkrit. Petunjuk: Deleng uga, Bothwell et al. (2016) lan Deaton (2010)

17. [ , , ] Latar-in-beda estimators saka efek perawatan bisa luwih tepat saka estimators prabédan-in-tegese. Nulis memo kanggo insinyur ing pangisian daya saka A testing / B ing perusahaan media sosial wiwitan-up penjelasan ing Nilai saka pendekatan prabédan-in-beda kanggo mlaku eksprimen online. memo ngirim kalebu a statement saka masalah, sawetara roso bab kahanan ing kang prabédan-in-prabédan estimator bakal outperform prabédan-in-tegese estimator, lan sinau simulasi prasaja.

18. [ , ] Gary Loveman dadi professor Harvard Business School sadurunge dadi CEO saka Harrah kang, salah siji saka perusahaan casino paling gedhé ing donya. Nalika piyambakipun pindhah dhateng Harrah kang, Loveman rubah perusahaan karo program kasetyan flier-kaya Kerep sing diklumpukake Jumlah sanget data prilaku customer. Ing ndhuwur sistem Takeran iki tansah ing, perusahaan punika wiwit mlaku nyobi. Contone, padha bisa mbukak eksprimen kanggo ngira-ngira efek saka coupon kanggo hotel free wengi kanggo pelanggan karo pola gambling tartamtu. Punika carane Loveman diterangake pentinge pacobèn kanggo laku bisnis saben dinten Harrah kang:

    "Iku kaya sampeyan ora ngganggu wanita, sampeyan ora nyolong, lan sing wis tak duwe grup kontrol. Iki salah siji saka iku sing bisa ilang proyek kanggo ing Harrah's-ora mlaku klompok kontrol. " (Manzi 2012, 146)

    Tulis email kanggo pegawe anyar penjelasan kok Loveman mikiraken iku penting kanggo duwe grup kontrol. Sampeyan kudu nyoba kanggo kalebu conto-salah siji nyata utawa digawe munggah-kanggo ilustrasi titik.

19. [ , ] A eksprimen anyar yakuwi kanggo ngira efek saka nampa pangeling pesen teks ing migunani vaksinasi. 150 klinik-klinik, saben karo 600 patients layak, gelem melok. Ana biaya tetep 100 dolar kanggo saben Clinic sing arep digarap karo, lan biaya 1 dollar kanggo pesen teks sing arep dikirim. Luwih, apa klinik-klinik sing nggarap bakal ngukur kasil (apa wong nampa vaksinasi) for free. Nganggep sing duwe anggaran 1000 dolar.

    1. Ing kahanan apa bisa dadi luwih apik kanggo fokus sumber ing nomer cilik klinik-klinik lan ing kahanan apa bisa dadi luwih apik kanggo nyebar akeh?
    2. faktor apa bakal nemtokake ukuran efek cilik sing bakal bisa kanggo andal ndeteksi karo budget?
    3. Nulis memo penjelasan perdagangan-offs iki menyang funder potensial.

20. [ , ] A masalah utama karo kursus online punika attrition; akeh mahasiswa sing miwiti Kursus mungkasi munggah nempel-metu. Mbayangno sing digunakake ing platform learning online, lan desainer ing platform wis digawe baris proses visual dheweke mikiraken bakal mbiyantu nyegah mahasiswa saka ngeculake metu mesthi. Sampeyan pengin nyoba efek saka pananda garis ing mahasiswa ing Course ilmu sosial gedhe komputasional. Sawise ngarahake masalah sopan sing bisa tangi ing eksperimen punika, sampeyan lan kolega njaluk kuwatir sing mesthi bisa ora cukup siswa andal ndeteksi efek saka pananda garis. Ing petungan ing ngisor iki sampeyan bisa nganggep sing setengah saka siswa bakal nampa pananda garis lan setengah ora. Luwih, sampeyan bisa nganggep sing ana gangguan. Ing tembung liyane, sampeyan bisa nganggep sing peserta sing mung kena pengaruh dening apa padha nampa perawatan utawa kontrol; lagi ora ditepungake dening apa wong liya nampa perawatan utawa kontrol (kanggo definisi luwih formal, ndeleng Gerber and Green (2012) , Ch. 8). Mangga nglacak sembarang pemanggih tambahan sing nggawe.

    1. Upaminipun pananda garis wis samesthine kanggo nambah babagan mahasiswa sing rampung kelas dening 1 persentasi titik, apa ukuran sampel needed kanggo andal ndeteksi efek?
    2. Upaminipun pananda garis wis samesthine kanggo nambah babagan mahasiswa sing rampung kelas dening 10 poin persentase, apa ukuran sampel needed kanggo andal ndeteksi efek?
    3. Saiki mbayangno sing wis mbukak eksperimen lan siswa kang wis rampung kabeh bahan mesthi wis dijupuk ujian pungkasan. Nalika mbandhingaké nilai ujian pungkasan mahasiswa sing ditampa pananda garis kanggo sing durung, sampeyan nemokake, akeh kanggo surprise, sing mahasiswa sing durung nampa pananda garis bener ngetung luwih. Tegese iki sing pananda garis nyebabake siswa sinau kurang? Apa bisa sinau saka data kasil iki? (Petunjuk: Waca Gerber and Green (2012) , Ch 7.)

21. [ , ] Ing kertas apik banget, Lewis and Rao (2015) vividly ilustrasi watesan statistik dhasar nyobi malah massive. kertas-kang asliné judhul provokatif "Ing Near-Leave Measuring ing Returns Advertising" The -shows carane angel iku kanggo ngukur bali ing investasi iklan online, malah karo nyobi digital nglibatno mayuta-yuta pelanggan. More umum, kertas cetha nuduhake yen iku hard kanggo ngira efek perawatan cilik ngawulo data kasil rame. Utawa nyatakake diffently, kertas nuduhake sing kira-kira efek perawatan bakal interval kapercayan gedhe nalika impact-kanggo-standar-soko (\ (\ frac {\ delta \ bar {y}} {\ sigma} \)) aspek punika cilik. Pawulangan general penting saka kertas iki sing asil saka nyobi karo rasio impact-kanggo-standar-soko cilik (eg, bathi saka iklan kampanye) bakal unsatisfying. tantangan bakal kanggo nulis memo kanggo wong ing departemen marketing perusahaan evaluting eksprimen ngrancang kanggo ngukur bathi saka kampanye iklan. memo kudu didhukung karo gambar saka asil saka tiron komputer.

    Punika pituduh latar mburi sing perlu. Kabeh iki angka angka sing khas saka nyobi nyata kacarita ing Lewis and Rao (2015) :

    • Bathi, meter tombol kanggo iklan kampanye online, wis ditetepake dadi MediaWiki net saka kampanye (MediaWiki reged saka biaya kampanye minus kampanye) dibagi dening biaya kampanye. Contone kampanye sing wis ora ditrapake ing sales bakal duwe bathi saka -100% lan kampanye ngendi bathi kui padha witjaksono kanggo biaya bakal duwe bathi saka 0.

    • dodolan tegese saben pelanggan $ 7 karo soko standar saka $ 75.

    • kampanye wis samesthine kanggo nambah dodolan dening $ 0.35 per customer kang cocok karo sing Tambah ing MediaWiki $ 0,175 saben customer. Ing tembung liyane, ing wates reged iku 50%.

    • ukuran ngrancang eksperimen punika 200.000 wong, setengah ing grup perawatan lan setengah ing kelas kontrol.

    • biaya kampanye punika $ 0,14 saben peserta.

    Nulis memo evaluting èkspèrimèn punika. Sing bakal menehi rekomendasi ngetokake iki jajalan minangka ngrancang? Yèn mangkono, apa? Yen ora, owah-owahan apa sing bakal menehi rekomendasi?

    A memo apik bakal alamat cilik tartamtu; memo luwih bakal generalize saka cilik iki ing salah siji cara (eg, nuduhake carane owahan kaputusan minangka fungsi saka aspek impact-kanggo-standar-soko); lan memo gedhe bakal saiki asil kanthi umum.

22. [ , ] Apa padha kaya pitakonan sadurunge, nanging tinimbang simulasi sampeyan kudu nggunakake asil analisa.

23. [ , , ] Apa padha kaya pitakonan sadurunge, nanging nggunakake loro simulasi lan asil analisa.

24. [ , , ] Mbayangno sing wis ditulis ing memo ing ndhuwur nggunakake salah siji simulasi, asil analisa, utawa loro-lan wong saka departemen marketing ngajak nggunakake prabédan-in-beda estimator tinimbang prabédan ing liya estimator (ndeleng Section 4.6.2) . Nulis memo cendhek anyar penjelasan carane 0,4 korélasi sales sadurunge eksperimen punika lan dodolan sawise eksprimen bakal ngowahi kesimpulan Panjenengan.

25. [ , ] Supaya kanggo ngira-ngira efektifitas saka layanan Karir basis anyar, kantor layanan karier perguruan conducted nyoba kontrol randomized antarane 10.000 mahasiswa ngetik pungkasan taun sing sekolah. A langganan karo informasi log-in unik iki dikirim liwat email undhangan eksklusif kanggo 5,000 siswa dipilih kanthi acak, nalika 5.000 mahasiswa liyane ing kelas kontrol lan ora duwe langganan sing. Rolas sasi mengko, a survey tindakake-munggah (karo ora non-nanggepi) nuduhake yen ing loro perawatan lan kontrol kelompok, 70% saka mahasiswa wis aman Employment full-time ing lapangan milih sing (Tabel 4.5). Mangkono, dadi misale jek sing layanan basis wis ora ditrapake.

    Nanging, ilmuwan data pinter ing universitas nyawang data sing dicokot liyane rapet lan ketemu sing mung 20% ​​saka mahasiswa ing grup perawatan tau mlebu menyang akun sawise nampa email. Luwih, lan kaya-kaya kaget, antarane wong-wong sing wis mlebu menyang situs web mung 60% wis aman Employment full-time in lapangan sing milih, kang ana ngisor tinimbang tingkat kanggo wong sing ora mlebu lan luwih murah tinimbang tingkat kanggo wong ing kawontenan kontrol (Tabel 4.6).

    1. Nyedhiyani panjelasan apa uga wis kedaden.
    2. Apa sing rong cara kanggo ngetung ing efek saka perawatan ing èkspèrimèn punika?
    3. Given asil iki, kudu layanan karier perguruan nyedhiyani layanan Karir basis iki kanggo kabeh murid? Cukup dadi cetha, iki ora pitakonan karo Jawaban prasaja.
    4. Apa kudu padha apa sabanjuré?

    Petunjuk: Pitakonan iki dadi ngluwihi materi dijamin ing bab iki, nanging alamat masalah umum ing nyobi. Jinis desain eksperimen iki kadhangkala disebut desain dukungan amarga peserta disaranaké kanggo melu ing perawatan. Masalah iki conto kang disebut siji-sisi non-selaras (ndeleng Gerber and Green (2012) , Ch. 5)

26. [ ] Sawise ujian luwih, iku dadi metu sing eksperimen diterangake ing pitakonan sadurungé ana malah luwih rumit. Pranyata metu sing 10% saka wong ing kelas kontrol mbayar kanggo akses menyang layanan, lan padha rampung munggah karo tingkat Employment 65% (Tabel 4.7).

    1. Tulis email interpreters apa sampeyan mikir wis kedados lan rekomendasi mesthi saka tumindak.

    Petunjuk: Pitakonan iki dadi ngluwihi materi dijamin ing bab iki, nanging alamat masalah umum ing nyobi. Masalah iki conto kang disebut loro-sisi non-selaras (ndeleng Gerber and Green (2012) , Ch. 6)