Santa Margherita di:
[ , ] Berinsky e culleghi (2012) evaluates vutu Manicure Scissors à parte da riplicari trè spirimenti classicu. Replicate u classicu spirimentu Disease la furmazzioni asiatica par Tversky and Kahneman (1981) . Fà i vostri risultati incontru Tversky e Kahneman d'? Fà i vostri risultati incontru Berinsky e culleghi? Cosa-s'è qualcosa-articulu stu ci cunduci su usannu vutu Manicure Scissors di sperienze log?
[ , ] In una carta di qualità lingua-a-tied ntitulatu "Chjamu a Break Up," lu Lisca suciale Robert CIALDINI, unu di i scrittori di Schultz et al. (2007) , scrissi ca cci fu vulutu ritirari a mane da u so postu comu nu prufissuri, in parte per via di e sfide sfidau dû prufittu spirimenti chjosu in una disciplina (psiculugia) chì Mascagni principarmenti spirimenti labburatoriu (Cialdini 2009) . Leggi di carta d'CIALDINI, è ellu scrive un email ellu urging à reconsider a so ruttura-up à lume di u pussibulità di sperienze numerica. Usu li siquenti sunnu asempî specifichi di ricerca chì affruntà u so cuncerna.
[ ] In modu à parè soiu s'ellu piccula riisciuti nizziali lampatu-a o 'ubligazioni, van de Rijt è e culleghi (2014) , ntirvìnniru in quattru sistemi facennulu successu nantu à i participanti ritenuti accasu, e allura la misura lu impacts-à longu andà di stu successu arbitrarie. U pensate di qualchì altru sistema unni si putevanu curriri spirimenti simile? Evaluate sti sistemi à u nivellu di tematiche di valore scientificu, cunfusi mottu bassa (voir Chapter 2), e ètica.
[ , ] I risultati di nu spirimentu pò addipenni nantu à i participanti. Creà un tentativu e poi curri lu on Amazon Manicure Scissors vutu (MTurk) usannu dui diversi strategii récoltant. Prova à coglie i strategii spirimentu di e récoltant cusì chì i risultati seranu comu diversi comu pussìbbili. Per esempiu, u to strategie récoltant pudaria essa, di ricrutari na participanti à la matina e la sira, o pi cumpensu, i participanti cu altu è bassu spenni. Sti tipi di diffirenzi a strategia récoltant putìa cumannari a diffirenti Piscines di i participanti è diffirenti outcomes spirimintali. Comu diffirenti hanu i vostri risultati Accantu fora? What does chì palesani circa in spirimenti supra MTurk?
[ , , , ] I fratelli chì vi stati preparanu u studiu Alessandro Contagion (Kramer, Guillory, and Hancock 2014) . Usu dî risultati di un studiu observational nanzu da Kramer (2012) à decide di u numeru di i participanti à ogni pattu. Sti dui studii ùn currisponde benissimu cusì sia sicuru à la liste altrimente tutti li stori ca vi fari:
[ , , , ] Avanti li quistioni, sopra, ma chiuttostu ca usannu lu studiu observational nanzu da Kramer (2012) aduprà i risultati da a nu spirimentu naturale nanzu da Coviello et al. (2014) .
[ ] Sìa Rijt et al. (2014) e Margetts et al. (2011) à tempu guarisce i sperimenti chi studià u prucessu di genti firmatu un pitizioni. Compare e incuntrariu di u generu è scuperti di sti studii.
[ ] Dwyer, Maki, and Rothman (2015) purtava dui spirimenti campu nantu à i rapporti trà normi suciali è cumpurtamentu proenvironmental. Cca c'è lu mìticu di a so carta:
"Comu putemu scienza psiculoghjche esse utilized à incuragisce un cumpurtamentu proenvironmental? In dui studii, altri ri puntari a prumuzioni di u cumpurtamentu cunsirvazioni energia in tres publicu interrugatu i nfruenzi di normi pausi e rispunsabilità persunale. In Corso di 1, lu statutu di luce (vale à dì, in u o futoni) fu manipulated davanti à calchissia intrutu in un bagnu publicu elpa, signalling la norma pausi per chì a curcari. Participanti eranu assai più atta à fà chì i lumi Murat s'eddi Murat quannu si leva. In Corso di lingua 2, una cundizione applicàrisi fu nclusa ntê quali la norma di girendu nantu à a luce era dimustratu da un canta u populu, ma i participanti ùn eranu elli so rispunsabilità per lampiava comu on. responsabilità Personal muderatu la nfluenza di normi suciali nant'à u cumpurtamentu; quandu i participanti ùn eranu rispunsevuli di girendu nantu à u lume, l'influenza di u norma fu diminished. Quessi i risultati quì sottu cumu normi e rispunsabilità persunale pausi pò difiniri li jammi di quatrigliu proenvironmental. "
Veda i so carta e so caratterìstiche à euphorbia di studiu 1.
[ , ] Bâtiment, nant'à a quistione di nanzu, avà portanu fora u vostru generu.
[ ] Ci hè statu sustanziali dibattiti su tanti spirimenti cù i participanti ricrutati da Amazon Manicure Scissors vutu. In listessu tempu, ci hè statu ancu puru chidda di dibattiti su tanti spirimenti cù i participanti ricrutati da pupulazione studiantina pressu. Scrivi un media du-pagina comparing e cuntrastu lu Turkers e baccillieri circadori participanti. Your paragunà deve mette una ragiunata di dui resultati scentificu è logistical.
[ Libru d'] Jim Manzi Uncontrolled (2012) hè un spettaculu chì testi in lu putiri dâ spirimintazzioni in affari. In u libru ch'ellu relayed sta storia:
"I fu na vota a nu cunvegnu cun un veru locu los, un mil self-fattu ca nun avìa un culuri, understating intuitive di u putere di sperienze. U so cumpagnia spesu risorsi impurtante prova à creà gran puru a finestra magazzini ca avissi siducia i cunsumatori è cumerciali ingrossa, comu a saviezza cunvinziunali dettu ch'ellu si deve. Sperti rigurosu tistati generu dopu design, e in particulari u dischettu revue de test di più di un pirìudu d 'anni ci mostranu micca significativu effettu justifier di ogni novu generu si vede nantu à a vendita. Senior marketing è di marcanzia executives ncuntrau cu la CEO à vene è cunsultà sti risultati test di storica in Emma. Dopu à dassi tutti i dati spirimintali, ch'elli cuncluìu ca la saviezza cunvinziunali era puru a tortu-ca, finestra, ùn caccià a vendita. A so azzione forte era à accurtà u so spesi è sforzu in stu spaziu. Stu manifestanti drammaticamènti la capacitati di spirimintazzioni à overturn saviezza cunvinziunali. Quannu l'CEO era chjara: "I mo cunchiusioni è chì u vostru cuncettori di nun sunnu assai bonu. ' A so sola suluzione hè di fà cresce u penseru in generu si vede store, e pi pigghiarisi novu populu di fà la. " (Manzi 2012, 158–9)
Chi tipu di validità è li priaccupazzioni ca di l 'CEO?
[ ] Bâtiment, nant'à a quistione di nanzu, à pensà chì si eranu à a riunione, unni foru discurruti i risultati di i sperimenti. Qualessi sò quattru dumande chì vo pudia dumandà, unu per ogni tippu di validità (statìstiche, custruiscia, internu, e foras)?
[ ] Bernedo, Ferraro, and Price (2014) studia l 'effettu sette-annata di lu ntirventu fideltà acqua discritta in Ferraro, Miranda, and Price (2011) (voir Figura 4.10). In stu testu, Bernedo e culleghi ancu circatu di capiscia u miccanisimu daretu à l 'effettu di comparing u cumpurtamentu di famìglie ca hannu è ùn aghju spustatu dopu à u trattamentu era pruposta. Chì hè, all'incirca, si arrinesci a vidiri siddu lu malu cerumen la casa o di u corset.
[ ] In una seguita-up à Schultz et al. (2007) , Schultz e culleghi di fà una seria di trè spirimenti supra lu effettu di normi pausi e injunctive rilativa à differenti cumpurtamentu ambiente (Puericultura scumpartimentu) in dui cuntesti (un albergu è un Appartement timeshare) (Schultz, Khazian, and Zaleski 2008) .
[ ] In risposta à Schultz et al. (2007) , Canfield, Bruin, and Wong-Parodi (2016) curriri na serî di sperienze labburatoriu-cum'è a studiari lu disignu di Italiana ilettricu. Quì l'cuòmu avièvanu discrìviri lu in u astrattu:
"In un tentativu log-based, ogni participant vitti 'na pruposta di legi energia elettrica hypothetical di una famiglia cù usu rilitivamenti àuti energia elettrica, chì coprenu suggerimenti (a) usu storica, (b) comparisons à vicini, e (c) usu storica cù ditiriuramentu Sushi. Participanti vide ogni sorta infurmazione in unu di trè furmati cumprisi (a) tavule, (b) grafisimi barra, e (c) icona grafisimi. Avemu una lagnanza contru à trè scuperti principali. Prima, i cunsumatori caputu ogni tipu di nfurmazzioni 'elittricità-usari lu cchiù, quannu era prisentatu à un tavulinu, forsi parchì i toli di facilità à tempu lettura puntu sèmplice. Siconda, preferite è scopi à salvà energia elettrica eranu i più putenti di u nfurmazzioni storica usu, ndipinnenti di furmatu. Terzu, i cristiani cu bascia a litteratura energia anu capitu tuttu nantu à u menu ".
Ô cuntrariu di autri studi seguità-up, u risultatu maiò di ntiressi in Canfield, Bruin, and Wong-Parodi (2016) è hà dettu chì u cumpurtamentu ùn cumpurtamentu di a prucedura. Qualessi sò i punti di forza è weaknesses di stu tipu di studiu in un prugramma di ricerca più larga a prumuzioni di u risparmiu energia?
[ , ] Smith and Pell (2003) hè un satìricu mitacugnizioni-analisi di studii, mettendu li jammi di PARACHUTES. Iddi cunchiùdiri:
"Comu cu tanti altri chì hanu vucazione à impedisce a salute mali, li jammi di PARACHUTES hà micca stati sottumessi à a valutazione bundenza, aduprendu prucessi cuntrullati randomized. Addumanna di midicina, si basa testimunianze anu criticatu u adoption of quatrigliu rivalutatu, aduprendu dati solu observational. Avemu pensu chì ognunu pudia prufittà di s'è u cuncernati più radicali di midicina, si basa testimunianze urganizatu è participatu à una doppia cecu, cuntrullata randomized, inglese placebo, ghjudicatu Crossover di u Knights. "
Scrivi un gn-ED prupizia di un ghjurnale readership ginirali, comu l 'The New York Times, basendusi nant'à contru à u fetishization di testimunianze spirimintali. Ch'ellu spécifique, li siquenti sunnu asempî cuncreti. Amarore: Vedi anche, Bothwell et al. (2016) e Deaton (2010)
[ , , ] U Casamentu-in-diffirenzi estimators di un effettu cure pò esse più precisa chè estimators diffarenza-in-time. Scrivi un media à un ingenieru in u cumandante di A essai / B at a cumpagnia a sucetà di cumunicazione principiu-up spiigà i valori di u avvicinamentu diffarenza-in-diffirenzi di curriri nu spirimentu online. A media deve mette una durata di u prublemu, certi intuizione circa li cunnizzioni sottu à ciò chì u estimator diffarenza-in-una diffarenza chì outperform u estimator diffarenza-in-tempu, e un studiu francese simulation sèmplice.
[ , ] Giannina Loveman era un prufissuri di Harvard Business School, prima di divintari l 'CEO di humeur l', unu di i più grandi cumpagnii Casinò in u mondu. Quannu si trasfirìu a humeur l', Loveman trasfurmatu a sucetà cù una rigularità prugramma fidilità flier-com'è ca lu studiusu densita limitati, di dati circa un cumpurtamentu clienti. In su cúcuru di stu sistema di misura, sempri-indà, a Cumpagnìa si messe in sperienze. Per esempiu, si putissi curriri a nu spirimentu a evaluate effettu di na foutre di una notte albergu senza di i clienti incù un fasciu Klenike specifichi. Ecco comu Loveman qualificatu a so impurtanza di spirimintazzioni à pratiche los cutidianu di l'humeur:
«Hè cum'è vo ùn impurtunà li fimmini, nun arrubbari, è voi ² à avè un gruppu di cuntrollu. Chistu è unu di li cosi ca si pò perde u vostru travagliu di at Harrah's-micca in un gruppu di cuntrollu. " (Manzi 2012, 146)
Scrivi una mail a una nova impiigatu strittu, perchè Loveman crede hè cusì impurtante à avè un gruppu di cuntrollu. You deve pruvà à cumprendi un esempiu di-sonai a vera o cumposta da-a illustrate u vostru puntu.
[ , ] A nova spirimentu ghjova à cuntà i effettu di riciviri reminders missaghju testu nantu à Corsa vaccinazione. 150 cliniche, ognunu cù 600 maladi seguitatu, s'elli a participari. Ci hè un costu fissu di 100 euru per ogni clinica vo vulete a travagghiari cu, e lu in custa 1 carenza di ogni missaghju testu ca ti vogghiu a mannari. In seguita, ogni cliniche chì vi sò travagghiannu cu ti misurà u risultatu (siddu quarchidunu ricivutu un vaccinazione) for free. Suppona chì vo avete un bugettu di 1000 euru.
[ , ] Un prublema maiò cun corsi di ligna hè attrition; parechji studianti chì cumincianu Corsi di guerra, dropping-out. Pensa chì vi sò travagliu à un rimpianu amparera online, è un criatori di u rimpianu hà criatu na barra visuale u prugressu chì pensa m'aiuti impidiscia i studienti da dropping name fora di u corsu. Vo vulete pruvà effettu di u caffè u prugressu nantu à i studienti in una grande corsu di scienza suciali programming. Dopu à mienzu ogni edizzioni etici ca putissi à truvà in u sperimentu, voi è i vostri culleghi arrivare era proccupata ca lu corsu putissi ùn ti serebbe abbastatu studianti à detect reliably l'effetti di u caffè u prugressu. In i calculi sottu pudete suppona chì a metà di i studianti vi ghjunghjerà u caffè u prugressu è mità micca. In seguita, si pò suppona chì ùn ci hè nimu, vinniri. Nta àutri paroli, si pò suppona chì i participanti sò mintuvati, solu par s'ellu si pigghiava lu malu o di cuntrollu; ch'elli ùn sò micca compru da ch'eddi fussini altri populi ricivìu lu malu o di cuntrollu (per una definizione cchiù furmali, voir Gerber and Green (2012) , Ch. 8). Please tene l 'ombra di qualchi iputesi alimenta ca rigalati.
[ , ] Nta na bedda carta, Lewis and Rao (2015) vividly illustrate na limitazzioni di statìstiche funnamintali di anchi massiccia statua di sperienze. A carta-ca urigginariamenti avìa lu tìtulu pruvucanti "On lu Mashreq-impussibilità di misurazzioni u Returns à Advertising" -shows quantu difficili è à misurà u ritornu in u investimentu di Annunci di distancia, anchi cu tanti spirimenti digitale chi trattàvanu milioni di clienti. Più in generale, la carta, mostra chjaramente ch'ellu ùn hè dura à cuntà picculu effettu cure à mezu à données risultatu vanniaturi. O Statu indifinitu diffently, Ritorna la carta comu insegna chì l 'effetti cure piscadori averemu tantu in tantu sè stessi, grande, quannu l' affettu-di-lingua standard-deviation (\ (\ frac {\ delta dû \ barra {Y}} {\ linguistischer} \)) inquadramentu è chjuchi. L 'mpurtanti lezziò generale da sta carta, hè chì i risultati da tanti spirimenti incù picculi inquadramentu affettu-di-lingua standard-deviation (per esempiu, ROI di li campagni A ad) sarà unsatisfying. Your sfida serà à scrive un media à qualchissia in u dipartimentu u marketing di a vostra cumpagnia evaluting nu spirimentu prevista à misurà u ROI di na spidizzioni al. Your media deve esse finanzatu incù grafisimi di i risultati di Simulation urdinatore.
Parlami D'arcuni nfurmazzioni fondo, chì vo pudia bisognu. Tutti 'ssi valori numèrica sò tipichi di u veru usu hà dettu chì a Lewis and Rao (2015) :
ROI, una mètrica chiavi di li campagni A ad online, pi eni difinuta comu lu prufittu riti da la spidizzioni (prufittu lorda da costu la campagna di Minus di spidizzioni) divisu da u costu di la campagna. Per esempiu, una campagna chì avianu nudda mprissioni suprô vendita un'è un ROI di -100% è na campagna unni prufitti caricate eranu uguali à spesi un'è un ROI de 0.
u vulume tempu pi cunsumadori è $ 7 cù una deviation mudellu di $ 75.
la spidizzioni ntô cumplessu si spetta à fà cresce a vendita par $ 0,35 € per cunsumadori chì currisponde à una crèscita di a prufittu di $ 0,175 € per clienti. Nta àutri paroli, lu margini lorda hè di 50%.
a taglia previstu di lu spirimèntu jè quasi 200.000 pirsuni, mezzo, in u gruppu fanga è mezu in u gruppu di cuntrollu.
u costu di la campagna hè $ 0,14 € per participant.
Scrivi un media evaluting stu spirimentu. Cosa vi cunsigliemu sparannu stu spirimentu cum'è prevista? S'è accussì, picchì? Si nun, ciò chì canciamenti vi cunsigliemu?
A bona media vi affruntà stu casu spicìficu; un media megliu sarà più generale da stu casu, in unu modu (per esempiu, mostra quantu u canciamenti decisione cum'è una funzione di u prezzu affettu-di-lingua standard-deviation); è 'na gran media si una prisentazione un risultatu cumplettamente generalized.
[ , ] Fai lu stissu comu a quistione di nanzu, ma chiuttostu ca Simulation vo duvite aduprà i risultati philologica.
[ , , ] Fai lu stissu comu a quistione di nanzu, ma putìri sia addupirari Simulation è risultati philologica.
[ , , ] I fratelli chì vo avete scrittu i media scritti più-usannu o francese simulation, i risultati philologica, o sia-e calchissia da u Dipartimentu di u marketing ricumanda usannu un estimator diffarenza-in-diffirenzi piuttostu cà una diffarenza à i mezi estimator (voir Section 4.6.2) . Scrivi un novu media, Augusto spieghendu à correlation 0.4 trà a vendita prima di lu spirimentu di e vèndite doppu lu spirimentu di avissi canciari u vostru cunchiusioni.
[ , ] In modu à evaluate li jammi di un novu serviziu carriera Web-based, un ufficiu servizii carriera universitaria purtava 'na speci di lu cuntrollu randomized à mezu à 10.000 studenti, intrendu in lu so annu finale di a scola. A abbunamentu senza cu unica infurmazione di strada-in fù mandatu à traversu un suggetu invitu per mail à 5000 di i studianti ritenuti accasu, mentri l 'àutri 5.000 studianti sò in u gruppu di cuntrollu è ùn sò micca un abbunamentu. Dodici mesi dopu, ntôn rilivamentu seguita-up (cu non-risposta), mostra chì in i dui i gruppi di cure è u cuntrollu, 70% di i studianti anu fatta in favore full-time in u so campu di scigghiuta (Table 4.5). Cusì, mi pare chì u serviziu Web-based, avianu nudda mprissioni.
A ogni modu, un scienziatu dati risistenti à l 'università taliau la data, un pocu di più strettu è trovu chì solu u 20% di i studienti in u gruppu cure sempre identificatu in u racontu, dopu ad avè ricivutu i mail. In seguita, è assai, assai, à mezu à quelli chì sò à entre in u situ, solu 60% avia fatta in favore full-time in u so campu di a scelta, chì era prufunnu di lu tassu di pirsuni ca nun ci Scie à e prufunnu di lu tassu di genti a i cundizioni di cuntrollu (Table 4.6).
Amarore: Sta quistioni va arreri a lu matiriali cupartu in sta lezziò, ma i saluti à tematiche cumunu in sperienze. Stu tipu di generu spirimintali ca è spissu discritta comu nu disignu du ncuraggiamentu perchè i participanti sò anu à impegnà in la fanga. Stu prublema hè un esempiu di ciò chì si chjama un-schiera non-di u rispettu (ver Gerber and Green (2012) , Ch. 5)
[ ] Dopu à più bone, si gira fora ca lu spirimentu di discritta in a quistione di nanzu era ancu più cumplessa. Hè s'arrivela chì 10% di u pòpulu in u gruppu di cuntrollu pagatu per un accessu à u serviziu, è si finìu cu l 'acqua di favore di 65% (Table 4,7).
Amarore: Sta quistioni va arreri a lu matiriali cupartu in sta lezziò, ma i saluti à tematiche cumunu in sperienze. Stu prublema hè un esempiu di ciò chì hè chjamatu duie-schiera non-di u rispettu (ver Gerber and Green (2012) , Ch. 6)
Group | Size | tariffa Impiegu |
---|---|---|
accessu accurdata à situ | 5000 | 70% |
Ùn hà permessu d 'accessu à situ | 5000 | 70% |
Group | Size | tariffa Impiegu |
---|---|---|
Minti accessu à situ, è ancu in | 1000 | 60% |
Minti accessu à situ, è mai à entre in | 4.000 | 85% |
Ùn hà permessu d 'accessu à situ | 5000 | 70% |
Group | Size | tariffa Impiegu |
---|---|---|
Minti accessu à situ, è ancu in | 1000 | 60% |
Minti accessu à situ, è mai à entre in | 4.000 | 72,5% |
Ùn hà permessu d 'accessu à situ è pagatu apposta pi lu | 500 | 65% |
Ùn hà permessu d 'accessu à situ è ùn hà pagari la scola pi lu | 4500 | 70,56% |