4.6 ייעוץ

בין אם אתה עושה את זה בעצמך או לעבוד עם שותף, הייתי רוצה להציע שתי עצות כי אני כבר נמצא מועיל במיוחד בעבודה שלי. ראשית, חשוב ככל האפשר לפני כל הנתונים נאספו. עצה זו כנראה נראה ברורה לחוקרים רגילים לרוץ ניסויים, אבל חשוב מאוד עבור חוקרים רגילים לעבוד עם מקורות נתונים גדולים (ראה פרק 2). עם מקורות נתונים גדולים ביותר של העבודה קורית אחרי שיש לך את הנתונים, אבל ניסויים הם ההפך; רוב העבודה צריך לקרות לפני שאתה לאסוף נתונים. אחת הדרכים הטובות ביותר כדי להכריח את עצמך לחשוב היטב על התכנון והניתוח שלך הוא ליצור ולרשום תכנית ניתוח עבור הניסוי שלך. למרבה המזל, רבים של שיטות-הטוב ביותר עבור ניתוח של נתוני הניסוי עוגנו להנחיות הדיווח, והנחיות אלה הם מקום מצוין להתחיל בעת יצירת תוכנית הניתוח שלך (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011) .

היצירה השנייה של ייעוץ היא שאף ניסוי אחד לא הולך להיות מושלם, ובגלל זה, כדאי לך לנסות לתכנן סדרה של ניסויים מחזקים אחד את השני. שמעתי אפילו זה מתואר אסטרטגית הצי; במקום לנסות לבנות ספינת קרב אחד גדול, אתה יכול להיות הרבה יותר טוב מבנה של ספינות קטנות יותר עם עוצמות משלימות. אלו סוגים של מחקרים רבים-ניסוי הם שיגרתי בפסיכולוגיה, אבל הם נדירים במקום אחר. למרבה המזל, הודות לעלות הנמוך של ניסויים דיגיטליים מסוימים עושה אלה סוג של ניסוי רב לומד יותר קל.

כמו כן, הייתי רוצה להציע שתי עצות כי הם נפוצים פחות עכשיו, אבל הם חשובים במיוחד עבור תכנון ניסויים בעידן דיגיטלי: ליצור אפס נתוני עלות שוליים ולבנות אתיקה לתוך העיצוב שלך.