ไม่ว่าคุณจะทำมันเองหรือการทำงานกับเพื่อนร่วมงานของผมอยากจะนำเสนอสองชิ้นของคำแนะนำที่ฉันได้พบประโยชน์อย่างยิ่งในการทำงานของตัวเอง ครั้งแรกคิดว่ามากที่สุดเท่าที่เป็นไปได้ก่อนที่ข้อมูลใด ๆ ที่ได้รับการเก็บรวบรวม คำแนะนำนี้อาจดูเหมือนชัดเจนกับนักวิจัยที่คุ้นเคยกับการทำงานการทดลอง แต่มันเป็นสิ่งสำคัญมากสำหรับนักวิจัยที่คุ้นเคยกับการทำงานร่วมกับแหล่งที่มาของข้อมูลขนาดใหญ่ (ดูบทที่ 2) กับแหล่งข้อมูลขนาดใหญ่มากที่สุดของงานที่เกิดขึ้นหลังจากที่คุณมีข้อมูล แต่การทดลองอยู่ตรงข้ามนั้น ที่สุดของการทำงานควรจะเกิดขึ้นก่อนที่คุณจะเก็บรวบรวมข้อมูล หนึ่งในวิธีที่ดีที่สุดที่จะบังคับตัวเองให้คิดอย่างรอบคอบเกี่ยวกับการออกแบบและการวิเคราะห์ของคุณคือการสร้างและลงทะเบียนแผนวิเคราะห์สำหรับการทดสอบของคุณ โชคดีมากของการปฏิบัติที่ดีที่สุดสำหรับการวิเคราะห์ข้อมูลการทดลองที่ได้รับอย่างเป็นทางการเข้ามาในแนวทางการรายงานและแนวทางเหล่านี้เป็นสถานที่ที่ดีที่จะเริ่มต้นเมื่อมีการสร้างแผนวิเคราะห์ของคุณ (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011)
ชิ้นที่สองของคำแนะนำคือว่าไม่มีใครทดลองเป็นไปได้ที่สมบูรณ์แบบและเนื่องจากการที่คุณควรพยายามที่จะออกแบบชุดของการทดลองที่เสริมสร้างซึ่งกันและกัน ผมเคยได้ยินแม้นี้อธิบายว่าเป็นกลยุทธ์ของกองเรือ; มากกว่าการพยายามที่จะสร้างเรือรบขนาดใหญ่หนึ่งคุณอาจจะดีขึ้นเรื่อย ๆ จำนวนมากของเรือขนาดเล็กที่มีความแข็งแกร่ง ชนิดเหล่านี้จากการศึกษาหลายการทดลองเป็นกิจวัตรประจำวันในด้านจิตวิทยา แต่จะหายากอื่น ๆ โชคดีที่มีต้นทุนต่ำของการทดลองดิจิตอลบางชนิดทำให้หลายการทดลองศึกษาเหล่านี้ได้ง่ายขึ้น
นอกจากนี้ผมต้องการที่จะนำเสนอสองชิ้นของคำแนะนำที่มีร่วมกันน้อยลง แต่ตอนนี้มีความสำคัญอย่างยิ่งสำหรับการออกแบบการทดลองยุคดิจิตอล: สร้างศูนย์ข้อมูลต้นทุนและสร้างจริยธรรมในการออกแบบของคุณ