4.6 แนะนำ

ไม่ว่าคุณจะทำอะไรด้วยตัวเองหรือทำงานร่วมกับคู่หูฉันอยากให้คำแนะนำสี่ชิ้นที่ฉันพบว่ามีประโยชน์อย่างยิ่งในการทำงานของตัวเอง คำแนะนำสองข้อแรกจะนำไปใช้กับการทดสอบใด ๆ ในขณะที่ข้อที่สองมีความเฉพาะเจาะจงมากขึ้นกับการทดลองในยุคดิจิทัล

คำแนะนำแรกของฉันสำหรับเมื่อคุณกำลังทำการทดสอบคือคุณควรคิดให้มากที่สุดเท่าที่จะเป็นไปได้ก่อนที่จะมีการรวบรวมข้อมูลใด ๆ อาจเป็นที่ประจักษ์แก่นักวิจัยที่คุ้นเคยกับการทดลองใช้ แต่สิ่งสำคัญสำหรับผู้ที่คุ้นเคยกับการทำงานกับแหล่งข้อมูลขนาดใหญ่ (ดูบทที่ 2) ด้วยข้อมูลดังกล่าวการทำงานส่วนใหญ่จะทำ หลังจากที่ คุณมีข้อมูล แต่การทดลองตรงกันข้าม: งานส่วนใหญ่ควรทำ ก่อนที่ คุณ จะ รวบรวมข้อมูล วิธีที่ดีที่สุดประการหนึ่งในการบังคับให้คุณคิดอย่างรอบคอบก่อนที่คุณจะรวบรวมข้อมูลคือการสร้างและลงทะเบียนแผนการวิเคราะห์ก่อนการทดสอบของคุณซึ่งโดยทั่วไปจะอธิบายการวิเคราะห์ที่คุณดำเนินการ (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016)

ข้อแนะนำทั่วไปข้อที่สองของฉันคือไม่มีการทดสอบแบบใดแบบหนึ่งที่สมบูรณ์แบบและด้วยเหตุนี้คุณควรพิจารณาการออกแบบชุดการทดลองที่เสริมสร้างซึ่งกันและกัน ฉันเคยได้ยินเรื่องนี้ว่าเป็น ยุทธศาสตร์ของกองเรือรบ แทนที่จะพยายามสร้างหนึ่งเรือรบขนาดใหญ่คุณควรสร้างเรือขนาดเล็กจำนวนมากที่มีจุดแข็งที่เสริมกัน การศึกษาหลายชุดเป็นแบบฝึกหัดในด้านจิตวิทยา แต่ก็หาได้ยากในที่อื่น โชคดีที่ต้นทุนต่ำสำหรับการทดลองแบบดิจิทัลทำให้การศึกษาหลายชุดง่ายขึ้น

เนื่องจากตอนนี้ฉันต้องการเสนอคำแนะนำสองแบบที่เจาะจงมากขึ้นสำหรับการออกแบบการทดลองในยุคดิจิทัล: สร้างข้อมูลต้นทุนผันแปรเป็นศูนย์ (หัวข้อ 4.6.1) และสร้างจริยธรรมในการออกแบบของคุณ (ส่วน 4.6.2)