4.6 Tư vấn

Cho dù bạn đang làm việc hay làm việc với một đối tác, tôi muốn cung cấp bốn lời khuyên mà tôi đã tìm thấy đặc biệt hữu ích trong công việc của riêng tôi. Hai lời khuyên đầu tiên áp dụng cho bất kỳ thử nghiệm nào, trong khi hai phần tư thứ hai cụ thể hơn cho các thử nghiệm kỹ thuật số.

Lời khuyên đầu tiên của tôi khi bạn đang thực hiện thử nghiệm là bạn nên suy nghĩ càng nhiều càng tốt trước khi bất kỳ dữ liệu nào được thu thập. Điều này có vẻ hiển nhiên đối với các nhà nghiên cứu đã quen với việc chạy thử nghiệm, nhưng điều rất quan trọng đối với những người quen làm việc với các nguồn dữ liệu lớn (xem chương 2). Với những nguồn như vậy hầu hết công việc được thực hiện sau khi bạn có dữ liệu, nhưng các thí nghiệm ngược lại: hầu hết công việc phải được thực hiện trước khi bạn thu thập dữ liệu. Một trong những cách tốt nhất để ép buộc bạn suy nghĩ cẩn thận trước khi thu thập dữ liệu là tạo và đăng ký một kế hoạch phân tích trước cho thử nghiệm của bạn, trong đó bạn mô tả cơ bản phân tích mà bạn sẽ tiến hành (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .

Lời khuyên chung thứ hai của tôi là không có thử nghiệm đơn lẻ nào là hoàn hảo, và vì lý do đó, bạn nên cân nhắc thiết kế một loạt các thí nghiệm củng cố lẫn nhau. Tôi đã nghe điều này được mô tả là chiến lược armada ; thay vì cố gắng xây dựng một thiết giáp hạm lớn, bạn nên xây dựng rất nhiều tàu nhỏ hơn với sức mạnh bổ sung. Những loại nghiên cứu đa thí nghiệm này thường xuyên trong tâm lý học, nhưng chúng hiếm gặp ở những nơi khác. May mắn thay, chi phí thấp của một số thử nghiệm kỹ thuật số làm cho các nghiên cứu đa thử nghiệm dễ dàng hơn.

Với bối cảnh chung, bây giờ tôi muốn cung cấp hai lời khuyên cụ thể hơn để thiết kế các thí nghiệm tuổi kỹ thuật số: tạo ra dữ liệu chi phí biến đổi không (phần 4.6.1) và xây dựng đạo đức vào thiết kế của bạn (phần 4.6.2).