Nghiên cứu thử: mục đích là tìm ra cái sẽ hỏng, không phải tìm ra kết quả

Một nghiên cứu thử chạy trơn tru và cho kết quả đẹp thường là nghiên cứu thử thất bại — nó chưa đủ khắc nghiệt để lộ ra vấn đề.

Mục đích của nó là tìm ra cái sẽ hỏng, ở lúc còn sửa được.

Nó kiểm cái gì

• Câu hỏi có được hiểu đúng như bạn định không.
• Quy trình thu thập mất bao lâu thật.
• Tỷ lệ đồng ý tham gia thực tế.
• Thiết bị và biểu mẫu có vấn đề gì.
• Dữ liệu ra có dạng phân tích được không.

Điểm cuối là điểm quan trọng nhất

• Chạy toàn bộ quy trình phân tích trên dữ liệu thử.
• Nhiều vấn đề chỉ hiện ra khi bạn thử phân tích.
• Phát hiện thiếu một biến ở giai đoạn này còn thêm được.
• Phát hiện sau khi thu xong thì không.

Nó không kiểm cái gì

• Không dùng kết quả thử để tính cỡ mẫu — ước lượng từ mẫu nhỏ rất kém tin cậy.
• Không kết luận về giả thuyết từ nghiên cứu thử.
• Không dùng nó để quyết định có đáng làm tiếp không, trừ vấn đề khả thi.

Quy mô

• Mười tới ba mươi trường hợp thường đủ cho mục đích khả thi.
• Quan trọng là đa dạng, không phải số lượng.
• Chọn cả trường hợp khó, không chỉ trường hợp dễ.

Sau khi thử

• Ghi lại từng vấn đề gặp phải và cách xử lý.
• Nếu sửa quy trình nhiều, dữ liệu thử không gộp được vào nghiên cứu chính.
• Nêu phần này trong bài — nó cho thấy quy trình đã được kiểm.

Một điều đáng nhớ

Chạy toàn bộ quy trình phân tích trên dữ liệu thử, tới tận bảng kết quả cuối.

Đó là bước duy nhất phát hiện được rằng bạn quên đo một biến cần thiết — và nó là loại lỗi mà nếu tìm ra sau khi thu thập xong thì không còn cách nào sửa.

Câu hỏi thường gặp