Một học viên cao học đưa đề cương với câu hỏi: “Mạng xã hội ảnh hưởng thế nào đến kết quả học tập của sinh viên năm nhất?”. Phương pháp: khảo sát một lần 300 sinh viên, hỏi số giờ dùng mạng mỗi ngày và điểm trung bình học kỳ. Hội đồng góp ý một câu duy nhất: “Dữ liệu này không trả lời được chữ ảnh hưởng”. Học viên sửa thống kê, thêm biến kiểm soát, đổi sang mô hình phức tạp hơn — và vẫn không qua.
Vấn đề không nằm ở phân tích. Câu hỏi là câu hỏi nhân quả, còn thiết kế chỉ cho phép trả lời câu hỏi liên hệ. Hai thứ không khớp nhau từ đầu, và không kỹ thuật nào ở cuối dây chuyền sửa được. Việc đầu tiên khi có một câu hỏi là gọi đúng tên nó.
Bốn loại câu hỏi hay gặp
Cách chia có nhiều phiên bản, nhưng trong thực hành, gần như mọi câu hỏi đều rơi vào một trong bốn nhóm sau:
| Loại | Hỏi cái gì | Ví dụ |
|---|---|---|
| Mô tả | Bao nhiêu, ở mức nào, phân bố ra sao | Bao nhiêu phần trăm giáo viên tiểu học ở một tỉnh dạy thêm ngoài giờ? |
| Liên hệ (so sánh, tương quan) | Hai thứ có đi cùng nhau không, nhóm này khác nhóm kia không | Giáo viên trẻ và giáo viên lâu năm có khác nhau về số giờ dạy thêm không? |
| Nhân quả | Nếu thay đổi X thì Y thay đổi bao nhiêu | Tăng phụ cấp có làm giảm số giờ dạy thêm không? |
| Quá trình, ý nghĩa | Diễn ra thế nào, người trong cuộc hiểu ra sao | Giáo viên quyết định nhận dạy thêm qua những cân nhắc nào? |
Không loại nào “cao cấp” hơn loại nào. Một câu hỏi mô tả làm cẩn thận, với mẫu đại diện và đo lường rõ ràng, thường có ích cho chính sách hơn một câu hỏi nhân quả làm vội. Điều quan trọng là mỗi loại có điều kiện riêng để được trả lời.
Đọc động từ để nhận diện, rồi kiểm lại bằng câu hỏi ngược
Động từ trong câu hỏi thường lộ ra loại của nó:
- Mô tả: thực trạng, mức độ, tỷ lệ, phân bố, đặc điểm.
- Liên hệ: khác biệt, tương quan, gắn với, đi kèm, có liên quan.
- Nhân quả: ảnh hưởng, tác động, làm tăng, làm giảm, hiệu quả của, nhờ, do.
- Quá trình: như thế nào, vì sao (theo nghĩa trải nghiệm), cách thức, ý nghĩa.
Nhưng động từ hay đánh lừa. Rất nhiều câu hỏi viết “ảnh hưởng” chỉ vì người viết thấy từ đó nghe có trọng lượng. Phép kiểm ngược đơn giản: hãy hỏi người đọc kết quả sẽ làm gì với nó. Nếu họ định dùng kết quả để quyết định có nên can thiệp không — thay đổi chính sách, áp dụng chương trình, bỏ một quy định — thì đó là câu hỏi nhân quả, dù bạn có viết bằng chữ gì. Nếu họ chỉ cần biết tình hình đang ra sao để phân bổ nguồn lực, đó là câu hỏi mô tả.
Ví dụ: “Thực trạng sử dụng điện thoại trong giờ học” nghe như mô tả. Nhưng nếu phần kiến nghị của bạn định viết “nhà trường nên cấm điện thoại để nâng điểm”, thì thực chất bạn đang ngầm trả lời một câu hỏi nhân quả mà dữ liệu mô tả không chống đỡ được. Hoặc sửa câu hỏi, hoặc sửa phần kiến nghị — đừng để hai thứ lệch nhau.
Mỗi loại đòi hỏi gì ở thiết kế
Câu hỏi mô tả: mẫu là tất cả
Câu hỏi mô tả sống chết theo việc mẫu có đại diện cho tổng thể bạn nói tới hay không. Ba trăm phiếu khảo sát phát tại hai trường thuận tiện cho ra một con số chính xác về hai trường đó, và gần như không nói gì về cả tỉnh. Thứ cần đầu tư: khung chọn mẫu, cách rút mẫu, tỷ lệ trả lời, và định nghĩa rõ đơn vị đo (một “giờ dạy thêm” tính thế nào, theo tuần hay theo tháng). Phân tích thường đơn giản: tỷ lệ, trung bình, trung vị, kèm khoảng tin cậy.
Câu hỏi liên hệ: so sánh phải công bằng về đo lường
Khi so sánh hai nhóm, điều kiện tối thiểu là hai nhóm được đo bằng cùng một công cụ, cùng thời điểm, cùng cách hỏi. Một lỗi hay gặp: nhóm A trả lời phiếu giấy tại lớp, nhóm B trả lời trực tuyến ở nhà, rồi kết luận hai nhóm khác nhau. Khác biệt có thể đến hoàn toàn từ cách thu thập. Câu hỏi liên hệ cho phép nói “đi kèm”, “gắn với”, và dừng ở đó.
Câu hỏi nhân quả: phải có cái để so với kịch bản không xảy ra
Muốn nói X gây ra Y, bạn cần một cách ước lượng Y sẽ thế nào nếu X không xảy ra. Có vài con đường, xếp theo mức độ thuyết phục giảm dần:
- Thực nghiệm phân nhóm ngẫu nhiên: bạn quyết định ai nhận can thiệp bằng cách bốc thăm.
- Bán thực nghiệm: một sự kiện bên ngoài tạo ra nhóm nhận và nhóm không nhận theo cách gần như ngẫu nhiên — một ngưỡng điểm, một chính sách áp dụng ở tỉnh này trước tỉnh kia.
- Dữ liệu quan sát với kiểm soát: bạn đo các yếu tố gây nhiễu và điều chỉnh. Đây là con đường yếu nhất, vì luôn còn yếu tố bạn không đo được.
Nếu không có con đường nào khả thi, hãy hạ câu hỏi xuống mức liên hệ. Không xấu hổ gì cả. Một kết quả liên hệ trình bày trung thực có giá trị hơn một kết luận nhân quả mà hội đồng nào cũng bác được.
Câu hỏi quá trình: chọn người hiểu chuyện, không chọn người đại diện
Ở đây mẫu không cần đại diện theo nghĩa thống kê; cần đủ đa dạng để thấy các cách khác nhau mà quá trình diễn ra. Phỏng vấn sâu, quan sát, phân tích tài liệu là công cụ chính. Đầu ra không phải con số mà là một lời giải thích có cấu trúc: các bước, các điều kiện, các điểm rẽ.
Dấu hiệu câu hỏi đang trộn hai loại
Câu hỏi lai là nguồn rắc rối phổ biến nhất trong đề cương sau đại học. Vài dấu hiệu:
- Tên đề tài có chữ “thực trạng và giải pháp”. Phần thực trạng là mô tả, phần giải pháp ngầm khẳng định quan hệ nhân quả. Nếu giữ cả hai, phần giải pháp phải ghi rõ là đề xuất dựa trên thực trạng, chưa được kiểm chứng.
- Câu hỏi có “các yếu tố ảnh hưởng đến”, nhưng thiết kế là khảo sát cắt ngang. Đây thực chất là câu hỏi “các yếu tố đi kèm với”.
- Câu hỏi hỏi “như thế nào” nhưng phương pháp là bảng hỏi đóng với thang 5 mức. Bảng hỏi đóng không cho thấy quá trình; nó cho thấy mức độ đồng ý với những quá trình mà bạn đã nghĩ sẵn.
Cách tách: viết ra từng câu hỏi con, mỗi câu một loại, rồi gán cho từng câu nguồn dữ liệu và cách phân tích riêng. Nếu một câu hỏi con không có nguồn dữ liệu nào trả lời được, bỏ nó đi, hoặc chuyển xuống phần hướng nghiên cứu tiếp theo.
Viết lại câu hỏi cho khớp với dữ liệu bạn thật sự có
Quay lại ví dụ mở đầu. Với dữ liệu khảo sát một lần, có ba cách viết lại trung thực:
- Hạ về liên hệ: “Số giờ dùng mạng xã hội mỗi ngày có tương quan với điểm trung bình học kỳ của sinh viên năm nhất không, sau khi tính đến giới, ngành học và điểm đầu vào?”
- Đổi thiết kế để nâng lên nhân quả: theo dõi cùng nhóm sinh viên qua hai học kỳ, hoặc tận dụng một thay đổi bên ngoài (một trường áp dụng quy định hạn chế điện thoại, trường khác thì không).
- Chuyển sang quá trình: “Sinh viên năm nhất sắp xếp thời gian giữa mạng xã hội và việc học ra sao trong mùa thi?” — phỏng vấn sâu 15 đến 25 người.
Cả ba đều là đề tài hợp lệ. Cái không hợp lệ là giữ chữ “ảnh hưởng” với dữ liệu của cách thứ nhất.
Câu hỏi quá trình không phải phương án dự phòng
Nhiều người coi câu hỏi “như thế nào” là đường lui khi không đủ điều kiện làm định lượng. Cách nghĩ đó làm hỏng cả hai phía. Câu hỏi quá trình có điều kiện riêng của nó: người được chọn phải thật sự trải qua quá trình đó, người phỏng vấn phải đủ thời gian để đi sâu, và phần phân tích phải cho ra một cấu trúc giải thích chứ không phải danh sách trích dẫn. Một nghiên cứu phỏng vấn mười người rồi liệt kê “ý kiến của người tham gia” không trả lời câu hỏi quá trình; nó chỉ là một khảo sát rất nhỏ bằng lời.
Ngược lại, câu hỏi quá trình lại là bạn đồng hành tốt của câu hỏi nhân quả. Khi một thực nghiệm cho thấy chương trình có tác dụng, phần phỏng vấn đi kèm giải thích vì sao, ở đâu nó tác dụng mạnh, ở đâu yếu. Hai loại câu hỏi bổ sung cho nhau thay vì thay thế nhau.
Bảng tự kiểm năm dòng trước khi viết phần phương pháp
- Câu hỏi chính thuộc loại nào? Viết một từ: mô tả, liên hệ, nhân quả, hay quá trình.
- Người dùng kết quả sẽ quyết định gì dựa trên câu trả lời? Quyết định đó đòi hỏi loại câu hỏi nào?
- Thiết kế dự kiến cho phép trả lời loại nào? Nếu thấp hơn loại ở dòng 1, sửa một trong hai.
- Các câu hỏi con có cùng loại với câu hỏi chính không? Câu nào khác loại thì có nguồn dữ liệu riêng chưa?
- Động từ trong tên đề tài, tóm tắt và phần kiến nghị có cùng mức với thiết kế không?
Năm dòng này mất mười phút. Chúng tránh được loại góp ý mà không lượng chỉnh sửa thống kê nào xử lý được: “dữ liệu không trả lời câu hỏi”.
Câu hỏi thường gặp
Câu hỏi “các yếu tố ảnh hưởng” làm bằng khảo sát cắt ngang có được không?
Được, nếu bạn hiểu và viết rõ rằng kết quả chỉ cho biết các yếu tố đi kèm với biến kết quả. Nên đổi chữ “ảnh hưởng” thành “liên quan” trong câu hỏi, kết quả và kiến nghị để khớp với thiết kế.
Câu hỏi mô tả có bị xem là quá đơn giản cho luận văn thạc sĩ không?
Không nhất thiết. Một nghiên cứu mô tả có mẫu đại diện, đo lường chuẩn và phân tích theo nhóm cẩn thận thường được đánh giá cao hơn một nghiên cứu nhân quả có thiết kế yếu.
Một đề tài có thể có nhiều loại câu hỏi cùng lúc không?
Có, miễn là mỗi câu hỏi con có nguồn dữ liệu và cách phân tích riêng đủ để trả lời nó. Rắc rối chỉ xảy ra khi một bộ dữ liệu được dùng để trả lời câu hỏi mà nó không thể trả lời.
Làm sao biết mình đang hỏi câu hỏi nhân quả?
Hỏi xem kết quả sẽ được dùng để quyết định có nên thay đổi điều gì không. Nếu có, đó là câu hỏi nhân quả, bất kể câu chữ bạn dùng.
Không làm được thực nghiệm thì có cách nào trả lời câu hỏi nhân quả?
Có thể dùng bán thực nghiệm khi có một sự kiện hoặc quy định tạo ra nhóm so sánh tự nhiên, hoặc dùng dữ liệu theo dõi dọc. Nếu không có điều kiện nào như vậy, nên hạ câu hỏi xuống mức liên hệ.