Một khảo sát ý kiến làm đúng cách đi qua năm bước: xác định rõ mình muốn biết về nhóm người nào, chọn ngẫu nhiên một phần nhỏ của nhóm đó, đặt câu hỏi trung lập, thu câu trả lời rồi cân chỉnh lại cho khớp cơ cấu thật, và cuối cùng công bố kèm sai số. Bước quyết định nằm ở cách chọn người chứ không ở số người: một nghìn người chọn đúng cách thường đoán chuẩn hơn hai triệu người tự gửi phiếu về. Lịch sử thăm dò có hẳn một vụ đổ vỡ nổi tiếng để chứng minh điều này.
Nếm một thìa canh để biết cả nồi
Người nấu không cần húp hết nồi canh mới biết mặn hay nhạt. Chỉ cần khuấy đều rồi nếm một thìa. Khảo sát chọn mẫu dựa đúng vào ý đó: "nồi canh" là tổng thể (toàn bộ nhóm người mình muốn hiểu), "thìa canh" là mẫu, còn "khuấy đều" là chọn ngẫu nhiên.
Điều kiện khuấy đều quan trọng hơn cái thìa to hay nhỏ. Nếu không khuấy mà múc ngay lớp mặt, thìa to cỡ nào cũng chỉ nếm được váng mỡ. Trong khảo sát, "múc lớp mặt" là hỏi những người dễ hỏi nhất: người đang online, người hay đọc một tờ báo, người đi ngang cổng trường.
Có lúc người ta không chọn mẫu mà hỏi tất cả, gọi là tổng điều tra. Việt Nam làm việc này với dân số mười năm một lần. Giữa hai kỳ tổng điều tra là các cuộc điều tra chọn mẫu: Điều tra dân số và nhà ở giữa kỳ thời điểm 0 giờ ngày 1/4/2024 của Tổng cục Thống kê chọn khoảng 20% số địa bàn trong cả nước, tức 39.340 địa bàn, và ước tính dân số khi đó là 101.112.656 người. Khảo sát mức sống dân cư năm 2024 hỏi 46.995 hộ trên phạm vi 63 tỉnh, thành theo địa giới lúc ấy, để nói về thu nhập, chi tiêu, nhà ở, điện nước của cả nước. Đó là ví dụ chuẩn của "nếm một thìa để biết cả nồi".
Bài học năm 1936: hai triệu phiếu vẫn đoán trật
Năm 1936, tạp chí The Literary Digest của Mỹ gửi khoảng mười triệu phiếu thăm dò bầu cử tổng thống và nhận về khoảng 2,38 triệu phiếu. Kết quả: dự đoán ứng viên Alf Landon thắng với khoảng 57% phiếu phổ thông. Thực tế, Franklin Roosevelt thắng với khoảng 60,8%, giành mọi bang trừ Maine và Vermont.
Cùng năm đó, George Gallup dùng mẫu khoảng 50.000 người, nhỏ hơn rất nhiều, và đoán Roosevelt thắng. Tạp chí kia đình bản năm 1938.
Các phân tích về sau chỉ ra hai lỗi chồng lên nhau. Danh sách gửi phiếu lấy nhiều từ danh bạ điện thoại và sổ đăng ký ô tô, mà thời Đại khủng hoảng thì người có điện thoại, có xe thường khá giả hơn mặt bằng. Lỗi thứ hai: những người chịu gửi phiếu lại khác những người bỏ qua. Mẫu to đến mấy cũng không chữa được một cái danh sách lệch.
Các cách chọn mẫu thường gặp
| Cách chọn | Làm thế nào | Mạnh ở đâu | Yếu ở đâu |
|---|---|---|---|
| Ngẫu nhiên đơn giản | Mỗi người trong danh sách có cơ hội được chọn như nhau, như bốc thăm | Dễ tính sai số, ít thiên lệch | Cần danh sách đầy đủ, tốn công đi hỏi người ở rải rác |
| Phân tầng | Chia tổng thể thành nhóm (vùng, thành thị – nông thôn) rồi chọn ngẫu nhiên trong từng nhóm | Bảo đảm nhóm nhỏ không bị sót | Phải biết trước cơ cấu tổng thể |
| Theo cụm | Chọn ngẫu nhiên địa bàn, rồi hỏi các hộ trong địa bàn đó | Rẻ, hợp với điều tra hộ gia đình | Người cùng xóm hay giống nhau, sai số lớn hơn |
| Theo chỉ tiêu (quota) | Giao chỉ tiêu "đủ bao nhiêu nam, nữ, người trẻ", điều tra viên tự chọn người | Nhanh, rẻ | Điều tra viên vô thức chọn người dễ tiếp cận |
| Tự nguyện (opt-in) | Ai thấy đường dẫn thì vào trả lời | Rất rẻ, rất nhanh | Không biết mẫu đại diện cho ai; dễ bị người trả lời ẩu hoặc trả lời giả |
Cách chọn theo chỉ tiêu từng gây ra cú vấp thứ hai của giới thăm dò Mỹ năm 1948. Các hãng lớn đều đoán Thomas Dewey thắng Harry Truman. Khi đó điều tra viên được giao chỉ tiêu nhân khẩu nhưng tự chọn người để hỏi, và các phân tích về sau cho rằng chính quyền tự chọn này nghiêng mẫu về phía Dewey. Một số hãng còn ngừng hỏi từ nhiều tuần trước ngày bầu nên bỏ lỡ chuyển động cuối cùng. Sau năm 1948, giới nghiên cứu chuyển mạnh sang chọn mẫu xác suất.
Bao nhiêu người là đủ: chuyện "biên sai số"
Con số "sai số cộng trừ 3 điểm phần trăm" hay thấy ở cuối các bản tin thăm dò quốc tế không phải con số tuỳ tiện. Với một mẫu ngẫu nhiên khoảng 1.000 người và độ tin cậy 95%, biên sai số lớn nhất tính theo công thức thống kê là khoảng ±3,1 điểm. Hiểu nôm na: nếu làm lại khảo sát đó rất nhiều lần, khoảng 95% số lần, kết quả thật sẽ nằm trong khoảng cộng trừ ấy.
Ba điều người đọc hay hiểu sai:
- Biên sai số gần như không phụ thuộc vào cỡ tổng thể. Một nghìn người cho độ chính xác xấp xỉ nhau dù tổng thể là một tỉnh hay cả nước, miễn là chọn ngẫu nhiên. Giống như thìa canh nếm được nồi nhỏ lẫn nồi to, miễn khuấy đều.
- Nhóm con thì sai số rộng hơn. Khảo sát 1.000 người nhưng chỉ có 150 người trên 60 tuổi thì con số riêng của nhóm này dao động mạnh hơn nhiều.
- Biên sai số chỉ tính sai số do may rủi khi chọn mẫu. Nó không tính lỗi do câu hỏi dẫn dắt, do người được chọn từ chối trả lời, hay do người trả lời nói không thật. Những lỗi đó thường lớn hơn, và không có công thức nào cộng vào được.
Cũng vì thế, bình chọn tự nguyện trên mạng không có biên sai số đúng nghĩa: không có cơ chế chọn ngẫu nhiên thì không có cơ sở để tính.
Viết câu hỏi: phần dễ hỏng nhất
Chọn mẫu xong mới đi được nửa đường. Câu hỏi viết dở có thể làm hỏng toàn bộ. Những nguyên tắc mà sách phương pháp khảo sát nào cũng nhắc:
- Mỗi câu một ý. "Bạn có hài lòng với giá và chất lượng món ăn không?" là hai câu nhập một. Người thấy ngon nhưng đắt biết trả lời sao?
- Không dẫn dắt. "Bạn có đồng ý rằng phở Hà Nội thanh hơn không?" đã cài sẵn đáp án. Hỏi trung tính: "Bạn thích kiểu nước dùng nào hơn?"
- Phương án đủ và không chồng nhau. Khoảng tuổi "18–25" và "25–30" thì người 25 tuổi chọn đâu? Thiếu phương án "khác" hay "không biết" là ép người ta đoán bừa.
- Từ ngữ ai cũng hiểu như nhau. "Thường xuyên" với người này là mỗi ngày, với người kia là mỗi tuần. Hỏi số cụ thể dễ so hơn.
- Thử trước với vài người. Gọi là khảo sát thử (pilot). Năm người đọc thử thường phát hiện ra câu khó hiểu mà người soạn không thấy.
Chuyện câu chữ và thứ tự phương án làm đổi kết quả ra sao có cả một loạt thí nghiệm riêng, đáng một bài riêng trong danh mục này.
Thu câu trả lời và "cân" lại mẫu
Có bốn cách thu chính: phỏng vấn trực tiếp tại nhà, gọi điện, gửi phiếu giấy và làm trên mạng. Điều tra của cơ quan thống kê Việt Nam chủ yếu dùng điều tra viên đến hộ, ghi phiếu điện tử trên thiết bị di động. Phỏng vấn trực tiếp tốn kém nhưng tỷ lệ người chịu trả lời cao. Khảo sát trên mạng rẻ nhưng người không dùng mạng bị bỏ sót.
Dù chọn kỹ đến đâu, mẫu thu về vẫn hơi lệch: người trẻ hay bận nên ít trả lời, phụ nữ ở nhà nhiều hơn nên hay gặp. Người làm khảo sát xử lý bằng gia quyền: nếu nhóm 18–29 tuổi chiếm 20% dân số mà chỉ chiếm 12% mẫu, mỗi câu trả lời của nhóm này được tính nặng hơn một chút để kéo tỷ lệ về đúng cơ cấu. Gia quyền chữa được lệch về tuổi, giới, vùng. Nó không chữa được chuyện người chịu trả lời khác người từ chối ở những điểm không đo được, như sự quan tâm tới chủ đề.
Một bản khảo sát tử tế công bố những gì
Hiệp hội Nghiên cứu Dư luận Hoa Kỳ (AAPOR) có hẳn bộ tiêu chuẩn minh bạch, và các cơ quan thống kê nhà nước cũng công bố phương án điều tra. Dưới đây là bảng tự hỏi khi gặp một con số khảo sát bất kỳ:
| Nếu bản tin… | Thì nên hiểu là… |
|---|---|
| Ghi rõ đơn vị làm, thời gian, cỡ mẫu, cách chọn, biên sai số | Có thể tin ở mức độ mà biên sai số cho phép |
| Có cỡ mẫu nhưng không nói chọn mẫu thế nào | Cẩn thận: mẫu lớn chưa chắc là mẫu đúng |
| Chỉ ghi "theo một khảo sát" | Chưa đủ thông tin để tin, cũng chưa đủ để bác |
| Là bình chọn trên báo, trên mạng xã hội | Chỉ nói về những người đã bấm, không nói về ai khác |
| Không công bố nguyên văn câu hỏi | Không biết người ta đã được hỏi điều gì |
Góc nhìn hôm nay: tìm hiểu thêm ở đâu
Muốn xem một khảo sát quy mô quốc gia được thiết kế thế nào, cứ vào trang của Cục Thống kê (nso.gov.vn), mở phần thông cáo của Khảo sát mức sống dân cư hay Điều tra dân số giữa kỳ: luôn có mục giới thiệu phạm vi, cỡ mẫu và nội dung thu thập. Đọc phần đó trước khi đọc con số là thói quen đáng tập.
Ai muốn học bài bản có thể tìm giáo trình Survey Methodology của Robert Groves và cộng sự, sách gối đầu của ngành, hoặc trang phương pháp của Pew Research Center, nơi giải thích bằng ngôn ngữ phổ thông vì sao họ chọn mẫu theo địa chỉ thư tín. Những chuyện như mẫu lệch, biểu đồ đánh lừa, phần trăm và điểm phần trăm thì đã có bài riêng ở wiki Sắc Sảo.
Và lần tới thấy một con số "bao nhiêu phần trăm người Việt thích…", hãy hỏi ba câu: ai hỏi, hỏi ai, hỏi thế nào.
Câu hỏi thường gặp
Khảo sát chọn mẫu là gì?
Là cách hỏi một phần nhỏ được chọn ngẫu nhiên từ một nhóm lớn để suy ra ý kiến hay tình trạng của cả nhóm. Nó khác tổng điều tra ở chỗ không hỏi tất cả mọi người. Nếu chọn đúng cách, mẫu vài nghìn người đủ để nói về cả nước với sai số tính được.
Khảo sát 1.000 người có đủ đại diện cho cả nước không?
Đủ, nếu 1.000 người đó được chọn ngẫu nhiên. Khi đó biên sai số khoảng ±3 điểm phần trăm ở độ tin cậy 95%. Nếu 1.000 người tự nguyện bấm vào một đường dẫn thì không đại diện cho ai ngoài chính họ.
Biên sai số là gì?
Là khoảng dao động của kết quả do may rủi khi chọn mẫu. "50% ± 3" nghĩa là con số thật nhiều khả năng nằm trong khoảng 47–53%. Biên sai số không tính các lỗi khác như câu hỏi dẫn dắt hay người trả lời không thật.
Vì sao cuộc thăm dò của Literary Digest năm 1936 đoán sai?
Vì danh sách gửi phiếu nghiêng về người khá giả (có điện thoại, có ô tô) và người chịu gửi phiếu lại khác người không gửi. Dù nhận về khoảng 2,38 triệu phiếu, tạp chí vẫn đoán Landon thắng, trong khi Roosevelt thắng lớn.
Gia quyền trong khảo sát là gì?
Là tính nặng nhẹ khác nhau cho từng câu trả lời để mẫu khớp với cơ cấu thật của dân số theo tuổi, giới, vùng. Nhóm bị hỏi thiếu thì được tính nặng hơn. Gia quyền giảm lệch nhưng không cứu được một mẫu chọn sai từ đầu.
