Người ngoài ngành thường bỏ ngay khi gặp phần phương pháp. Nhưng để đánh giá một nghiên cứu có đáng tin và có nói điều họ tuyên bố hay không, bạn chỉ cần đọc được vài chỗ.
Thứ tự đọc hiệu quả
Đọc tóm tắt để biết bài nói gì. Rồi nhảy xuống kết luận, xem tác giả tự nhận đã chứng minh được điều gì.
Tiếp đó đọc phần hạn chế — đây là chỗ đáng đọc nhất với người ngoài ngành, vì tác giả tự nói nghiên cứu của họ không kết luận được gì.
Rồi mới xem hình và bảng cùng chú thích. Ở nhiều bài, hình nói được phần lớn nội dung.
Phần phương pháp đọc lướt, tìm bốn thông tin: nghiên cứu trên ai hoặc trên cái gì, bao nhiêu, trong bao lâu, và có nhóm so sánh không.
Bốn câu hỏi trả lời được mà không cần chuyên môn
Nghiên cứu trên ai? Kết quả trên tế bào trong phòng thí nghiệm, trên động vật, hay trên người — ba mức rất khác nhau về khả năng áp dụng.
Bao nhiêu? Nghiên cứu trên vài chục người nói ít hơn nhiều so với nghiên cứu trên vài nghìn người, dù cả hai đều có giá trị ở mức của mình.
Có nhóm so sánh không? Không có nhóm đối chứng thì rất khó nói thay đổi quan sát được là do can thiệp.
Trong bao lâu? Kết quả sau vài tuần khác hẳn kết quả theo dõi nhiều năm.
Tương quan không phải nhân quả
Đây là chỗ truyền thông và cả tác giả hay vượt quá dữ liệu.
Nếu nghiên cứu chỉ quan sát mà không can thiệp, nó cho biết hai thứ đi cùng nhau, không cho biết cái nào gây ra cái nào — hay cả hai đều do một yếu tố thứ ba.
Dấu hiệu nhận biết trong văn bản: các từ như "liên hệ với", "gắn với" thường đi với nghiên cứu quan sát; "gây ra", "làm giảm" đòi thiết kế mạnh hơn.
Khi tiêu đề báo chí nói nhân quả mà bài gốc nói liên hệ, phần chênh đó là do người viết tin, không phải do nghiên cứu.
Sáu dấu hiệu cần thận trọng
Kết luận rộng hơn nhiều so với phạm vi nghiên cứu.
Không có phần hạn chế, hoặc phần đó chỉ có một câu hình thức.
Cỡ mẫu rất nhỏ nhưng kết luận rất mạnh.
Không nêu xung đột lợi ích trong khi nghiên cứu liên quan tới một sản phẩm thương mại.
Công bố ở nơi không có bình duyệt thật — đáng kiểm nếu bạn chưa biết tạp chí đó.
Kết quả chưa ai lặp lại được, nhưng được nói như một sự thật đã xác lập.
Một nghiên cứu không phải kết luận của khoa học
Trong khoa học, sự tin cậy đến từ nhiều nghiên cứu độc lập cho kết quả tương đồng, không từ một bài.
Vì vậy khi muốn biết "khoa học nói gì" về một vấn đề, nguồn tốt nhất không phải bài mới nhất mà là các bài tổng quan có hệ thống và các hướng dẫn chuyên môn dựa trên tổng hợp bằng chứng.
Với người đọc phổ thông, đây là điều đáng nhớ nhất: một nghiên cứu mới là một mảnh, không phải câu trả lời.
Nơi tìm bài và bản toàn văn
Nhiều bài có bản truy cập mở; nhiều tác giả đăng bản của mình trên trang cá nhân hoặc kho lưu trữ của cơ sở.
Nếu không tìm được, viết thư hỏi tác giả — phần lớn nhà nghiên cứu sẵn lòng gửi bản của mình và thường vui khi có người muốn đọc.
Cần hiểu thống kê tới mức nào?
Không cần nhiều để đọc có phê phán. Biết phân biệt tương quan với nhân quả, hiểu ý nghĩa của cỡ mẫu và của nhóm đối chứng đã đủ cho phần lớn trường hợp.
Bài ở tạp chí uy tín thì chắc đúng?
Bình duyệt giúp lọc nhưng không bảo đảm. Kết quả vẫn cần được các nghiên cứu khác lặp lại để đáng tin.
Bản thảo chưa bình duyệt có nên đọc không?
Đọc được và hữu ích để theo dõi lĩnh vực, nhưng phải nhớ nó chưa qua bình duyệt. Đừng dùng nó như cơ sở cho quyết định quan trọng.
Làm sao biết một tạp chí có đáng tin?
Kiểm nó có trong các danh mục uy tín mà ngành đó thừa nhận, xem ban biên tập có thật và đúng ngành, và đọc vài bài đã đăng gần nhất.
