Vì sao hiểu tương quan khác nhân quả và các thiên kiến quan trọng
Hai biến số đi cùng nhau (tương quan) không có nghĩa cái này gây ra cái kia (nhân quả). Đây là cái bẫy tư duy tốn kém nhất trong phân tích sản phẩm. Nếu bạn nhầm tương quan thành nhân quả, bạn sẽ đầu tư vào những thứ tưởng là nguyên nhân nhưng thực ra chỉ là hệ quả hoặc trùng hợp, và kết quả không cải thiện dù bạn đã tốn nguồn lực.
Cái giá rất cụ thể. Một ứng dụng gọi xe ở TP.HCM từng thấy: người dùng bật thông báo có tỷ lệ giữ chân cao hơn hẳn. Đội kết luận "bật thông báo giữ chân người dùng" và ép bật mặc định. Kết quả không cải thiện giữ chân mà còn tăng gỡ ứng dụng. Sự thật là người dùng đã gắn bó mới chịu bật thông báo, không phải thông báo tạo ra gắn bó. Đây là nhầm chiều nhân quả cộng với biến ẩn (mức độ gắn bó).
Ngoài ra, con người có sẵn nhiều thiên kiến: thiên kiến xác nhận (chỉ thấy số ủng hộ niềm tin), thiên kiến sống sót (chỉ nhìn người ở lại mà quên người đã rời đi), và sai số lấy mẫu. Không nhận diện được chúng, bạn sẽ tự tin vào kết luận sai.
Bức tranh lớn
Khi thấy A và B đi cùng nhau, có ít nhất bốn khả năng, không chỉ "A gây ra B".
graph TD A[A va B di cung nhau] --> B[A gay ra B] A --> C[B gay ra A dao chieu] A --> D[Bien an C gay ra ca A va B] A --> E[Trung hop ngau nhien] B --> F[Chi thi nghiem co doi chung moi chac chan] C --> F D --> F E --> F
Chỉ có thí nghiệm có nhóm đối chứng (A/B test) hoặc thiết kế nghiên cứu chặt mới cho phép kết luận nhân quả. Quan sát tương quan chỉ giúp đặt giả thuyết, không giúp khẳng định nguyên nhân.
Ví dụ chi tiết
Một nền tảng học trực tuyến tại Cần Thơ thấy: học viên xem video giới thiệu khoá học có tỷ lệ hoàn thành cao gấp đôi. Đội định bắt buộc mọi người xem video trước khi học.
Bước 1 - Nghi ngờ chiều nhân quả. PM hỏi: liệu video làm người ta chăm hơn, hay người vốn chăm mới chịu xem video. Đây là câu hỏi phân biệt nguyên nhân và hệ quả.
Bước 2 - Tìm biến ẩn. Đội nhận ra mức độ động lực học tập là biến ẩn: người có động lực cao vừa xem video vừa hoàn thành khoá. Video có thể chỉ là dấu hiệu của động lực, không phải nguyên nhân hoàn thành.
Bước 3 - Thiết kế thí nghiệm. Thay vì ép, đội chạy A/B test: nhóm A được nhắc xem video, nhóm B không. Chia ngẫu nhiên để cân bằng động lực giữa hai nhóm.
Bước 4 - Đọc kết quả. Chênh lệch hoàn thành giữa hai nhóm chỉ còn 3 phần trăm, nhỏ hơn nhiều so với gấp đôi ban đầu. Kết luận: phần lớn tương quan đến từ động lực sẵn có, không phải từ video.
Kết quả: đội tránh được việc ép buộc gây khó chịu mà không mang lại giá trị, và dồn nguồn lực vào việc thật sự thúc đẩy động lực.
Lộ trình từng bước để làm chủ
graph TD A[Thay A va B di cung nhau] --> B[Liet ke bon kha nang nhan qua] B --> C[Tim bien an co the giai thich] C --> D[Kiem tra chieu nhan qua co hop ly] D --> E[Thiet ke thi nghiem co doi chung] E --> F[Doc ket qua va rut ket luan than trong] F --> G[Ghi lai bai hoc ve thien kien]
Bước quan trọng nhất là không nhảy thẳng từ tương quan sang hành động. Luôn dừng lại liệt kê các khả năng và tìm biến ẩn.
Thói quen & kỷ luật
| Nhịp | Thói quen |
|---|---|
| Mỗi khi thấy tương quan | Tự hỏi còn ba khả năng kia không |
| Mỗi kết luận nhân quả | Hỏi có thí nghiệm đối chứng nào không |
| Hàng tuần | Rà một kết luận cũ tìm biến ẩn bị bỏ qua |
| Hàng tháng | Ghi lại một lần mình suýt mắc thiên kiến |
Cần luyện tập gì (drills)
- Săn biến ẩn: lấy 3 tương quan trong sản phẩm và nghĩ ra biến ẩn có thể giải thích mỗi cái.
- Đảo chiều nhân quả: với mỗi kết luận A gây ra B, thử lập luận B gây ra A xem có hợp lý không.
- Nhận diện thiên kiến sống sót: phân tích một chỉ số chỉ dựa trên người còn ở lại, rồi hỏi người đã rời đi sẽ đổi kết luận thế nào.
Checklist hành động tuần này
- [ ] Liệt kê 3 tương quan gần đây và tìm biến ẩn cho từng cái
- [ ] Chọn một kết luận nhân quả và kiểm tra có thí nghiệm đối chứng chưa
- [ ] Rà một phân tích chỉ dựa người còn ở lại
- [ ] Thiết kế một A/B test nhỏ cho một giả thuyết đang nghi ngờ
- [ ] Ghi lại một lần bạn từng nhầm tương quan thành nhân quả
Chỉ số & North Star
North Star: tỷ lệ kết luận nhân quả được kiểm chứng bằng thí nghiệm thay vì chỉ dựa quan sát.
| Chỉ số | Tốt | Xấu |
|---|---|---|
| Kiểm tra biến ẩn | Luôn liệt kê trước khi kết luận | Nhảy thẳng từ tương quan sang hành động |
| Dùng thí nghiệm đối chứng | Có nhóm đối chứng cho quyết định lớn | Kết luận nhân quả từ quan sát đơn thuần |
| Nhận diện thiên kiến | Chủ động nêu tên thiên kiến khả dĩ | Tự tin vào số mà không nghi ngờ |
Dấu hiệu bạn đã thành thạo
Khi ai đó nói "chỉ số này tăng vì tính năng kia", bạn tự động hỏi có biến ẩn nào không và có thí nghiệm nào chứng minh không. Bạn nhận ra thiên kiến sống sót và thiên kiến xác nhận ngay trong các báo cáo. Bạn dùng từ tương quan và nhân quả một cách chính xác, không lẫn lộn.
Cạm bẫy thường gặp
| Cạm bẫy | Thay bằng |
|---|---|
| Coi tương quan là nhân quả | Liệt kê đủ các khả năng và tìm biến ẩn |
| Bỏ qua chiều nhân quả ngược | Thử lập luận B gây ra A |
| Chỉ nhìn người còn ở lại | Hỏi cả người đã rời đi |
| Tin số ủng hộ niềm tin sẵn có | Chủ động tìm bằng chứng phản bác |
Chốt lại
- Tương quan không đồng nghĩa nhân quả, luôn có ít nhất bốn khả năng.
- Biến ẩn và chiều nhân quả ngược là hai bẫy hay gặp nhất.
- Chỉ thí nghiệm có đối chứng mới cho phép kết luận nhân quả.
- Chủ động gọi tên thiên kiến giúp bạn không tự tin sai.
Áp dụng vào Căng tin số
Nhìn bảng kết quả chạy thử, một câu rất dễ bật ra: "Đơn đặt trước càng tăng thì hàng càng ngắn, app đã rút ngắn thời gian xếp hàng". Đơn đã thanh toán mỗi ngày đi từ 95 lên 160, 195 rồi 205. Thời gian xếp hàng thường giờ cao điểm đi từ 20 phút xuống 18, rồi 15. Hai đường đi cùng nhau. Đó là tương quan. Hãy dùng bốn khả năng của bài để xem nó có phải nhân quả không.
A = đơn đặt trước tăng, B = hàng thường ngắn lại
A gây ra B: người đặt trước rời khỏi hàng thường, hàng ngắn đi
B gây ra A: hàng ngắn thì đặt trước ít hấp dẫn hơn, khó giải thích chiều này
Biến ẩn C: số người tới căng tin thay đổi, kéo cả hai
Trùng hợp: bốn điểm số liệu, rất dễ trùng hợp
Biến ẩn ở đây có tên cụ thể. Tuần 3 là tuần thi giữa kỳ, nhiều sinh viên về sớm. Ít người tới căng tin thì hàng ngắn và suất bỏ đi cũng ít, dù app có chạy hay không. Vì vậy con số 15 phút và 27 suất bỏ đi của tuần 3 đẹp một phần nhờ lượng khách thấp, không chỉ nhờ app. Bằng chứng nằm ngay trong bảng: sang tuần 4, đơn đặt trước vẫn tăng lên 205 nhưng hàng lại dài ra 17 phút. Nếu A thật sự là nguyên nhân duy nhất, tuần 4 phải ngắn hơn tuần 3.
Đọc đúng là so tuần 4, một tuần bình thường, với đường cơ sở đo tay trước khi ra mắt: xếp hàng trung vị 21 phút xuống 17 phút, suất bỏ đi 40 xuống 26 mỗi ngày. Đó là mức cải thiện đáng tin hơn. Nhưng vẫn chỉ là so trước và sau, không có nhóm đối chứng. Đường cơ sở đo ở hai tuần khác, thời tiết khác, lịch học khác. Câu trung thực là "cùng lúc với app, hàng ngắn đi khoảng 4 phút", chưa phải "app làm hàng ngắn 4 phút".
Thêm hai thiên kiến cần gọi tên:
- Thiên kiến sống sót. Tỉ lệ không tới lấy giảm từ 14% xuống 7%. Có thể người dùng học được cách đặt cho đúng giờ. Nhưng cũng có thể những người hay quên đã bỏ app sau tuần 1, chỉ còn lại người kỷ luật. Muốn phân biệt, phải nhìn theo từng người: người đã không tới lấy ở tuần 1 có còn đặt ở tuần 4 không, và lúc đó họ có tới lấy không.
- Thiên kiến xác nhận. Nhóm đã dồn cả học kỳ vào app, nên rất muốn tin con số 15 phút. Chính vì vậy càng phải là người đầu tiên nói ra chuyện tuần thi, trước khi anh Tuấn hay chị Lan hỏi.
Thử ngay: với cặp "suất bỏ đi giảm từ 38 xuống 26" và "đơn đặt trước tăng", viết đủ bốn khả năng, đặt tên một biến ẩn khác ngoài tuần thi, và mô tả cách đo cần thiết để loại nó. <!--/case-append-->