Kết hợp định lượng & định tính

Vì sao kết hợp định lượng và định tính quan trọng

Định lượng (số liệu) trả lời câu hỏi cái gì và bao nhiêu: bao nhiêu người bỏ giỏ hàng, tỷ lệ giữ chân là bao nhiêu. Định tính (phỏng vấn, quan sát, phản hồi) trả lời câu hỏi vì sao: tại sao họ bỏ giỏ hàng. Một PM chỉ giỏi một trong hai sẽ luôn thiếu nửa bức tranh. Số cho bạn quy mô nhưng không cho bạn lý do; câu chuyện cho bạn lý do nhưng không cho bạn biết nó phổ biến đến đâu.

Cái giá của việc thiếu kỹ năng kết hợp rất đắt. Chỉ nhìn số, bạn tối ưu hoá một chỉ số mà không hiểu cơ chế, dễ sửa nhầm triệu chứng. Chỉ nghe vài khách hàng nói to nhất, bạn xây tính năng cho thiểu số mà bỏ rơi số đông im lặng. Một sàn thương mại điện tử ở TP.HCM từng thấy tỷ lệ bỏ giỏ hàng cao, đoán do phí ship nên giảm phí, nhưng số không cải thiện. Chỉ khi phỏng vấn mới biết người dùng bỏ giỏ vì không tin tưởng khâu thanh toán. Số chỉ ra vấn đề, nhưng định tính mới chỉ ra nguyên nhân thật.

Bức tranh lớn

Cách kết hợp hiệu quả là một vòng bổ trợ: số phát hiện điểm bất thường, định tính giải thích, rồi số kiểm chứng lại xem lời giải thích có đúng ở quy mô lớn không.

graph LR
A[Du lieu dinh luong] --> B[Phat hien diem bat thuong]
B --> C[Phong van va quan sat dinh tinh]
C --> D[Gia thuyet ve nguyen nhan]
D --> E[Do lai bang dinh luong]
E --> F[Xac nhan hoac bac bo]
F --> A

Nguyên tắc vàng: định lượng cho biết đi tìm ở đâu, định tính cho biết chuyện gì đang xảy ra, rồi định lượng xác nhận nó phổ biến đến mức nào. Đừng dừng ở một nửa.

Ví dụ chi tiết

Một ứng dụng đọc báo tại Hà Nội thấy thời gian đọc trung bình giảm 20 phần trăm trong hai tháng.

Bước 1 - Định lượng khoanh vùng. Phân tích cho thấy chỉ nhóm người dùng Android bản mới bị giảm, iOS bình thường. Số đã thu hẹp phạm vi.

Bước 2 - Định tính giải thích. Đội gọi 12 người dùng Android bản mới, quan sát họ dùng thử. Bảy người phàn nàn ứng dụng giật khi cuộn bài dài. Đây là giả thuyết nguyên nhân: hiệu năng cuộn kém khiến người ta đọc ít đi.

Bước 3 - Định lượng kiểm chứng. Đội đo thời gian phản hồi cuộn theo phiên bản, xác nhận bản mới chậm hơn hẳn ở máy cấu hình thấp, vốn phổ biến ở nhóm người dùng đại chúng. Vấn đề đúng là hiệu năng, không phải nội dung.

Bước 4 - Hành động và đo lại. Sau khi tối ưu hiệu năng, thời gian đọc phục hồi, và đội theo dõi số để chắc chắn lời giải thích định tính đúng ở quy mô lớn.

Kết quả: nhờ đi qua đủ vòng số rồi câu chuyện rồi số, đội tránh được việc đổ tiền viết lại nội dung một cách vô ích.

Lộ trình từng bước để làm chủ

graph TD
A[Xem so de phat hien bat thuong] --> B[Khoanh vung nhom bi anh huong]
B --> C[Phong van va quan sat nhom do]
C --> D[Rut ra gia thuyet nguyen nhan]
D --> E[Do lai bang so tren toan bo]
E --> F[Xac nhan va hanh dong]
F --> G[Theo doi de dam bao dung o quy mo]

Lộ trình nhấn mạnh đừng bao giờ dừng ở một nguồn duy nhất. Số một mình dễ dẫn tới đoán mò nguyên nhân; câu chuyện một mình dễ dẫn tới khái quát hoá từ vài trường hợp.

Thói quen & kỷ luật

Working mindset: Số cho tôi biết đi tìm ở đâu, con người cho tôi biết vì sao.

Cần luyện tập gì (drills)

• Ghép số với câu chuyện: lấy một chỉ số đang bất thường, phỏng vấn 5 người thuộc nhóm đó, viết một giả thuyết nguyên nhân.
• Kiểm chứng ngược: lấy một phản hồi khách hàng gay gắt, tìm số xem có bao nhiêu người gặp cùng vấn đề.
• Đọc phễu kèm bản ghi màn hình: xem một phễu chuyển đổi rồi xem 3 bản ghi phiên rớt để hiểu hành vi đằng sau số.

Checklist hành động tuần này

• [ ] Nói chuyện trực tiếp với ít nhất 3 người dùng thật
• [ ] Chọn một số bất thường và tìm nguyên nhân bằng phỏng vấn
• [ ] Kiểm chứng một phản hồi định tính bằng số liệu
• [ ] Xem 3 bản ghi phiên gắn với một phễu chuyển đổi
• [ ] Rà một quyết định gần đây chỉ dựa một nguồn và bổ sung nguồn kia

Chỉ số & North Star

North Star: tỷ lệ quyết định lớn có cả bằng chứng định lượng và định tính trước khi thực thi.

Dấu hiệu bạn đã thành thạo

Bạn phản xạ tự nhiên là khi thấy số lạ thì đi hỏi người dùng, và khi nghe một câu chuyện thì đi tìm số kiểm chứng. Bạn không bị vài khách hàng nói to lôi kéo, cũng không lạnh lùng chỉ nhìn dashboard. Đội của bạn tin các quyết định vì chúng có cả quy mô lẫn lý do.

Cạm bẫy thường gặp

Chốt lại

• Định lượng cho biết cái gì và bao nhiêu, định tính cho biết vì sao.
• Kết hợp theo vòng: số phát hiện, câu chuyện giải thích, số xác nhận.
• Đừng dừng ở một nguồn duy nhất, dễ đoán mò hoặc khái quát sai.
• Nói chuyện với người dùng thật đều đặn là kỷ luật cốt lõi.