Product Management
Đăng nhập
ESC

Nhập từ khóa để tìm kiếm

↑↓ Di chuyển
Enter Mở
ESC Đóng

Quyết định dừng: vì sao dự án AI khó dừng hơn dự án thường

Đã đọc 0/6 mục · còn khoảng 4 phút
Cách chúng tôi ghi nhận

Một mục được tính là đã đọc khi nó nằm giữa màn hình đủ lâu so với độ dài của nó (bảng và sơ đồ tính một nửa), bạn vẫn đang cuộn hoặc bấm phím, và bạn đã thấy tới cuối mục. Lướt nhanh hoặc để tab mở không được tính. Chúng tôi chỉ lưu thời gian đọc từng mục — không lưu gì khác.

Vì sao dừng lại khó hơn ở đây

Một dự án phần mềm thường có tín hiệu dừng rõ: phạm vi không xong, ngày trượt, chi phí vượt. Bạn thấy được.

Dự án AI có ba đặc điểm khiến việc dừng gần như không xảy ra tự nhiên:

  • Luôn có tiến bộ nhỏ để chỉ vào. Từ 88% lên 89% là một con số thật, và nó luôn đến. Nó cho phép mọi cuộc họp kết luận "đang tiến triển".
  • Trần chất lượng không nhìn thấy trước. Bạn không biết 92% là trần của dữ liệu này, hay còn 6 điểm nữa nếu thử đúng cách. Nên "thử thêm một tuần" luôn nghe hợp lý.
  • Chi phí đã bỏ ra rất dễ thấy. Sáu tháng và một đội. Dừng lại cảm giác như huỷ bỏ khoản đó — dù tiếp tục không lấy lại được gì.
Kết hợp ba điều: dự án AI có xu hướng không chết, cũng không ra mắt. Nó trôi. Và trôi tốn nhiều hơn dừng.

Bốn tín hiệu dừng, xác định trước

Viết bốn điều kiện này ở đầu dự án, khi chưa ai gắn bó cảm xúc:

Tín hiệuNgưỡng cụ thể
Đường cong đã phẳngBa vòng thử liên tiếp, mỗi vòng cải thiện dưới 1 điểm
Trần nằm ở dữ liệuHai người độc lập gán nhãn cùng bộ ca chỉ đồng ý 80% — thì không mô hình nào vượt 80%
Kinh tế không cònChi phí mỗi lượt vượt giá trị mỗi lượt, và ba đòn bẩy giảm chi phí đã thử hết
Không có đường xử lý sai khả thiTỉ lệ chuyển người đòi nhiều giờ người hơn việc làm tay
Tín hiệu thứ hai là tín hiệu ít ai biết và nó là tín hiệu quyết định nhất. Nếu hai chuyên gia không đồng ý về đáp án đúng, thì bài toán không có đáp án đúng ổn định — và không nỗ lực kỹ thuật nào sửa được điều đó. Phép kiểm này rẻ (một ngày công) và nó nên được làm ở tuần đầu, không ở tháng thứ sáu.

Tín hiệu thứ tư cũng đáng nhấn: một hệ thống "chính xác cao" bằng cách đẩy 60% ca cho người không tiết kiệm gì. Đó là một thất bại về thiết kế, không phải một thành công về chất lượng.

"Dừng" thường không phải huỷ

Đây là phần quan trọng nhất của bài. Với dự án AI, có bốn cách dừng và chỉ một trong bốn là huỷ:

CáchNội dungKhi nào
Thu hẹpGiữ nhóm A + B tự động, nhóm C do người làm mãi mãiPhổ biến nhất, và thường là kết cục tốt
Đổi vaiTừ "tự động quyết định" sang "gợi ý cho người quyết định"Khi chất lượng không đủ để tự chủ nhưng đủ để hỗ trợ
Tạm treoGiữ bộ ca và hạ tầng, dừng cải thiện, xem lại sau 6 thángKhi trần nằm ở công nghệ, không ở cách làm
HuỷDừng hẳnKhi kinh tế không còn, hoặc bài toán không có đáp án ổn định
Cách thứ nhất là kết cục của phần lớn dự án AI thành công, và nó cần được nói ra từ đầu như một kết cục tốt, không phải một sự thất bại. Nếu đội tin rằng chỉ tự động hoá 100% mới là thành công, họ sẽ đẩy dự án qua vạch mà ở đó nó đã hết lợi.

Cách thứ ba đáng nhắc riêng: giữ lại bộ ca kiểm và hạ tầng đo lường có giá trị thật. Sáu tháng sau khi công nghệ đổi, tổ chức có bộ ca sẵn có thể đánh giá lại trong một tuần, trong khi tổ chức không có phải bắt đầu lại từ đầu.

Cơ chế tổ chức để việc dừng xảy ra được

Ý chí không đủ; cần cơ chế:

  • Điểm quyết định đã lên lịch trước. "Ngày 15 tháng 4 chúng ta quyết định tiếp hay thu hẹp" — đặt vào lịch từ đầu. Một điểm quyết định có ngày sẽ diễn ra; một điểm quyết định "khi cần" thì không.
  • Người quyết định không phải người làm. Không phải vì thiếu tin tưởng, mà vì người đã bỏ sáu tháng vào một việc không phải người nên đánh giá có nên bỏ thêm ba tháng.
  • Phương án thay thế viết trước. Xem bài 4. Một quyết định dừng có phương án sẵn dễ đưa ra hơn nhiều so với một quyết định dừng để lại khoảng trống.
  • Nói công khai về tỉ lệ cược thắng. Nếu 2 trong 8 khoản cược đạt là bình thường, thì dừng 6 khoản là công việc bình thường, không phải sáu thất bại.
Điểm cuối là điểm văn hoá và nó có tác dụng lớn nhất. Trong tổ chức mà việc dừng bị coi là thất bại, không ai dừng gì — và đó là cách một tổ chức tiêu hết ngân sách AI mà không ra được sản phẩm nào.

Câu hỏi để hỏi mỗi tháng

Một câu, và nó tiết kiệm nhiều tháng:

> "Nếu hôm nay chúng ta bắt đầu lại từ đầu, với những gì đã biết, chúng ta có làm dự án này không?"

Câu này bỏ qua chi phí đã bỏ ra, thứ đang bóp méo mọi phán đoán. Nếu câu trả lời là "không, nhưng chúng ta đã đi xa rồi", bạn vừa nhận được câu trả lời rõ ràng.

Làm ngay

Với dự án AI hiện tại: (1) đặt một điểm quyết định có ngày cụ thể vào lịch, (2) chạy phép kiểm tín hiệu thứ hai — cho hai người gán nhãn độc lập 50 ca và đo mức họ đồng ý. Phép kiểm thứ hai mất một ngày và nó có thể cho bạn biết trần thật của bài toán trước khi bạn tiêu thêm sáu tháng.

Học xong bài này rồi? Tạo tài khoản miễn phí để lưu lại — lần sau vào là biết ngay đang dở ở đâu, và học hết khóa thì có chứng chỉ. Lưu tiến độ của tôi