Trả lời nhanh: MLOps là cách vận hành mô hình học máy như một sản phẩm: theo dõi dữ liệu, phiên bản mô hình, cách triển khai và việc chất lượng giảm sau khi đưa vào dùng.
Điểm chính
- MLOps là cách vận hành mô hình học máy như một sản phẩm: theo dõi dữ liệu, phiên bản mô hình, cách triển khai và việc chất lượng giảm sau khi đưa vào dùng.
- Nó nối người làm mô hình với người chạy hệ thống. Không có MLOps thì mô hình tốt trong thí nghiệm chết dần ngoài vận hành.
- Cần khi mô hình đã tham gia quyết định lặp, như dự báo hoặc phân loại mỗi ngày.
- Bỏ qua dữ liệu đầu vào làm mô hình sai mà không ai biết bắt đầu từ ngày nào.
- Thuộc chuyên mục AI tạo sinh & LLM. Chỉ mở rộng sau khi một phạm vi nhỏ đã đo được.
Mục lục
mlops là gì
mlops thuộc AI tạo sinh & LLM. MLOps là cách vận hành mô hình học máy như một sản phẩm: theo dõi dữ liệu, phiên bản mô hình, cách triển khai và việc chất lượng giảm sau khi đưa vào dùng.
Người đọc bài này nên ra về với một câu trả lời dùng được: mlops giải quyết việc gì, không giải quyết việc gì, và ai chịu trách nhiệm khi kết quả sai. Định nghĩa để trang trí slide thì chưa đủ.
mlops hoạt động ra sao?
Nó nối người làm mô hình với người chạy hệ thống. Không có MLOps thì mô hình tốt trong thí nghiệm chết dần ngoài vận hành.
Hình dung theo bốn bước, không cần công cụ đắt tiền ở bước đầu:
- Viết việc cần làm bằng một câu, có đầu vào và đầu ra.
- Lấy một mẫu nhỏ dữ liệu hoặc một tình huống thật, không lấy cả hệ thống.
- Cho mlops chạy trên mẫu đó và ghi chỗ sai.
- Chỉ mở rộng khi chỗ sai đã có người sửa và có cách đo.
Khi nào nên dùng mlops?
Cần khi mô hình đã tham gia quyết định lặp, như dự báo hoặc phân loại mỗi ngày.
Nên dùng khi ba điều cùng đúng. Việc lặp hoặc đủ lớn để làm tay không xuể. Có dữ liệu hoặc có chứng từ để đối chiếu. Có một người được giao quyền dừng lại nếu kết quả không đạt.
Chưa nên dùng khi đội chưa thống nhất thế nào là đúng. Thêm công cụ vào một quy trình đang cãi nhau về định nghĩa sẽ tạo ra một hệ thống sai nhanh hơn, không phải một hệ thống tốt hơn.
| Câu hỏi | Nếu trả lời có | Nếu trả lời không |
|---|---|---|
| Việc có lặp không? | Đáng xem mlops | Hãy viết quy trình trước |
| Có cách biết sai không? | Có thể đo thí điểm | Chưa đưa vào vận hành |
| Có người chịu trách nhiệm không? | Gắn tên người đó | Đừng giao cho công cụ |
| Phạm vi có hẹp không? | Thí điểm được | Chia nhỏ rồi hãy làm |
Ví dụ trong công việc
Một đội đang làm trong ai tạo sinh & llm muốn dùng mlops. Họ không mua nền tảng ngay. Họ chọn một tuần dữ liệu cũ, nhờ một người thành thạo làm đối chứng, và so với kết quả của mlops. Chỗ khớp thì ghi lại điều kiện. Chỗ lệch thì không "sửa cho đẹp" mà tìm vì sao lệch.
Cần khi mô hình đã tham gia quyết định lặp, như dự báo hoặc phân loại mỗi ngày. Sau hai tuần, họ chỉ giữ những trường hợp đã khớp. Phần còn lại vẫn do người làm. Đó là cách đưa mlops vào việc mà không đánh đổi trách nhiệm.
Người phụ trách cần chuẩn bị gì?
Trước khi dùng mlops trong việc thật, người phụ trách nên viết một trang giấy: việc nào được làm, việc nào cấm, dữ liệu nào được xem, và ai được dừng thí điểm. Trang này quan trọng hơn tài khoản phần mềm. Không có trang này thì mỗi người hiểu mlops một kiểu, và kết quả không so được.
Nên hẹn một ngày đọc kết quả, không để thí điểm kéo dài không hạn. Đến ngày đó, chỉ có hai lối: giữ vì số liệu đạt ngưỡng đã viết, hoặc dừng vì không đạt. Không có lối thứ ba là "cho thêm thời gian" nếu ngưỡng chưa được viết lại từ đầu.
Dễ nhầm và rủi ro
Bỏ qua dữ liệu đầu vào làm mô hình sai mà không ai biết bắt đầu từ ngày nào.
Ba nhầm lẫn hay gặp:
- Coi tên gọi là giải pháp. Đổi tên dự án thành mlops không đổi kết quả.
- Đo bằng số lần dùng, không đo bằng số lần đúng. Một công cụ được mở nhiều mà quyết định vẫn sai thì chưa có ích.
- Bỏ người kiểm tra vì bảng điều khiển màu xanh. Màu xanh chỉ đúng với chỉ số đã chọn. Chỉ số chọn sai thì xanh vẫn là sai.
Câu hỏi thường gặp
mlops có thay người làm việc đó không?
Không. mlops xử lý phần lặp hoặc phần tính toán đã có quy tắc. Người vẫn chọn quy tắc, xử lý ngoại lệ và chịu trách nhiệm với khách hàng, với số liệu hoặc với hồ sơ.
Doanh nghiệp nhỏ có dùng được không?
Có, nếu bắt đầu bằng một việc nhỏ và một công cụ sẵn có, không bằng một dự án nhiều tháng. Cần khi mô hình đã tham gia quyết định lặp, như dự báo hoặc phân loại mỗi ngày.
Làm sao biết đã dùng đúng?
Có một mẫu đối chứng do người làm, và kết quả của mlops khớp với mẫu đó trên các trường đã chọn. Không khớp thì chưa được gọi là xong. Bỏ qua dữ liệu đầu vào làm mô hình sai mà không ai biết bắt đầu từ ngày nào.
Có nên đưa vào quy trình chính ngay không?
Chưa. Hãy để ở thí điểm cho đến khi số lần phải sửa nằm trong giới hạn đội đã viết từ trước. Giới hạn viết sau khi thấy kết quả thì luôn được nới, và thí điểm mất nghĩa.
mlops khác gì với việc đang làm bằng bảng tính hoặc bằng kinh nghiệm?
Nó nối người làm mô hình với người chạy hệ thống. Không có MLOps thì mô hình tốt trong thí nghiệm chết dần ngoài vận hành. Khác ở chỗ cách làm phải lặp lại được và kiểm được, không phụ thuộc vào một người nhớ trong đầu. Nếu chưa kiểm được thì giữ cách cũ song song, đừng tắt cách cũ trong tuần đầu.