Human-in-the-loop cho AI Agent: đặt điểm duyệt, nút dừng và quy trình phục hồi
Tình huống thật
ref-592d4af02f — Việc hôm nay chớ để ngày mai — với đội vận hành, câu đó thường hiện ra lúc 11h đêm khi còn vài tin Zalo chưa rep và inbox Fanpage vẫn nhấp nháy (ref-4d5fc3b57d). Không phải thiếu ý tưởng, mà thiếu lối đi hẹp để xử lý «human in the loop» mà vẫn giữ người duyệt (ref-ce06dd9bd4).
ref-2e0ac74bfc — Nhiều đội vận hành đã thử ChatGPT rời rạc rồi dừng vì không có quy trình: tin nháp lẫn tin gửi thật, không log, không kill switch (ref-741b0f0537). Bài này khoanh phạm vi thực hành cho «human in the loop» theo kiểu draft-only, bám JTBD «Giữ con người chịu trách nhiệm quyết định» (ref-bef28f3b99).
ref-150c35252b — Dạng nội dung lần này là foundation — Ghi nhận ref-108ecf2539 trong sổ pilot nội bộ (ref-1a604f86dc).. Với đội vận hành quanh «human in the loop», bài giao đủ workflow + lệnh AI copy được + ranh giới AI/người để pilot 14 ngày việc thật — không phải bài định nghĩa chung (ref-ebb66ab1a7).
ref-bf96072597 — Hình ảnh đời thường: đội vận hành vừa livestream hoặc vừa soạn tin khuya, vừa mở Google Sheet theo dõi đơn — tay thì CapCut/Canva, miệng thì trả lời khách hỏi giá (ref-4ade31d28a). «human in the loop» chỉ bền khi tách được việc AI nháp và việc người chốt.
Việc có thể giao cho AI
ref-c1c30c2cbe — Với đội vận hành, AI chỉ nhận việc hẹp quanh «human in the loop» — không ôm hết vận hành (ref-238b441ac3). Ưu tiên việc lặp, có mẫu, và có thể rollback (Ghi nhận ref-2089746bd1 trong sổ pilot nội bộ.) (ref-108ecf2539).
- Gom câu hỏi lặp từ Zalo/Messenger thành nhóm câu hỏi nháp cho «human in the loop»
- Soạn 3 biến thể tin nháp (gắn [CẦN DUYỆT]) theo tone đội vận hành
- Rút checklist dữ liệu thiếu từ log tuần trước (Ghi nhận ref-2bd97c2707 trong sổ pilot nội bộ.)
- Tóm tắt 10 case inbox liên quan «human in the loop» thành bảng ưu tiên
- Đề xuất chỉnh lệnh AI khi % needs_human cao — không tự gửi khách
ref-963bd19402 — Đối với đội vận hành quanh «human in the loop», việc AI không làm: quyết định giảm giá, hoàn tiền, cam kết pháp lý, hay tự bật quyền tool mới — ranh giới cứng trước khi mở quyền hẹp (Ghi nhận ref-62d0cafed0 trong sổ pilot nội bộ.) (ref-b1ff5915d5).
Dữ liệu cần chuẩn bị
ref-37eddc124d — Trước khi bật agent cho «human in the loop», đội vận hành cần input rõ — thiếu thì chỉ sinh được nháp mơ hồ (ref-ace8cdfd80). Danh sách tối thiểu (đổ vào dataNeeded):
- Danh sách dữ liệu cấm + người duyệt chính/phụ cho team
- Giờ cao điểm inbox/Zalo của team để xếp lịch draft
- Danh sách việc lặp hàng tuần của team quanh «human in the loop» (ít nhất 5 dòng)
- Mẫu tin/câu hỏi thật đã gửi khách (5–10 mẫu) liên quan «human in the loop»
ref-288ab24ccd — Gợi ý thực tế: để 1 tab Google Sheet tên «pilot-foundation-3611dbb-5999» gồm cột nguồn / trạng thái duyệt / ghi chú lỗi (ref-e6e70440b0). Ghi nhận ref-2f7f825b72 trong sổ pilot nội bộ..
Workflow từng bước
ref-08630b1c14 — Quy trình pilot 14 ngày cho đội vận hành quanh «human in the loop». Mỗi bước có tiêu chí done rõ; bỏ bước nào cũng phải ghi lý do.
- Bước 1: Allowlist nguồn + tool [foundation-4206] — Chỉ cho AI đọc nguồn đã duyệt phục vụ ops; mặc định deny write nguy hiểm; ghi rõ kênh Zalo/inbox được phép draft cho ops.
- Bước 2: Few-shot + từ chối ngoài phạm vi [foundation-4206] — Thêm 5–8 mẫu câu ngoài phạm vi «human in the loop»; thiếu dữ liệu → needs_human (mã case 1193).
- Bước 3: Draft-only + hàng đợi duyệt [foundation-4206] — Mọi đầu ra đụng khách/tiền của ops nằm hàng đợi; approver phụ trong 14 ngày đầu.
- Bước 4: Log metric 14 ngày [foundation-4206] — Ghi task success, % needs_human, số bypass duyệt cho «human in the loop»; review cuối tuần (Ghi nhận ref-5aceeb70f4 trong sổ pilot nội bộ.).
- Bước 5: Kill switch & backup [foundation-4206] — Tắt schedule/webhook ≤5 phút; backup lệnh AI/config của ops trước khi mở quyền hẹp.
- Bước 6: Mở quyền hẹp có điều kiện [foundation-4206] — Chỉ nới quyền khi log sạch 14 ngày quanh «human in the loop»; giữ human approval cho bước tiền/khách.
ref-b5321b9625 — Cuối mỗi tuần: họp 20 phút xem metric, không tranh luận cảm tính. Nếu bypass duyệt xuất hiện, quay lại bước draft-only (Ghi nhận ref-1de2a71d36 trong sổ pilot nội bộ.) (ref-cdfd0d4d9f).
Công cụ phù hợp
ref-d2b9639f3e — đội vận hành nên ghép AI với app đang dùng hàng ngày quanh «human in the loop» (cat ai-agent-co-ban), không dựng stack mới (ref-48aa1a7f0e). Bộ tối thiểu gợi ý cho đội vận hành: Canva, VietQR, MISA, Giao hàng tiết kiệm (GHTK) (Ghi nhận ref-c1c30c2cbe trong sổ pilot nội bộ.) (ref-5e229167f0).
- Canva — dùng cho nháp/điều phối quanh «human in the loop»; AI chỉ đọc hoặc soạn, người bấm gửi (Ghi nhận ref-57272312ef trong sổ pilot nội bộ.).
- VietQR — dùng cho nháp/điều phối quanh «human in the loop»; AI chỉ đọc hoặc soạn, người bấm gửi (Ghi nhận ref-263ec86b96 trong sổ pilot nội bộ.).
- MISA — dùng cho nháp/điều phối quanh «human in the loop»; AI chỉ đọc hoặc soạn, người bấm gửi (Ghi nhận ref-bfb3f448b5 trong sổ pilot nội bộ.).
- Giao hàng tiết kiệm (GHTK) — dùng cho nháp/điều phối quanh «human in the loop»; AI chỉ đọc hoặc soạn, người bấm gửi (Ghi nhận ref-1629fc1371 trong sổ pilot nội bộ.).
ref-0e77fb6808 — Nguyên tắc cho «human in the loop»: tool nào đụng thanh toán (VietQR/MoMo) hoặc vận đơn (GHTK/GHN) thì AI chỉ được đề xuất, không tự thực thi — owner đội vận hành (Ghi nhận ref-bfb3f448b5 trong sổ pilot nội bộ.) (ref-dad7829a05).
AI làm gì / người duyệt gì
ref-c32c9ac254 — Ranh giới rõ giúp đội vận hành ngủ yên khi pilot «human in the loop».
ref-bde6396919 — AI làm:
- Nháp nội dung/checklist quanh «human in the loop» từ nguồn allowlist (Ghi nhận ref-77ea4fd78e trong sổ pilot nội bộ.)
- Gom câu hỏi lặp của ops thành nhóm để soạn câu hỏi nháp
ref-1967620647 — Người duyệt:
- Duyệt mọi tin đụng khách/tiền trước khi gửi (rule cứng của ops)
- Quyết định mở/đóng quyền tool sau review metric 14 ngày quanh «human in the loop»
ref-ac9d5d6dcf — Nếu không chắc quanh «human in the loop»: mặc định needs_human. Câu thần chú: «nháp được, gửi thì phải có tên người» (Ghi nhận ref-263ec86b96 trong sổ pilot nội bộ.) (ref-96a850ae56).
Sai lầm & rủi ro cần tránh
- Dùng một lệnh AI chung cho mọi việc của đội vận hành thay vì scope «human in the loop».
- Không log % needs_human nên không biết đang tốt lên hay xấu đi.
- Nhét dữ liệu cấm vào context (token, mật khẩu) vì 'cho tiện' — cấm tuyệt đối (Ghi nhận ref-bfb3f448b5 trong sổ pilot nội bộ.).
- Mở quyền write nguy hiểm trước khi có kill switch 5 phút.
ref-4a363c8b7a — Rủi ro vận hành quanh «human in the loop» không phải 'AI thay người', mà là quy trình lỏng: tin nháp lẫn tin thật (ref-b899365f89). Giữ hai hàng đợi riêng cho đội vận hành (Ghi nhận ref-1629fc1371 trong sổ pilot nội bộ.) (ref-903e711af7).
Triển khai: cá nhân / đội nhóm / doanh nghiệp
ref-7c1e612e92 — Cá nhân: 1 việc hẹp «human in the loop», 1 Sheet, 1 approver (chính bạn), draft-only 14 ngày (ref-24c4fd37e2). Dùng Zalo + Google Sheet là đủ (Ghi nhận ref-71ddac0289 trong sổ pilot nội bộ.).
ref-0b906f8dae — Đội nhóm: thêm approver phụ, rota duyệt inbox buổi tối, standup 15 phút/tuần xem metric (Ghi nhận ref-34d28ccf82 trong sổ pilot nội bộ.) (ref-bd1624900b).
ref-32049ba886 — Doanh nghiệp: allowlist SSO/CRM cho «human in the loop», phân quyền tool theo vai trò, backup lệnh AI, và không mở auto-send cho đến khi audit sạch (Ghi nhận ref-91d96c10eb trong sổ pilot nội bộ.) (ref-24ce67a54c).
Kết quả đầu ra mẫu
ref-272f5571be — Ví dụ output mẫu (sampleOutput) cho đội vận hành — chỉ minh họa quy trình, không phải số liệu cam kết: (ref-4f2722412c)
ref-9cc4ed7db9 — Nháp duyệt — ref-ee7f200d56 — SME
ref-d130e0345d — Chủ đề: «human in the loop». Trạng thái: DRAFT_ONLY.
- Tóm tắt việc: 3 bullet bám JTBD «Giữ con người chịu trách nhiệm quyết định».
- Câu Zalo nháp (chưa gửi): chào + 1 câu hỏi làm rõ + CTA mềm.
- Checklist thiếu dữ liệu: 2 mục cần người bổ sung.
- Rủi ro: 1 dòng (không dọa, chỉ mô tả phạm vi).
ref-97b8c9e1ed — Approver: ________ | Quyết định: approve / revise / reject
ref-6bcfac07a9 — Sau 14 ngày, đội vận hành nên có: charter đã ký, log metric, và quyết định dừng / giữ / mở quyền hẹp cho «human in the loop» — ghi rõ ngày và người quyết định (ref-9f30279071).