Playbook điều hành miễn phí.

Trợ lý của anh/chị đã trả lời khách hàng, dẫn chính biểu phí đã được ngân hàng phê duyệt, và trỏ tới chính xác đoạn văn. Trích dẫn hoạt động hoàn hảo. Mức phí đó đã không còn áp dụng từ năm trước. Không có gì trong dạng lỗi đó liên quan đến một kẻ tấn công — một tài liệu đã cũ và một chủ sở hữu không ai đứng tên là đủ, và không phép kiểm tra tính trung thực nào bắt được nó, bởi câu trả lời vẫn trung thực với đúng cái tài liệu sai đó. Trích dẫn đã trở thành bằng chứng an toàn mà cả ngành viện dẫn, và nó chứng minh đúng một điều: đã có thứ gì đó thật được dẫn ra. Hiện diện trích dẫn, căn cứ luận điểm và tính còn hiệu lực là ba thuộc tính khác nhau của một câu trả lời, và chỉ thuộc tính đầu tiên là nhìn thấy được trên giao diện. Đã có hai nghĩa vụ của Việt Nam mặc định phải có người chịu trách nhiệm về câu trả lời mà khách hàng đã nhận — Luật Trí tuệ nhân tạo 134/2025/QH15, có hiệu lực từ 01/3/2026, với các nghĩa vụ về minh bạch khi tương tác, về độ tin cậy của nhà cung cấp và về sự cố, cùng giám sát của con người với hệ thống rủi ro cao; và nghĩa vụ cung cấp thông tin sản phẩm chính xác và đầy đủ, có hiệu lực từ 01/7/2024 theo Điều 21 Luật 19/2023/QH15, theo chính phần diễn giải do Ủy ban Cạnh tranh Quốc gia công bố. Không văn bản nào trong hai văn bản này đặt ra ngưỡng chính xác bằng số. The Grounded-Knowledge Architecture gọi tên sáu năng lực, với mục đích sử dụng dự kiến nằm trên cả sáu và trách nhiệm giải trình bao quanh cả sáu, và phân bổ cho mỗi dạng lỗi trong năm dạng lỗi đang ẩn sau từ "hallucination" một biện pháp kiểm soát và một người chịu trách nhiệm đầu tiên. Đây là một phương án phân bổ được đề xuất, không phải một chuẩn mực đã được phê chuẩn — được thiết kế để một pilot có giới hạn có thể bác bỏ nó.

Trong playbook có gì

  • Đặt lại vấn đề — hiện diện trích dẫn so với căn cứ luận điểm so với tính còn hiệu lực, kèm một bảng về cái gì khẳng định mỗi thuộc tính, cái gì thực sự chứng minh được nó, và một đường dẫn tự nó chứng minh được gì (câu trả lời là: chỉ thuộc tính đầu tiên, và không phép kiểm tra tính trung thực nào bắt được thuộc tính thứ ba) · cùng tình huống giả định đã dựng chi tiết, đầy đủ: câu trả lời về phí mà trích dẫn chính xác đến từng đoạn, được đúng hội đồng phê duyệt, đúng người chịu trách nhiệm, đúng ngày — và vẫn sai, được chiếu trước và sau khi nguồn được sửa, với truy xuất cho câu trả lời hiện hành loại trừ biểu phí đã hết hạn trong khi một truy vấn lịch sử vẫn có thể chạm tới nó qua một bộ lọc thời gian tường minh, và một lần chuyển tiếp thay vì một phỏng đoán ở nơi bản thay thế chưa được phê duyệt hoặc ngày hiệu lực của nó còn nhập nhằng. GIẢ ĐỊNH xuyên suốt — không có ngân hàng nào, không có tỷ lệ nào, không có con số tổn thất nào, không có sự cố nào đã được báo cáo, và cũng không cần, bởi chính phiên bản bình thường mới là phiên bản đến tay khách hàng
  • Năm dạng lỗi, năm chủ thể — truy xuất bỏ sót (trưởng bộ phận kỹ thuật truy xuất), sinh nội dung không căn cứ (chủ sở hữu sản phẩm trợ lý), đúng nhưng đã bị thay thế (chủ sở hữu nội dung chính sách hoặc sản phẩm), đúng nhưng ngoài phạm vi (chủ sở hữu kết quả đầu ra cho khách hàng) và đọc sai bảng hoặc bản scan (chủ sở hữu khâu nạp tài liệu) — mỗi dạng kèm triệu chứng quan sát được, các biện pháp kiểm soát, và người chịu trách nhiệm đầu tiên, cộng với dạng thứ sáu âm thầm hơn: câu trả lời không tái dựng được, nơi ngân hàng không thể phục hồi lại bằng chứng mình đã dùng khi khách hàng khiếu nại nhiều tháng sau, thuộc về chủ sở hữu dịch vụ và được kiểm soát bằng việc lưu giữ bằng chứng và một quy trình xử lý sự cố. Đây là mô hình chẩn đoán được đề xuất chứ không phải một phân bố nguyên nhân đã đo được, nhiều dạng lỗi có thể cùng đúng với một câu trả lời, và không dạng nào trong năm dạng cần đến một kẻ tấn công — đầu độc kho tri thức theo hướng đối kháng là chủ đề của khung tư duy trước, không phải chủ đề này
  • Sáu năng lực — được đề xuất, chưa được phê chuẩn — mỗi năng lực kèm một câu hỏi điều hành duy nhất làm lộ ra nó có người chịu trách nhiệm hay không, bằng chứng triển khai cần yêu cầu, và rủi ro còn lại của nó: G1 bằng chứng có thẩm quyền (phiên bản đã phê duyệt nào áp dụng cho khách hàng này và thời điểm này — với việc rút tài liệu khỏi truy xuất hiện hành đã được kiểm thử, đối lại rủi ro còn lại là nội dung được gắn thẻ đúng nhưng sai về bản chất ngay tại nguồn) · G2 truy xuất và đọc hiểu (hệ thống có tìm được và đọc đúng đoạn đang có hiệu lực hay không — các bài kiểm thử truy xuất chủ ý bao gồm bảng, bản scan và chú thích giới hạn, đối lại rủi ro còn lại là đúng đoạn vẫn được truy xuất rồi bị diễn giải sai) · G3 quy chiếu luận điểm (mọi luận điểm trọng yếu có truy được về bằng chứng của nó hay không — liên kết luận điểm–đoạn văn, phiên bản nguồn và dấu thời gian truy xuất như một bản ghi câu trả lời tái dựng được, đối lại rủi ro còn lại là một đường dẫn hợp lệ vẫn đi kèm một suy luận sai) · G4 phạm vi và khước từ (điều gì xảy ra khi bằng chứng thiếu, xung đột hoặc ngoài phạm vi — các đường làm rõ và khước từ đã kiểm thử và một cơ chế chuyển tiếp được xác minh là hoàn tất, với độ bao phủ được báo cáo bên cạnh tỷ lệ lỗi, bởi một hệ thống khước từ mọi thứ sẽ trông hoàn hảo ở chỉ số này và vô dụng ở chỉ số kia) · G5 kiểm chứng (bằng chứng có làm căn cứ cho một câu trả lời đúng và còn hiệu lực hay không — ba phép kiểm tra riêng biệt thay vì một điểm trung thực trộn lẫn, một bộ đánh giá đã được hiệu chuẩn theo mức đồng thuận với người chấm chuyên gia thay vì được mặc định, và việc chuyên gia phán định trên các trường hợp trọng yếu, đối lại rủi ro còn lại là một bộ đánh giá tự động mắc cùng lỗi với mô hình, bởi nhất quán không phải là đúng) · và G6 trách nhiệm giải trình (ai phê duyệt, duy trì và sửa dịch vụ này — một người chịu trách nhiệm phát hành phía kinh doanh có tên, các chủ sở hữu nguồn có tên, một cam kết công bố về độ mới cho việc một thay đổi chính sách mất bao lâu để tới được chỉ mục, và một tuyến xử lý sự cố và đính chính tới khách hàng hoạt động được, đối lại rủi ro còn lại là log và người đứng tên tự chúng không bảo đảm hành động kịp thời)
  • Vì sao cấu trúc có hình dạng này — vì sao G3 và G5 phải tách riêng, bởi truy vết ghi lại tham chiếu trong khi kiểm chứng phán định xem tham chiếu đó có làm căn cứ cho luận điểm hay không, và gộp một bản ghi vào một phán định tức là để một đường dẫn trông hợp lệ đứng thay cho một câu trả lời đã được kiểm · vì sao trách nhiệm giải trình được giữ lại như một năng lực riêng và được xây trước chứ không phải sau cùng, bởi truy xuất tốt hay một dấu vết kiểm toán đầy đủ đều không phân định ai chịu trách nhiệm gọi lại cho khách hàng · vì sao không có lớp thứ bảy, khi phạm vi và cách trình bày cắt ngang toàn bộ kiến trúc chứ không gắn thêm như một giai đoạn · và vì sao thứ tự quan trọng hơn cách đánh số: xác định mục đích sử dụng dự kiến và chủ sở hữu, thiết lập bằng chứng có thẩm quyền và một tập kiểm thử ban đầu, rồi lặp cải tiến truy xuất, quy chiếu và khước từ dựa trên các phép thử đó
  • Thế triển khai, phép thử trước khi phát hành và lớp Việt Nam — ba thế triển khai với cường độ triển khai tương ứng mức độ hệ quả, một chính sách được khuyến nghị chứ không phải một phân loại pháp lý và tường minh không phải sự cho phép một dịch vụ tiếp xúc khách hàng được bỏ qua kiểm chứng hay quyền sở hữu: trợ lý nội bộ cho nhân viên, nơi việc nhân viên xác minh đảm nhiệm phần lớn G5; trợ lý thông tin cho khách hàng, nơi luận điểm thiếu căn cứ hoặc xung đột được chuyển tới một người hoặc một câu trả lời đã phê duyệt trước thay vì một phỏng đoán do mô hình sinh ra; và trợ lý kích hoạt hành động, nơi văn bản có căn cứ, tự nó, không bao giờ đủ để phân quyền thay đổi một tài khoản · phép thử trước khi phát hành — một miền sản phẩm hoặc chính sách có người đứng tên, tập đánh giá được dựng trước khi anh/chị tinh chỉnh bất cứ thứ gì, như 5 cửa mà nó phải đóng được (nguồn bị thiếu, phiên bản đã cũ, các tài liệu xung đột, câu hỏi ngoài phạm vi, bảng phải được đọc đúng), một tập phát hành giữ riêng tách khỏi các câu hỏi dùng để tinh chỉnh, độ bao phủ được ghi lại bên cạnh tỷ lệ lỗi, và việc mở rộng chỉ dựa trên các tiêu chí anh/chị tự chọn đối chiếu với đường cơ sở của chính mình, với khối lượng việc duy trì nội dung và thời gian con người rà soát được theo dõi bên cạnh chi phí suy luận · không quy định mục tiêu độ chính xác nào và không quy định thời lượng theo lịch nào, bởi không có tỷ lệ mức độ có căn cứ công khai nào của ngành ngân hàng đã được kiểm chứng để neo một ngưỡng vào · và bài chẩn đoán một buổi chiều: mang sáu câu hỏi điều hành vào phiên hội đồng công nghệ sắp tới, viết ra ai chịu trách nhiệm cho từng câu trả lời, rồi hỏi trợ lý của anh/chị thực sự đo được thuộc tính nào trong ba thuộc tính

Năm trang · miễn phí khi đăng nhập thành viên · PDF.

Một lưu ý về bản tải về, vì chính tinh thần truy vết mà playbook này cổ vũ. Bảng chẩn đoán ở trang 3 của bản đó được đặt tiêu đề "Năm dạng lỗi. Năm chủ thể khác nhau." rồi liệt kê sáu hàng, hàng thứ sáu là câu trả lời không tái dựng được, trước khi nhắc tới "sáu dạng lỗi trên". Cách đóng khung trên website này là cách có chủ ý và khớp với bản video: năm dạng lỗi tạo ra một câu trả lời sai, và dạng thứ sáu là việc không thể tái dựng lại bất kỳ dạng nào trong số đó về sau, và đó là lý do website này xử lý nó trong G6 chứ không phải như một hàng ngang cấp. Cùng một biện pháp kiểm soát, cùng một chủ thể, chỉ khác nhau một cách trình bày — không có luận điểm nào khác nhau giữa hai bản.

Xem: youtu.be/HUARQj_VWVU — Video 15: Five Failures Hide Behind One Word Hallucination, 8 phút 20 giây.

Muốn nhận bản hằng tuần? Đăng ký The AI Architect Letter · Đọc bản phân tích đầy đủ · Đọc các bài phân tích mới nhất.