m.school › Trợ lý AI giúp được việc gì, và không giúp được việc gì › bài 1
Mỗi câu bấm một phương án. Đúng hay sai và lời giải thích hiện ngay. Không lưu điểm, không ai xem kết quả của bạn.
Câu 1. Khác với việc tra một bảng tra, trợ lý AI không có chỗ trả về trống. Theo bài, vì sao?
Tra bảng mà không có dòng thì bạn không đọc được gì, và chính chỗ trống ấy là một thông tin có ích. Trợ lý AI thì luôn dựng được một đoạn chữ hợp lý, vì dựng chữ hợp lý đúng là việc nó làm; thiếu chất liệu thì nó dựng từ những mảnh gần giống. Xem mục 1.
Câu 2. Bài chia một câu trả lời thành ba loại chất liệu. Một đoạn nêu số hiệu tiêu chuẩn kèm năm ban hành, mà bạn không hề đưa số hiệu ấy vào, thuộc loại nào?
Số hiệu, con số, tên riêng, trích dẫn trông rất sắc nét mà bạn không đưa vào là dấu hiệu của loại thứ ba, phần máy ghép thêm cho câu được trôi. Đây là loại ít đáng tin nhất, và trớ trêu là nó thường trông sắc nét nhất. Xem mục 3 và bảng tổng hợp.
Câu 3. Một câu trả lời viết rất chắc chắn, có tên riêng, có năm tháng. Theo bài, điều đó nói lên gì về mức đúng của nội dung?
Ở người thì giọng chắc chắn có liên hệ với mức đã kiểm, nên phản xạ đọc giọng là rất sâu. Với máy thì mối liên hệ ấy đứt: mức chắc chắn trong giọng văn chỉ là một đặc tính của văn phong máy học được, không đo mức chắc chắn của nội dung. Xem mục 2.
Câu 4. Theo bài, với một câu hỏi đặt trong bối cảnh Việt Nam thì điều gì xảy ra?
Tài liệu kỹ thuật bằng tiếng Việt ít hơn tài liệu bằng tiếng Anh rất nhiều lần. Bài nói rõ điều này không có nghĩa là câu trả lời sẽ sai, mà có nghĩa là phần máy phải dựng thêm sẽ nhiều hơn, nên bạn soi đúng phần ấy trước. Xem mục 4.
Câu 5. Bạn nghi một con số trong câu trả lời, nên gõ thêm câu «thông tin này có chính xác không», và máy trả lời là có. Theo bài, bạn vừa làm gì?
Câu khẳng định ấy cũng được dựng bằng chính cơ chế đoán chữ đã dựng ra câu sai, nên nó không phải một nguồn độc lập. Thêm nữa, trợ lý thường chiều theo ý người hỏi. Hại hơn là bạn rời khỏi việc với cảm giác đã kiểm. Xem phần «Chỗ người ta hay làm sai».
Việc cần làm. Lấy một câu hỏi thật trong công việc tuần này của bạn, loại câu hỏi mà bình thường bạn sẽ đi hỏi đồng nghiệp hoặc đi tra tài liệu. Đặt câu hỏi ấy cho một trợ lý AI, đặt trơn, không đưa kèm tài liệu nào. In hoặc chép câu trả lời ra, rồi đánh dấu từng đoạn theo ba loại chất liệu trong bảng tổng hợp: thứ bạn đưa vào, thứ máy đã học sẵn, thứ máy dựng thêm. Sau đó chọn ba chỗ cụ thể nhất trong câu trả lời, là ba chỗ có số hoặc có tên riêng, và đi mở nguồn gốc của từng chỗ. Ghi lại kết quả: có thật, sai, hay không tìm thấy.
Cách tự chấm. Dấu hiệu bạn làm đúng: bạn đánh dấu được cả ba loại chứ không chỉ một loại; phần bạn xếp vào loại thứ ba nằm đúng ở những chỗ cụ thể nhất; và sau khi đi mở nguồn, bạn nói được rõ từng chỗ là có thật hay không, chứ không dừng ở cảm giác nghe hợp lý. Dấu hiệu còn sai: bạn xếp cả câu trả lời vào một loại; bạn kết luận rằng câu trả lời đúng mà chưa mở nguồn nào; hoặc bạn hỏi lại chính cái máy để xác nhận rồi coi đó là đã kiểm.
Lời giải mẫu. Lấy một câu hỏi dựng ra để minh hoạ: một kỹ sư hỏi vật liệu nào hay dùng cho một chi tiết chịu va đập trong đồ gia dụng, và có tiêu chuẩn nào quy định cách thử va đập. Câu trả lời dài mười hai dòng. Đoạn nêu tên vài nhóm vật liệu và lý do chọn: đây là thứ máy đã học sẵn, đúng ở mức chung, dùng được để biết nên đi tra tiếp theo hướng nào. Đoạn nêu một số hiệu tiêu chuẩn kèm năm ban hành: đây là chỗ nghi ngờ trước tiên, phải mở trang của tổ chức ban hành ra xem số hiệu ấy có thật và còn hiệu lực không. Đoạn nêu một con số về mức năng lượng va đập thường dùng: cũng phải mở nguồn, vì con số không đi kèm điều kiện thử thì không nói lên gì. Kết luận của bài tập không phải là câu trả lời đúng hay sai, mà là: trong mười hai dòng ấy, phần dùng ngay được chỉ là phần chỉ hướng, còn phần có số thì chưa dùng được cho tới khi mở nguồn.
Bản chữ của video, để đọc lại hoặc tra cứu
Lớp này nói về trợ lý AI, loại công cụ bạn gõ một câu vào rồi nhận lại một đoạn chữ. Lớp dạy ở mức nguyên lý: nó làm được gì, nó hỏng ở đâu, và kiểm một câu trả lời bằng cách nào trước khi tin. Lớp không hướng dẫn thao tác trên một công cụ cụ thể, và không dựng cách làm việc cho một ngành cụ thể.
Bài đầu làm một việc: mở nắp ra xem bên trong. Bạn chưa cần biết nó hỏng ở đâu nếu chưa biết nó đang làm gì. Bốn bài sau dựa hết lên bài này.
Mô hình ngôn ngữ lớn (large language model) là thứ nằm bên dưới phần lớn trợ lý AI bạn đang gặp. Người ta dựng nó bằng cách cho một chương trình đọc một khối văn bản rất lớn, rồi luyện cho nó một việc: cho trước một đoạn chữ, đoán xem đoạn chữ hợp lý đi tiếp là gì. Luyện đi luyện lại rất nhiều lần, nó thành ra giỏi việc đoán ấy.
Khi bạn gõ một câu hỏi, thứ cái máy nhận được không phải là một câu hỏi theo nghĩa bạn hiểu. Nó nhận được một đoạn chữ, và việc của nó là dựng tiếp đoạn chữ hợp lý đi sau. Câu trả lời ra đời từng mảnh một, mỗi mảnh chọn theo những mảnh đã có trước nó.
Hãy so với một thứ bạn quen hơn: tra một bảng tra. Bạn mở bảng, tìm dòng, đọc giá trị. Nếu bảng không có dòng đó thì bạn không đọc được gì, và chính chỗ không đọc được ấy là một thông tin có ích: thứ bạn cần không nằm trong bảng này. Một kho dữ liệu cũng vậy, hỏi một mã không có thì nó trả về chỗ trống.
Trợ lý AI không có chỗ trả về trống. Nó luôn dựng được một đoạn chữ hợp lý, vì dựng chữ hợp lý chính là việc nó làm. Thiếu chất liệu thì nó vẫn dựng, chỉ là dựng từ những mảnh gần giống. Hỏi về một tiêu chuẩn có thật thì nó dựng ra câu nói về tiêu chuẩn ấy. Hỏi về một tiêu chuẩn không tồn tại, mà bạn đặt cho một cái tên nghe hợp lý, thì nó cũng dựng ra một câu nghe hợp lý y như vậy.
Có một chỗ cần nói rõ, vì nó hay gây nhầm. Nhiều trợ lý ngày nay được gắn thêm công cụ: chúng tra trên mạng được, đọc được tệp bạn đưa lên, chạy được phép tính. Những thứ gắn thêm đó làm chất liệu đầu vào tốt hơn hẳn, và làm lỗi ít đi. Nhưng phần dựng ra câu trả lời vẫn là phần đoán chữ. Công cụ gắn thêm đưa thêm chất liệu vào, chứ không đổi cách máy ghép chữ lại với nhau. Nên cách nghĩ trong bài này vẫn đúng với cả những trợ lý đã được gắn công cụ.
Cái máy được rèn để đoạn chữ nó viết ra giống văn người viết: đúng ngữ pháp, mạch lạc, đi thẳng vào câu hỏi, có thứ lớp. Người ta đo nó bằng mức giống ấy, và chỉnh nó cho tới khi đạt.
Nó không được rèn để biết lúc nào mình đang không biết. Đây là chỗ nên dừng lại một chút, vì nó đi ngược phản xạ của bạn.
Khi một người không chắc, giọng họ đổi. Họ nói chậm lại, nói vòng, chêm vào «hình như», «tôi nghĩ là», «để tôi xem lại đã». Bạn đọc những dấu hiệu đó từ nhỏ, và đọc mà không cần cố ý. Nghe ai đó nói chắc nịch, có số, có tên, có ngày tháng, bạn tự cho rằng người ấy đã kiểm trước khi nói.
Với trợ lý AI, mối liên hệ ấy đứt. Câu đúng và câu sai ra đời bằng cùng một cơ chế ghép chữ, nên chúng giống nhau ở bề ngoài. Cùng một giọng điềm tĩnh, cùng lối trình bày gọn gàng, cùng những con số trông như đã tra. Mức chắc chắn trong giọng văn của máy không đo mức chắc chắn của nội dung. Nó chỉ là một đặc tính của văn phong mà máy đã học được từ văn bản của người.
Giới nghề gọi phần nội dung máy dựng ra nghe như thật mà không có thật là nội dung bịa (hallucination). Chữ tiếng Anh ấy hơi dễ gây hiểu nhầm, vì nó gợi ý rằng máy đang ở một trạng thái bất thường. Thật ra không phải. Máy vẫn đang làm đúng việc nó được luyện, là ghép chữ hợp lý. Nội dung bịa không phải là lúc máy hỏng, mà là lúc việc máy làm không trùng với việc bạn cần.
Hệ quả thực tế rất đáng nhớ: bạn không bắt được loại lỗi này bằng cách đọc kỹ hơn. Đọc kỹ hơn giúp bạn bắt câu lủng củng, câu lạc đề, câu tự mâu thuẫn với câu trên. Nó không giúp bạn bắt một con số bịa hay một nguồn không có thật, vì những thứ ấy không để lại dấu vết nào trong văn bản. Muốn bắt thì phải đi ra ngoài văn bản mà đối chiếu. Cách làm việc đó là nội dung của bài 4 trong lớp này.
Một câu trả lời trông như một khối liền. Thật ra nó được ghép từ ba loại chất liệu khác nhau, và ba loại ấy không đáng tin như nhau. Tách được chúng ra là việc có ích nhiều nhất mà bạn học ở bài này.
Loại thứ nhất là thứ bạn đưa vào. Câu hỏi bạn viết, đoạn tài liệu bạn dán vào, tệp bạn đưa lên, số liệu bạn gõ ra. Máy có sẵn chất liệu này trước mắt. Nên khi nó tóm tắt, sắp xếp lại hay diễn đạt lại phần này, bạn kiểm rất nhanh: đối chiếu với bản gốc đang nằm trong tay bạn. Đây là loại chất liệu đáng tin hơn cả, và cũng là loại bạn chủ động làm cho nhiều lên được.
Loại thứ hai là thứ nằm sẵn trong phần máy đã học. Kiến thức chung đã được viết ra nhiều lần ở nhiều nơi: định nghĩa một khái niệm phổ biến, nguyên lý của một phương pháp quen thuộc, cách người ta thường làm một việc. Phần này hay đúng ở mức chung, vì nó được lặp lại nhiều nên máy học được chắc. Nhưng nó có hai giới hạn. Nó dừng ở mốc thời gian của khối văn bản dùng để luyện, nên thứ xảy ra sau mốc ấy thì máy không có. Và nó mỏng dần khi bạn đi vào chỗ ít người viết: một quy định của Việt Nam vừa được sửa, giá vật tư ở một vùng, thói quen của một nhóm người mua hẹp.
Loại thứ ba là thứ máy dựng thêm tại chỗ. Khi hai loại trên không đủ để ghép thành một câu trả lời trôi chảy, máy vẫn phải ghép tiếp, và phần ghép thêm ấy được dựng theo hình dạng của những thứ giống nó. Một số hiệu tiêu chuẩn đúng kiểu. Một con số đúng cỡ. Một cái tên đúng vần. Đây là loại ít đáng tin nhất, và trớ trêu là nó thường trông sắc nét nhất, vì thứ cụ thể bao giờ cũng nghe thuyết phục hơn thứ chung chung.
Ba loại này không được dán nhãn trong câu trả lời. Máy không nói cho bạn biết câu nào thuộc loại nào. Việc tách ba loại là việc của bạn, và bạn làm được, vì bạn là người biết mình đã đưa vào những gì.
Chất liệu của trợ lý AI là văn bản. Nó chưa bao giờ đứng trong xưởng của bạn, chưa cầm sản phẩm của bạn lên tay, chưa nhìn một người mua lưỡng lự trước quầy hàng. Thứ nó có là chữ người khác đã viết về những việc gần giống việc của bạn.
Điều này sinh ra một tính chất bạn nên nhớ: câu trả lời của nó nghiêng về chỗ trung bình. Nó gom những gì đã được viết nhiều rồi trả về cái hay gặp. Với một câu hỏi chung thì đó là điểm mạnh, vì cái hay gặp thường cũng là cái đúng. Với một câu hỏi riêng thì đó là điểm yếu, vì sản phẩm của bạn khác chỗ khác đúng ở những chi tiết ít được viết ra.
Có ba vùng mà chất liệu luôn mỏng, và bạn nên dè chừng sẵn.
Vùng thứ nhất là thứ chưa ai viết. Ràng buộc thật của xưởng bạn đặt gia công, máy móc nơi ấy đang có, dung sai họ giữ được thật, thời gian họ cần để đổi khuôn. Những thứ này sống trong đầu người và trong sổ tay của xưởng, không nằm trong sách.
Vùng thứ hai là thứ viết bằng tiếng ít người dùng, hoặc viết ở nơi ít được thu thập. Tài liệu kỹ thuật bằng tiếng Việt ít hơn tài liệu bằng tiếng Anh rất nhiều lần. Nên với một câu hỏi đặt trong bối cảnh Việt Nam, phần chất liệu đã học của máy mỏng hơn hẳn so với cùng câu hỏi ấy đặt trong bối cảnh Hoa Kỳ hay châu Âu. Điều này không có nghĩa là câu trả lời sẽ sai, mà có nghĩa là phần máy phải dựng thêm sẽ nhiều hơn.
Vùng thứ ba là thứ người ta không viết ra vì nó hiển nhiên với người trong nghề. Người thợ không viết lại lý do mình luôn đặt tay vào đúng chỗ ấy. Người bán hàng không viết lại vì sao khách hay hỏi câu kia trước. Thứ hiển nhiên với người trong cuộc là thứ gần như không bao giờ vào văn bản, nên cũng không bao giờ vào máy.
Ba vùng này là lý do bài cuối của lớp nói rằng trợ lý AI không thay được việc đi gặp người dùng. Không phải vì máy kém, mà vì thứ bạn cần biết ở đó chưa từng được ai viết ra cho máy đọc.
| Loại chất liệu | Nó từ đâu ra | Dấu hiệu nhận ra | Tin tới mức nào | Việc bạn phải làm |
|---|---|---|---|---|
| Thứ bạn đưa vào | câu hỏi bạn viết, tài liệu bạn dán vào, tệp bạn đưa lên | câu trả lời nhắc lại đúng những thứ có trong tài liệu của bạn | khá cao, vì bản gốc đang trong tay bạn | đối chiếu với bản gốc, soi chỗ máy tóm tắt lệch hoặc bỏ sót |
| Thứ máy đã học sẵn | khối văn bản dùng để luyện, dừng ở một mốc thời gian | nội dung chung của nghề, định nghĩa, nguyên lý, cách làm phổ biến | vừa phải ở mức chung, thấp dần khi đi vào chỗ riêng và chỗ mới | hỏi lại xem thứ này có đổi sau mốc thời gian không, và có đúng với bối cảnh Việt Nam không |
| Thứ máy dựng thêm tại chỗ | phần máy ghép thêm cho câu trôi chảy khi thiếu chất liệu | số hiệu, con số, tên riêng, trích dẫn trông rất sắc nét mà bạn không đưa vào | thấp, và trông càng cụ thể thì càng nên dè chừng | mở nguồn gốc ra kiểm, hoặc bỏ hẳn phần đó khỏi bản của bạn |
Chụp lại bảng này. Khi đọc một câu trả lời, việc đầu tiên nên làm là hỏi mỗi đoạn thuộc dòng nào trong ba dòng trên.
Đọc giọng chắc chắn thành dấu hiệu rằng máy đã kiểm. Câu trả lời có số hiệu, có tên riêng, có năm tháng, và người đọc nhận nó mà không đối chiếu. Người ta làm vậy vì cả đời đọc chữ của người, mà ở người thì mức chắc chắn trong giọng nói đúng là có liên hệ với mức đã kiểm. Phản xạ đó rất sâu và không tắt đi được chỉ vì bạn biết mình đang đọc chữ máy. Hậu quả rơi vào chính người gửi bản tài liệu đi: khi một số hiệu bịa lọt vào bản gửi khách hay bản trình cấp trên, người chịu là người ký, không phải cái máy. Cách tránh là đặt một luật cho mình, không phụ thuộc cảm giác: mọi con số, mọi số hiệu, mọi trích dẫn đều phải mở nguồn gốc ra xem, bất kể câu văn nghe chắc tới đâu.
Hỏi lại chính cái máy để kiểm cái máy. Người dùng gõ thêm một câu «thông tin này có chính xác không», thấy máy trả lời là có, rồi yên tâm. Người ta làm vậy vì nó rẻ và nhanh, và vì câu hỏi ấy nghe giống một phép kiểm. Nhưng câu khẳng định kia cũng được dựng bằng đúng cơ chế đoán chữ đã dựng ra câu sai, nên nó không phải một nguồn độc lập. Còn một lý do nữa: trợ lý thường có xu hướng chiều theo ý người hỏi, nên hỏi gặng thì nó dễ đổi câu trả lời theo chiều bạn đang nghiêng, chứ không theo chiều sự thật. Hậu quả là người dùng có thêm cảm giác an tâm mà không có thêm bằng chứng nào. Cách tránh là kiểm bằng một nguồn ở ngoài: văn bản gốc, trang của cơ quan ban hành, một người biết việc.
Tưởng rằng bản mới hơn thì hết lỗi. Mỗi lần có bản mới, người dùng nghe nói nó đã khá hơn nhiều, rồi nới lỏng việc soát. Người ta nghĩ vậy vì các bản mới đúng là có khá hơn thật. Nhưng cơ chế dựng câu không đổi, nên loại lỗi này ít đi chứ không mất đi. Và lỗi ít đi lại tạo ra một chỗ nguy mới: lỗi càng hiếm thì người soát càng mất cảnh giác, nên khi nó xuất hiện thì càng dễ lọt. Hậu quả rơi vào nhóm nào đã bỏ thói quen soát vì thấy lâu nay không bắt được lỗi nào. Cách tránh là buộc việc soát vào loại nội dung, không buộc vào bản máy: con số và nguồn thì luôn kiểm, dù dùng bản nào.
Ví dụ dưới đây là ca thật trong lịch sử máy tính, có bài báo khoa học công khai, nên bạn tra lại được.
Năm 1966, Joseph Weizenbaum, nhà khoa học máy tính ở Viện Công nghệ Massachusetts, công bố một chương trình tên là ELIZA trên tạp chí Communications of the ACM, số tháng 1 năm 1966. Kịch bản nổi tiếng hơn cả của chương trình này tên là DOCTOR, bắt chước lối nói của một nhà trị liệu trong lần gặp đầu. Cách làm việc của nó rất đơn giản: nhặt vài từ khoá trong câu người dùng gõ vào, rồi lắp chúng vào các mẫu câu có sẵn để hỏi ngược lại.
Weizenbaum viết rõ ngay trong bài báo rằng chương trình không hiểu gì cả. Nhưng nhiều người trò chuyện với nó vẫn tin rằng mình đang nói chuyện với một người, và gán cho nó sự thấu hiểu.
Điều rút ra cho bài này: người đọc gán sự hiểu biết cho một đoạn chữ dựa vào chỗ đoạn chữ ấy nghe có trôi chảy hay không. Phản xạ đó đã có từ sáu mươi năm trước, với một chương trình chỉ lắp từ khoá vào mẫu câu. Chữ của trợ lý AI ngày nay trôi chảy hơn nhiều, nên phản xạ ấy càng mạnh.
Của MES LAB
Sách «Phát triển sản phẩm hướng thị trường», TS. Trần Anh Tuấn, chương 27 «AI chạy cùng bạn suốt 6 lần lấy nét» — phần nói vì sao một trợ lý phổ thông giỏi việc chung mà chưa nắm được thực tế của một ngành.
Sách «Thiết kế và Phát triển Sản phẩm, phiên bản 2026», TS. Trần Anh Tuấn, chương 18, mục 18.9 về giới hạn của AI — liệt kê các giới hạn theo từng chặng của việc phát triển sản phẩm.
Bên ngoài
Joseph Weizenbaum, «ELIZA — A Computer Program For the Study of Natural Language Communication Between Man and Machine», tạp chí Communications of the ACM, số tháng 1 năm 1966 — bài báo gốc giới thiệu chương trình ELIZA; chính tác giả viết rõ chương trình không hiểu gì, và đây là nguồn của phần ví dụ trong bài.
Thấy bài này có ích cho ai, gửi cho người đó.