Tin tức Thisme
AI tạo câu hỏi trắc nghiệm: quy trình soạn, chuyên gia duyệt và quản lý ngân hàng câu hỏi
AI tạo câu hỏi trắc nghiệm giúp soạn nhanh bản nháp câu hỏi và các biến thể từ học liệu được phép sử dụng. Nhưng câu hỏi chỉ nên vào đề sau khi người có chuyên môn sửa và duyệt. Một quy trình đáng tin gồm các bước: chuẩn bị nguồn và bản thiết kế đề, để AI soạn nháp, để chuyên gia duyệt, gắn từng câu với mục tiêu đánh giá, chủ đề, độ khó và phiên bản, rồi lắp ráp đề từ những câu đã duyệt. Điểm chính thức, phúc khảo và quyết định học vụ vẫn do đơn vị đào tạo quyết định.
AI tạo câu hỏi trắc nghiệm làm được gì và không làm gì?
AI làm tốt phần việc tốn công nhất khi viết từ đầu. Từ nguồn bạn chọn, nó soạn phần dẫn, đề xuất đáp án, gợi ý phương án nhiễu, viết giải thích và tạo thêm biến thể cho cùng một mục tiêu. Mọi thứ AI tạo ra đều là bản nháp. Công sức của giảng viên chuyển từ ngồi viết sang rà soát, sửa và quyết định giữ hay bỏ.
- Không tự đưa câu hỏi vào đề khi người có chuyên môn chưa duyệt.
- Không tự quyết định điểm chính thức: AI chỉ gợi ý, người chấm hiệu chỉnh và chốt.
- Không tự kết luận gian lận hay hủy bài: tín hiệu bất thường được chuyển cho giám thị hoặc người có thẩm quyền xem xét.
- Không quyết định học vụ, cách phúc khảo hay điều kiện cấp chứng nhận: các quy tắc này do đơn vị đào tạo đặt ra.
Cũng cần tách hai loại câu hỏi. Câu hỏi tự luyện trong khóa học, ví dụ câu do trợ giảng AI tạo từ nội dung đã học để người học ôn lại phần còn yếu, không dùng để chấm điểm chính thức hay xác nhận đạt chuẩn. Câu hỏi cho kỳ thi chính thức cần mức kiểm soát cao hơn hẳn: có người duyệt, có phiên bản, có hồ sơ để kiểm tra lại. Đừng để câu tự luyện lọt vào kho đề thi chỉ vì trông giống nhau.
Vì sao câu hỏi do AI soạn vẫn cần chuyên gia duyệt?
Lỗi của bản nháp AI thường không lộ ngay. Có câu ghi sai đáp án. Có câu mà hai phương án cùng đúng nếu đọc kỹ. Có phương án nhiễu vô lý đến mức người học loại được mà không cần biết bài. Khó phát hiện nhất là câu đúng về kiến thức nhưng lệch bài học, hoặc lấy từ một bản tài liệu cũ mà khóa đã bỏ. Mỗi lỗi như vậy đo sai năng lực người học và làm kết quả kỳ thi khó bảo vệ khi có phúc khảo.
Hướng dẫn của UNESCO về AI tạo sinh trong giáo dục nhấn mạnh con người phải giám sát và xác minh nội dung do AI tạo, và tổ chức giáo dục chịu trách nhiệm về cách dùng công cụ. Khung quản lý rủi ro AI của NIST cũng đặt vai trò giám sát của con người, việc kiểm tra độ tin cậy và ghi nhận trách nhiệm vào trung tâm khi vận hành hệ thống AI. Với ngân hàng đề, điều đó có nghĩa là mỗi câu phải có người duyệt được ghi tên, không phải một nút bấm chấp nhận hàng loạt. [1][4]
- Phần dẫn tự đứng được: đọc xong phần dẫn, người học đã hiểu câu hỏi đang hỏi gì.
- Chỉ có một đáp án đúng rõ ràng, hoặc nêu rõ yêu cầu chọn đáp án tốt nhất.
- Phương án nhiễu hợp lý, phản ánh lỗi hiểu sai thường gặp chứ không phải câu đùa.
- Không gợi ý đáp án qua độ dài, cách dùng từ hay ngữ pháp của phương án.
- Có câu đo được tư duy bậc cao, không chỉ hỏi nhớ định nghĩa.
Quy trình AI tạo câu hỏi trắc nghiệm gồm những bước nào?
- Chuẩn bị học liệu được phép sử dụng, bản thiết kế đề và câu hỏi hiện có.
- Cho AI soạn bản nháp câu hỏi, biến thể, phương án nhiễu và giải thích từ nguồn đã chọn.
- Chuyên gia sửa, duyệt hoặc loại từng câu và ghi lý do.
- Gắn mục tiêu, chủ đề, độ khó, đáp án, giải thích, phiên bản và trạng thái duyệt.
- Lắp ráp đề theo bản thiết kế chỉ từ câu đã duyệt, ghi nhận bài làm, điểm và phúc khảo.
Bước một: Chuẩn bị nguồn và bản thiết kế đề
AI chỉ sát bài học khi nguồn đưa vào sát bài học. Trước khi tạo câu nào, người phụ trách học liệu xác định tài liệu được phép sử dụng và phiên bản đang hiện hành. Người phụ trách khảo thí chuẩn bị bản thiết kế đề: mục tiêu đánh giá, chủ đề, mức độ và số câu cho từng phần. Đưa cả câu hỏi hiện có kèm đáp án, giải thích và tên người duyệt vào, để AI không soạn lại những câu bạn đã có và để chuyên gia có mẫu đối chiếu.
Bước hai: AI soạn bản nháp và biến thể
Từ nguồn đã chọn, AI tạo câu hỏi, biến thể, phương án nhiễu và giải thích đáp án. Mọi đầu ra nằm ở trạng thái nháp và gắn với đoạn tài liệu nguồn, để người duyệt mở ra kiểm tra ngay thay vì phải tự tìm lại câu này lấy ý từ đâu.
Bước ba: Chuyên gia sửa, duyệt hoặc loại
- Giảng viên hoặc chuyên gia nội dung kiểm tra đáp án, cách diễn đạt, độ khó và mức bám bài học của từng câu.
- Ghi lý do khi sửa hoặc loại, ví dụ đáp án sai, phương án nhiễu lộ, lấy từ tài liệu cũ; lý do này dùng để chỉnh cách chuẩn bị nguồn ở đợt sau.
- Chỉ câu đã duyệt mới được chuyển sang kho dùng cho đề; câu bị loại vẫn lưu lại để không bị tạo lại lần nữa.
Bước bốn: Gắn thông tin chú thích và lưu phiên bản
Mỗi câu cần đủ thông tin: mục tiêu đánh giá, chủ đề, độ khó, đáp án, giải thích, phiên bản và trạng thái duyệt. Phần dễ bị bỏ qua là cách đặt phiên bản. Hãy thống nhất quy ước từ đầu, trước khi tạo thêm bản nháp mới, nếu không kho câu hỏi sẽ nhanh chóng lẫn câu cũ với câu mới và lẫn mức độ giữa các đợt.
Bước năm: Lắp ráp đề và ghi nhận kết quả
Khi tổ chức kỳ thi, quản trị viên cấu hình lịch, nhóm thí sinh, điều kiện, số lượt làm và dùng bản thiết kế đề để lắp ráp đề từ câu đã duyệt. Hệ thống ghi nhận bài làm, trạng thái xử lý, điểm và các trường hợp cần phúc khảo hoặc ngoại lệ vào hồ sơ kết quả. Khi người học khiếu nại một câu, bạn truy lại được câu đó thuộc phiên bản nào, ai duyệt và dựa trên tài liệu nào.
Gắn câu hỏi với chuẩn đầu ra như thế nào?
Mỗi câu hỏi nên trỏ về một mục tiêu hoặc chuẩn đầu ra cụ thể. Để gắn mức độ nhận thức, nhiều đơn vị dùng thang Bloom, phân biệt các mức từ nhớ, hiểu, vận dụng đến phân tích, đánh giá và sáng tạo. Khi rà bản nháp AI, việc gắn mức này giúp chuyên gia thấy ngay đề đang dồn quá nhiều câu hỏi nhớ, trong khi chuẩn đầu ra yêu cầu người học vận dụng.[3]
Ở cấp chương trình, ma trận đầu ra – học phần – đánh giá nối mỗi mục tiêu với học phần, hoạt động và cách đánh giá. Đặt ngân hàng câu hỏi cạnh ma trận này, bạn phát hiện được chuẩn đầu ra nào chưa có câu hỏi nào đo. Khi chương trình đổi phiên bản, bạn cũng biết những câu nào gắn với mục tiêu vừa thay đổi và cần rà soát lại. AI có thể gợi ý cách gắn, còn chuyên gia của đơn vị duyệt mọi đề xuất.
Quản lý ngân hàng câu hỏi sau khi AI soạn
- Dùng trạng thái thống nhất cho mọi câu: nháp, đã duyệt, ngừng dùng; chỉ trạng thái đã duyệt được lắp vào đề.
- Lưu lịch sử chỉnh sửa và người duyệt, để khi có phúc khảo bạn kiểm tra lại được quyết định đã đưa ra.
- Gắn mỗi câu với phiên bản học liệu nguồn, để biết câu nào bị ảnh hưởng khi tài liệu thay đổi.
Khi học liệu nguồn được cập nhật, đừng chờ đến kỳ thi mới phát hiện. Người phụ trách học liệu báo cho người phụ trách khảo thí ngay lúc đổi tài liệu; các câu gắn với phần đã đổi chuyển về trạng thái cần rà soát cho đến khi chuyên gia xác nhận lại.
Đo gì để biết quy trình có đáng tin hơn?
Tốc độ tạo câu hỏi là chỉ số dễ đo nhưng dễ đánh lừa. Tạo nhanh mà chuyên gia phải sửa gần hết thì công sức chỉ đổi chỗ. Điều đáng theo dõi là độ tin cậy của kết quả.
- Tỷ lệ câu hỏi phải sửa hoặc bị loại trong mỗi đợt AI soạn nháp.
- Thời gian xử lý từ bản nháp đến câu đã duyệt.
- Mức nhất quán giữa tiêu chí chấm và kết quả.
- Số trường hợp ngoại lệ và số yêu cầu phúc khảo liên quan đến nội dung câu hỏi.
Bắt đầu từ đâu mà không làm lại toàn bộ ngân hàng câu hỏi?
Bạn không cần chuyển cả kho đề ngay. Hãy chọn một học phần hoặc một kỳ thi, làm thử trọn quy trình, đo tỷ lệ câu phải sửa rồi mới quyết định mở rộng.
- Người phụ trách khảo thí chọn một học phần hoặc một kỳ thi sắp tổ chức.
- Đội chuyên môn chuẩn bị bản thiết kế đề, mục tiêu đánh giá, câu hỏi hiện có, đáp án, giải thích và người duyệt.
- Hai bên thống nhất thông tin chú thích, cách đặt phiên bản và trạng thái duyệt trước khi tạo bản nháp mới.
- Sau đợt đầu, cùng xem lại câu bị sửa, bị loại và lý do, rồi điều chỉnh nguồn trước khi mở rộng.
Bạn cũng không bắt buộc phải thay nền tảng học tập hay phần mềm thi đang dùng. Hệ thống đánh giá có thể dùng độc lập hoặc kết nối nền tảng học tập, hệ thống quản lý học viên, hệ thống nhân sự, cổng học và hệ thống định danh để nhận danh sách thí sinh, trả kết quả và lưu hồ sơ. Phạm vi kết nối cụ thể chỉ được xác nhận sau khi chúng tôi kiểm tra hệ thống của bạn.
Nếu đơn vị của bạn đang có kho câu hỏi lẫn phiên bản hoặc muốn dùng AI mà vẫn giữ quyền quyết định ở chuyên gia, hãy đăng ký buổi khảo sát. Chúng ta sẽ cùng xem lại ngân hàng câu hỏi và kỳ thi bạn đang vận hành, chọn một học phần để làm thử quy trình AI soạn nháp, chuyên gia duyệt và lắp ráp đề theo những việc đã thống nhất.