Hiểu phản hồi AI

Sau khi sinh viên vượt qua thời lượng tối thiểu của phiên, họ sẽ nhận được báo cáo phản hồi. Nội dung báo cáo phụ thuộc vào những khía cạnh bạn đã chọn ở bước Đánh giá khi tạo hoạt động. Hoạt động mới bắt đầu với hai khía cạnh được chọn; Tạo bằng AI chọn tất cả các khía cạnh, nên hãy bỏ bớt. Cách viết phản hồi — mức độ dễ đọc, mức độ chi tiết và ngôn ngữ của phần giải thích (tiếng Anh, trừ khi bạn thay đổi) — nằm trong Cài đặt nâng cao ở cùng bước đó.

• Giao tiếp tổng thể (mặc định) — độ rõ ràng, độ trôi chảy, khả năng hiểu, việc có đạt được mục tiêu giao tiếp hay không
• Kỹ năng hội thoại (mặc định) — mạch hội thoại, phản hồi phù hợp, chủ động mở chủ đề, câu hỏi tiếp nối, luân phiên lượt nói
• Ngữ pháp và cú pháp — độ chính xác, thì, cấu trúc câu, trật tự từ và các dạng lỗi lặp lại
• Từ vựng và cách dùng từ — độ phong phú, độ chính xác và mức độ phù hợp với ngữ cảnh
• Mức độ phù hợp văn hóa — nhận thức văn hóa, chuẩn mực xã hội và văn phong trang trọng/thân mật

Lemon nói: Mỗi khía cạnh bổ sung một vài điểm mạnh và điểm cần cải thiện, và được yêu cầu không nhắc đến bất cứ điều gì mà bản chép lời không chứng minh được.

Khía cạnh này cần một bước thiết lập mà các khía cạnh khác không cần. Khía cạnh này đánh giá dựa trên ngữ cảnh văn hóa bạn đã xác định cho hoạt động — vì vậy nếu trường đó để trống, khía cạnh này không có gì để đối chiếu, và vẫn bị làm mờ (Cần ngữ cảnh văn hóa) cho đến khi bạn điền vào.

Lemon nói: Hãy điền Ngữ cảnh văn hóa ở bước Tình huống trước, rồi mới bật khía cạnh này. Đúng theo thứ tự đó.

Chọn cả năm khía cạnh nghe rất hấp dẫn. Nhưng trên thực tế, một báo cáo năm khía cạnh cho một cuộc hội thoại Sơ cấp dài sáu phút sẽ bị dàn trải — đơn giản là một bản chép lời ngắn của người mới bắt đầu không có đủ bằng chứng để nhận xét thực chất về cả năm khía cạnh. Hai hoặc ba khía cạnh trọng tâm sẽ tạo ra báo cáo mà sinh viên thực sự đọc.

• Hoạt động Sơ cấp — Giao tiếp tổng thể cộng thêm một khía cạnh khác
• Hoạt động tập trung vào ngữ pháp — thêm Ngữ pháp và cú pháp, đồng thời tắt một khía cạnh khác
• Hoạt động về văn hóa hoặc văn phong — thêm Mức độ phù hợp văn hóa và điền ngữ cảnh văn hóa
• Hoạt động Cao cấp — ba hoặc bốn khía cạnh là hợp lý; có nhiều bằng chứng hơn để đánh giá

Lemon nói: Hãy chọn khía cạnh phù hợp với mục đích của hoạt động. Một hoạt động từ vựng không cần báo cáo ngữ pháp.

Cần nói rõ điều gì đáng tin cậy, vì giảng viên có lý do chính đáng để muốn biết trước khi dựa vào phản hồi. Phản hồi đáng tin cậy với những gì thể hiện rõ trong văn bản của cuộc hội thoại.

• Sinh viên có đạt được mục tiêu giao tiếp hay không
• Sinh viên có duy trì được cuộc hội thoại hay để nó bị chững lại
• Độ phong phú và mức độ lặp lại của từ vựng
• Các dạng ngữ pháp lặp lại qua nhiều lượt nói
• Các mục tiêu học tập có được đề cập hay không

Lemon nói: Bất cứ điều gì xuất hiện thành xu hướng trong toàn bộ bản chép lời, nó đều xử lý tốt.

Những giới hạn thực tế cũng quan trọng không kém điểm mạnh. Phản hồi được tạo từ bản chép lời qua nhận dạng giọng nói, nghĩa là bất kỳ lỗi nhận dạng nào cũng sẽ đi thẳng vào phần đánh giá.

• Phát âm — không được đánh giá trực tiếp từ âm thanh trong báo cáo phản hồi tiêu chuẩn
• Giọng địa phương hoặc giọng nước ngoài — nhận dạng kém chính xác hơn, có thể trông giống lỗi của người học
• Phiên rất ngắn — bản chép lời ít nội dung sẽ cho phản hồi sơ sài, chung chung
• Trường hợp đơn lẻ — một lỗi nhỏ có thể bị đánh giá quá nặng hoặc quá nhẹ; các xu hướng đáng tin cậy hơn
• Sắc thái văn hóa — chỉ tốt đến mức ngữ cảnh văn hóa mà bạn cung cấp

Lemon nói: Những sinh viên dễ bị bản chép lời đánh giá sai nhất là những người có giọng địa phương hoặc giọng nước ngoài nặng nhất. Bạn nên biết điều này trước khi chấm điểm.

Cùng với các khía cạnh phản hồi, các cuộc hội thoại đã hoàn thành còn nhận được ước tính mức trình độ. Đây là chỉ báo hữu ích để theo dõi sự thay đổi trong một học kỳ, nhưng nó chỉ là ước tính từ một cuộc hội thoại ngắn, không phải kết quả xếp lớp.

• Hữu ích để nhận ra xu hướng qua nhiều hoạt động
• Hữu ích để tìm ra những sinh viên cách xa mức bạn kỳ vọng
• Không thay thế cho bài đánh giá xếp lớp
• Không đủ ổn định để so sánh hai sinh viên, mỗi người chỉ với một phiên

Lemon nói: Hãy nhìn vào xu hướng trong cả học kỳ, không phải con số từ một cuộc hội thoại.

Khi báo cáo đã sẵn sàng, sinh viên sẽ có một cuộc trò chuyện tiếp nối trên trang phản hồi, nơi họ có thể đặt câu hỏi về báo cáo của mình — chẳng hạn xin thêm ví dụ về một điểm ngữ pháp, hoặc hỏi ý nghĩa của một nhận xét. Khi bạn mở một bài nộp, thẻ Huấn luyện viên AI sẽ cho bạn xem cuộc trò chuyện đó.

Lemon nói: Thẻ Huấn luyện viên AI là một cửa sổ kín đáo cho thấy điều gì đã khiến sinh viên bối rối. Đáng xem qua khi một báo cáo có vẻ không được đón nhận tốt.