跳至主要內容

教師指南

返回教師資源

認識 AI 回饋

每個回饋面向評量什麼、可信度有多高,以及在哪些情況下會失準。

批閱學生作業閱讀時間 9 分鐘8 個章節

五個面向,其中兩個預設為開啟

所在位置: 活動 › 開啟活動 › 評量

學生練習超過最短時間後,就會收到一份回饋報告。報告內容取決於你建立活動時,在「評量」步驟中選了哪些面向。新活動預設會選取兩個面向;「用 AI 建立」則會選取所有面向,因此請自行刪減。報告的寫法,包括閱讀難度、詳細程度和說明所用的語言(除非你更改,否則為英語),都在同一步驟的「進階設定」中設定。

「評量」步驟,顯示學生報告中可選擇的回饋面向。
新活動預設會選取「整體溝通」和「對話技巧」。
  • 整體溝通(預設):清晰度、流利度、理解程度,以及是否達成溝通目標
  • 對話技巧(預設):對話流暢度、適當回應、主動開啟話題、追問、輪流發言
  • 文法與句法:正確性、時態、句子結構、語序與錯誤模式
  • 詞彙與用字:詞彙廣度、精確度,以及是否符合情境
  • 文化適切性:文化意識、社會規範,以及正式/非正式語體

Lemon 說: 每個面向都會補充幾項優點和待加強之處,而且 AI 被要求不得提到逐字稿無法佐證的內容。

「文化適切性」需要文化背景

這個面向需要其他面向不需要的設定。它會依照你為活動設定的文化背景來評量,所以如果該欄位是空的,這個面向就沒有可以比對的依據,並會一直呈灰色(「需要文化背景」),直到你填寫為止。

注意: 之後如果清空「文化背景」,這個面向會再次關閉,所以編輯情境後,請重新檢查「評量」步驟。

Lemon 說: 先在「情境」步驟填寫「文化背景」,再啟用這個面向。一定要照這個順序。

回饋面向越少,報告越好

你可能會想把五個面向全選上。但實際上,針對一段六分鐘的初級對話產生涵蓋五個面向的報告,內容會很單薄,因為初學者簡短的逐字稿根本沒有足夠的依據,能對五個面向提出有實質意義的評論。聚焦在兩三個面向,才能產生學生真的會去讀的報告。

  • 初級活動:「整體溝通」再加上另一項
  • 以文法為重點的活動:新增「文法與句法」,並關閉另一個面向
  • 文化或語體類活動:加入「文化適切性」,並填寫文化背景
  • 高級程度的活動:選三到四個面向較合理,因為可供判斷的證據比較多

Lemon 說: 回饋面向要配合活動的目的。詞彙活動不需要文法報告。

回饋真正擅長的地方

清楚說明哪些部分值得信任很重要,因為教師在倚重回饋之前,想先知道這一點是很合理的。對於在對話文字中看得到的內容,回饋是可靠的。

  • 學生是否達成溝通目標
  • 學生是讓對話持續進行,還是讓它停滯
  • 詞彙廣度與重複使用
  • 在多次發言中反覆出現的文法模式
  • 是否觸及學習目標

Lemon 說: 只要是在整份逐字稿中反覆出現的模式,它都能掌握得很好。

較弱的部分,以及這對評分的意義

坦白面對限制,和瞭解優點一樣重要。回饋是根據語音辨識轉出的逐字稿產生的,這表示辨識器的任何錯誤,都會直接帶進評量結果中。

  • 發音:標準回饋報告不會直接根據音訊評量
  • 帶口音的語音:辨識準確度較低,看起來可能像是學習者的錯誤
  • 練習時間太短:逐字稿內容單薄,回饋也會單薄、籠統
  • 單一事例:一次失誤可能被過度或過少看重;整體模式比較可靠
  • 文化細節:品質取決於你提供的文化背景
注意: 請把 AI 報告當作初步檢視和節省時間的工具,而不是成績。當它會實質影響學生的分數時,請先開啟逐字稿並聆聽音訊,再決定是否採納它的結論。

Lemon 說: 最容易被逐字稿誤判的,往往是口音最重的學生。評分前值得先知道這一點。

能力等級估計

除了各回饋面向之外,已完成的對話還會獲得一個能力等級估計。這是追蹤整個學期進展的實用指標,但它只是根據一段簡短對話做出的估計,並非分級測驗的結果。

  • 有助於發現多個活動之間的趨勢
  • 有助於找出與你預期差距很大的學生
  • 不能取代分班評量
  • 不夠穩定,無法以兩名學生各一次的練習來互相比較

Lemon 說: 要看的是整個學期的變化方向,而不是單次對話的數字。

AI 教練

報告完成後,學生會在回饋頁面上看到後續聊天,可以針對報告提問,例如請求更多某個文法重點的例句,或詢問某則評語的意思。你開啟繳交內容時,「AI 教練」分頁會顯示這段對話。

Lemon 說: 「AI 教練」分頁能讓你默默看出學生對哪些地方感到困惑。如果某份報告似乎沒能讓學生理解或接受,不妨去看一眼。

讓學生真的去讀回饋

最常見的問題不在於回饋的品質,而是學生結束練習後,看到一大片文字就直接關掉。有幾種做法能明顯改善這個情況。

  • 報告只聚焦兩三個面向,篇幅才夠精簡、讀得下去
  • 在課堂上提到回饋內容:課堂上討論過的東西,學生才會去讀
  • 將同一個活動指派兩次,並請學生說說兩次嘗試之間有什麼改變
  • 請學生從報告中挑一句話,帶到下一次上課

Lemon 說: 沒人看的回饋,就等於沒有回饋。在課堂上提到的簡短報告,勝過沒人打開的詳盡報告。

在 ChitterChatter 上觀看這些操作示範影片。