본문으로 건너뛰기

교사 가이드

교육자 자료로 돌아가기

AI 피드백 이해하기

각 피드백 영역이 무엇을 평가하는지, 얼마나 신뢰할 수 있는지, 어디에서 한계를 보이는지 알아봐요.

학생 제출물 검토읽는 데 9분섹션 8개

다섯 가지 영역, 그중 두 가지는 기본으로 켜짐

찾는 곳: 활동 › 활동 열기 › 평가

학생이 최소 세션 시간을 넘기면 피드백 보고서를 받아요. 보고서에 담기는 내용은 활동을 만들 때 ‘평가’ 단계에서 선택한 영역에 따라 달라져요. 새 활동은 두 영역이 선택된 상태로 시작하고, ‘AI로 만들기’는 모든 영역을 선택하므로 필요한 것만 남기세요. 보고서의 작성 방식, 즉 읽기 수준, 자세한 정도, 설명에 쓰는 언어(바꾸지 않으면 영어)는 같은 단계의 ‘고급 설정’에서 정할 수 있어요.

학생 보고서에 넣을 피드백 영역을 선택할 수 있는 ‘평가’ 단계.
새 활동에서는 ‘전반적인 의사소통’과 ‘대화 기술’이 기본으로 선택돼요.
  • 전반적인 의사소통(기본값): 전달력, 유창성, 이해도, 의사소통 목표를 달성했는지 여부
  • 대화 기술(기본값): 대화 흐름, 적절한 응답, 화제 꺼내기, 후속 질문, 말차례 주고받기
  • 문법과 구문: 정확성, 시제, 문장 구조, 어순, 오류 패턴
  • 어휘와 단어 선택: 어휘의 폭, 정확성, 맥락에 맞는 적절성
  • 문화적 적절성: 문화 인식, 사회적 규범, 격식체와 비격식체 구분

레몬의 한마디: 각 영역에서 강점과 보완할 점을 몇 가지씩 제시하며, 대화 기록으로 뒷받침되지 않는 내용은 언급하지 않도록 지시받아요.

‘문화적 적절성’에는 문화적 배경이 필요

이 영역에는 다른 영역에는 없는 설정이 필요해요. 활동에 정의한 문화적 배경을 기준으로 평가하기 때문에, 그 항목이 비어 있으면 비교할 기준이 없어요. 그래서 입력하기 전까지는 회색으로 비활성화(‘문화적 배경 필요’)된 상태로 남아 있어요.

주의: 나중에 ‘문화적 배경’을 지우면 이 영역이 다시 꺼지므로, 시나리오를 편집한 후에는 ‘평가’ 단계를 다시 확인하세요.

레몬의 한마디: 먼저 ‘시나리오’ 단계에서 ‘문화적 배경’을 채운 다음 이 영역을 켜세요. 꼭 이 순서대로요.

영역이 적을수록 보고서가 좋아져요

다섯 개를 모두 선택하고 싶어지기 쉬워요. 하지만 실제로 6분짜리 초급 대화에 대해 다섯 영역의 보고서를 만들면 내용이 얕아져요. 짧은 초급자 대화 기록에는 다섯 가지 측면에 대해 의미 있는 말을 할 만큼 근거가 충분하지 않기 때문이에요. 두세 영역에 집중하면 학생들이 실제로 읽는 보고서가 나와요.

  • 초급 활동: ‘전반적인 의사소통’과 다른 영역 하나
  • 문법 중심 활동: ‘문법과 구문’을 추가하고 다른 영역 하나를 끄세요
  • 문화나 말투 관련 활동: ‘문화적 적절성’을 추가하고 문화적 배경을 입력하세요
  • 고급 활동: 판단할 근거가 더 많으므로 3~4개 영역이 적당해요

레몬의 한마디: 피드백 영역은 활동의 목적에 맞추세요. 어휘 활동에 문법 보고서는 필요 없어요.

피드백이 정말로 잘하는 것

무엇을 신뢰할 수 있는지 구체적으로 짚는 것이 중요해요. 교사가 피드백에 무게를 두기 전에 그걸 알고 싶어 하는 건 당연하니까요. 피드백은 대화 텍스트에 드러나는 부분에 대해서는 신뢰할 수 있어요.

  • 학생이 의사소통 목표를 달성했는지 여부
  • 대화를 이어 갔는지, 아니면 끊기게 두었는지
  • 어휘의 폭과 반복
  • 여러 발화에 걸쳐 반복되는 문법 패턴
  • 학습 목표를 다뤘는지 여부

레몬의 한마디: 대화 기록 전체에 걸쳐 패턴으로 나타나는 것은 잘 잡아내요.

약한 부분과 채점에 주는 의미

강점만큼이나 한계를 솔직하게 아는 것도 중요해요. 피드백은 음성 인식으로 만든 대화 기록을 바탕으로 생성되기 때문에, 음성 인식이 잘못 알아들은 내용은 그대로 평가에 반영돼요.

  • 발음: 표준 피드백 보고서에서는 오디오로 직접 평가하지 않음
  • 억양이 강한 발화: 인식 정확도가 떨어져 학습자의 오류처럼 보일 수 있어요
  • 아주 짧은 세션: 대화 기록이 빈약하면 피드백도 빈약하고 일반적인 내용이 돼요
  • 한 번의 사례: 실수 하나가 지나치게 크게 또는 작게 반영될 수 있어요. 패턴이 더 믿을 만해요
  • 문화적 뉘앙스: 입력한 문화적 배경의 수준만큼만 정확해요
주의: AI 보고서는 성적이 아니라 1차 검토이자 시간을 아껴 주는 도구로 여기세요. 학생의 점수에 실질적인 영향을 준다면, 결론을 받아들이기 전에 대화 기록을 열고 오디오를 들어 보세요.

레몬의 한마디: 대화 기록 때문에 가장 잘못 평가받기 쉬운 학생은 억양이 가장 강한 학생이에요. 채점하기 전에 꼭 알아 두세요.

숙달도 추정치

완료된 대화에는 피드백 영역과 함께 숙달도 추정치가 표시돼요. 학기 동안의 변화를 추적하는 데 유용한 지표이지만, 짧은 대화 한 번을 바탕으로 한 추정치일 뿐 배치 시험 결과가 아니에요.

  • 여러 활동에 걸친 경향을 파악하는 데 유용해요
  • 예상과 크게 다른 학생을 찾는 데 유용해요
  • 반 배치 평가를 대신하지는 못해요
  • 세션 하나씩만으로 두 학생을 비교할 만큼 안정적이지 않아요

레몬의 한마디: 한 번의 대화에서 나온 숫자보다 학기 전체의 흐름을 보세요.

AI 코치

보고서가 준비되면 학생은 피드백 페이지의 후속 채팅에서 보고서에 대해 질문할 수 있어요. 예를 들어 어떤 문법 항목의 예시를 더 요청하거나 코멘트가 무슨 뜻인지 물어볼 수 있어요. 제출물을 열면 ‘AI 코치’ 탭에서 그 대화를 볼 수 있어요.

레몬의 한마디: ‘AI 코치’ 탭을 보면 학생이 무엇에 헷갈렸는지 조용히 엿볼 수 있어요. 피드백 보고서가 학생에게 잘 전달되지 않은 것 같을 때 한번 살펴볼 만해요.

학생들이 실제로 읽게 만들기

가장 흔한 문제는 피드백의 질이 아니에요. 학생이 세션을 마치고 빽빽한 글을 보고는 그냥 닫아 버리는 거예요. 몇 가지만 바꿔도 큰 차이가 생겨요.

  • 보고서는 부담 없이 읽을 수 있도록 두세 영역으로 제한하세요
  • 수업 시간에 피드백을 언급하기: 학생들은 수업에서 다뤄지는 것을 읽어요
  • 같은 활동을 두 번 배정하고, 두 시도 사이에 무엇이 달라졌는지 학생들에게 묻기
  • 학생들이 보고서에서 한 줄을 골라 다음 수업에 가져오게 하기

레몬의 한마디: 아무도 읽지 않는 피드백은 없었던 것과 같아요. 아무도 열어 보지 않는 자세한 보고서보다 수업 시간에 언급하는 짧은 보고서가 더 나아요.

이 단계별 안내 영상을 ChitterChatter에서 바로 시청하세요.