TL;DR

  • 테네시주 중학교 18곳에서 진행한 2년간의 군집 무작위 대조 실험에서 Khanmigo를 코치 역할로 설정해 기존 보충 수학 수업에 적용한 결과, 수학 성취도가 학기당 전국 백분위 순위 1.3만큼 높아졌지만 효과를 실현하는 데 학생 참여가 핵심 제약으로 나타남.
  • 연간 효과는 0.06~0.08 표준편차이며, 1년 내내 적극적으로 참여했을 때 추정되는 효과는 0.14 표준편차임.
  • 성취도 향상 폭은 AI 지원 없이 Khan Academy 연습을 이용한 경우와 비슷함.
  • 학생의 96%가 Khanmigo를 한 번 이상 사용했지만, 중앙값 기준 연습일의 3분의 1에만 메시지를 보냈고, 오답을 낸 연습 세션 중 메시지를 보낸 비율은 17%에 그침.
  • 학생 메시지는 대부분 단순한 답변이나 추천 프롬프트 클릭이었으며, AI 튜터링의 잠재력을 실현하려면 접근권 제공뿐 아니라 실제 사용을 이끌어야 함.

실험 설계 및 성취도 효과

  • 생성형 인공지능(AI)은 모든 학생에게 개인 교사를 제공해 교육을 바꿀 수 있는 기술로 소개되어 왔으며, 이 연구는 그 효과를 살펴본 초기 대규모 실험 근거를 제시함.
  • 테네시주 중학교 18곳에서 2년간 군집 무작위 대조 실험을 진행했으며, 무작위 배정된 학생은 매일 진행되는 기존 보충 수학 수업에서 Khan Academy와 AI 튜터 Khanmigo를 사용함.
  • Khanmigo는 답을 알려주는 대신 학생을 지도하도록 설정됨.
  • 사용 배정은 학기당 수학 성취도를 전국 백분위 순위 1.3만큼 높였으며, 이는 학년 기준 약 0.06~0.08 표준편차에 해당함.
  • 1년 내내 적극적으로 참여했을 때의 추정 효과는 0.14 표준편차임.
  • 이러한 성취도 향상은 AI 지원 없이 Khan Academy 연습을 한 경우의 효과와 비슷함.

학생 참여와 사용 양상

  • 학생의 96%가 Khanmigo를 적어도 한 번 사용함.
  • 중앙값 기준으로 학생은 연습한 날의 3분의 1에만 Khanmigo에 메시지를 보냄.
  • 학생이 실수한 연습 세션 중 Khanmigo에 메시지를 보낸 비율은 17%임.
  • 실제로 보낸 메시지는 대부분 단순한 답변이거나 추천 프롬프트를 클릭한 것이었으며, 실질적인 수학 대화는 드물었음.

시사점

  • 연구 결과에서 AI 튜터링의 잠재력을 실현하는 데 걸림돌이 되는 핵심 요인은 접근성보다 참여도임.
  • 학생에게 AI 튜터를 제공하는 것만으로는 충분하지 않으며, 실제로 사용하도록 이끄는 일이 필요함.

연구 정보

  • 저자: Philip Oreopoulos, Nina Low
  • 게시 시점: 2026년 8월
  • 키워드: 인공지능, AI 튜터링, Khanmigo, 컴퓨터 보조 학습, 교육 기술, 현장 실험, 수학 성취도, 학생 참여, 중재 반응
  • 교육 단계: 유치원~12학년 교육
  • 주제: 학생 학습
  • 태그: 교육 분야 생성형 인공지능(AI), 학생 참여, 튜터링
  • 다운로드 표기: 2026년 8월
  • 디지털 객체 식별자(DOI): 10.26300/kner-hv33