오늘의 정답은 왜 내일 남지 않았을까?

2026년 여름, 시카고에서 난민의 학업을 지원하는 비영리단체 FORA는 11~17세 학생 22명과 일주일간 AI 학습 실험을 했다. 아프가니스탄, 미얀마, 말레이시아, 시리아에서 온 참가자 대부분은 오랜 학업 공백을 겪어 읽기 능력을 쌓는 중이었다. 학생들은 매일 뇌의 작동 방식에 관한 짧은 글을 읽고 AI를 달리 사용했다. 어떤 날에는 AI가 내용을 요약했고, 다른 날에는 답을 주지 않은 채 학생에게 질문을 이어 갔다.

결과는 어땠을까? 읽은 당일의 퀴즈에서는 두 방식의 성적이 거의 같았지만, 하루 뒤에는 질문에 스스로 답한 내용이 평균 83점, AI 요약으로 공부한 내용이 67점이었다. 요약이 부정확해서 생긴 차이는 아니었다. 학생들은 당장 내용을 이해했고 시험도 비슷하게 치렀지만, 직접 답을 구성하지 않은 내용은 오래 기억하지 못했다. AI 사용의 학습 효과는 산출물이 나온 순간보다 도구 없이 다시 설명해야 할 때 더 정확히 드러난다. 당일 점수와 만족도만으로는 장기 기억을 판단하기 어렵다는 말이다.


잘 배웠다는 자신감은 무엇을 감추는가?

학생들이 평가한 ‘AI를 학습 파트너로 다루는 능력’은 일주일 동안 크게 올랐다. 그러나 자신감이 높아진 정도와 실제로 기억한 양 사이에는 거의 관계가 없었다. 답을 빠르게 얻고 매끄러운 설명을 읽으면 공부가 잘됐다고 느끼기 쉽다. 그 느낌은 나중에 혼자 내용을 꺼내 쓰는 능력을 보장하지 않았다.

대학생에게도 같은 일이 벌어질까? 브라질에서는 경영학 전공자 120명을 무작위로 나눠 같은 주제를 ChatGPT 또는 자료 검색과 문헌으로 공부하게 했다. 45일 뒤 시험 평균은 ChatGPT 사용 집단이 57.5점, 비사용 집단이 68.5점이었으며 과제 시간은 각각 3.2시간과 5.8시간이었다. 시간을 보정한 뒤에도 자료와 문헌으로 공부한 집단의 점수가 더 높았으므로, 시간 차이만으로 성적 격차를 설명하기는 어렵다. 빠른 완성은 학습 성과와 별개의 지표였다.

한 사람이 한 손에는 점점 커지는 풍선을 들고, 다른 손바닥에는 크기가 그대로인 작은 돌을 올려놓고 있다

그런데 신입 교육과 온보딩도 예외가 아니다. 산출 속도와 교육 만족도를 주로 재면, 두 지표는 교육 직후의 편의와 자신감은 보여 주지만, 며칠 뒤 혼자 판단할 능력까지 알려 주지는 않는다. AI로 빨리 만든 결과물에 높은 평가를 주면 설명과 검토를 생략하는 사용법이 유리해진다. 조직은 도구 없이 근거를 재구성할 수 있는지도 함께 확인할 필요가 있다.


AI가 만든 답보다 사람이 배운 것을 재라

무엇을 기준으로 삼아야 할까? AI 사용 여부보다 사용 후 사람이 새로 익힌 내용이 학습의 기준에 가깝다. FORA 실험에서 결과를 나눈 조건은 AI가 결론을 정리해 주었는지, 학생이 질문을 거쳐 직접 답을 만들었는지였다. 같은 AI도 사고를 대신하면 기억이 약해졌고, 답을 요구하면 다음 날까지 더 많이 남았다. 금지와 허용만으로는 이런 차이를 구분하기 어렵다.

두 사람이 블록 더미 앞에 있는데, 한 사람은 직접 블록을 쌓고 다른 사람은 손대지 않고 블록을 가리키기만 한다

대신 사용 순서는 간단히 바꿀 수 있다.

  • AI에 질문하기 전에 잠정적인 답과 모르는 부분을 먼저 적은 뒤, 반박이나 추가 질문을 요청한다.
  • 요약을 받았다면 화면을 보지 않고 내용을 다시 설명하고, 빠진 부분만 대조한다.
  • 조직은 결과물을 낸 직후가 아니라 며칠 뒤에 작성자가 도구 없이 판단 근거와 오류를 설명하도록 평가할 수 있다.

답을 대신 완성하는 AI가 더 쓸모있어 보이기 쉽다. 그러나 이 기준에서는 사람이 스스로 답을 구성하게 하는 AI가 더 유용하다.


#교육#인지#언어모델