보코니대 연구, ChatGPT 접근과 비판적 사고 훈련의 상보적 효과 확인

보코니 대학교와 OpenAI Economic Research가 진행한 무작위 실험에서 1,000명 이상의 1학년 학생을 대상으로 ChatGPT(GPT-4o) 접근과 인과 추론 훈련의 효과를 분석했다. 연구는 AI 도구 사용과 비판적 사고 훈련이 학생의 성과에 서로 다른 방식으로 기여함을 보여준다.

ChatGPT의 전문성 격차 해소

ChatGPT 접근이 허용된 그룹은 5점 만점 평가 기준에서 거의 1점 높은 점수를 기록했다. 이들의 답변은 아이디어가 더 풍부하고 논리적 일관성이 높았으며, 전문가가 작성한 추천안과 유사도가 높았다. 학생들은 AI에 과제를 그대로 맡기지 않고, 질문을 구성하고 응답을 평가하는 과정을 거쳤다.

비판적 사고 훈련의 고유한 가치

인과 추론 훈련을 받은 학생들은 아이디어가 왜 작동하고 언제 실패할 수 있는지를 더 명확히 설명했지만, 기존 평가 기준(마케팅 목표 달성도)에서는 점수 차이가 없었다. 그러나 자동 텍스트 분석 결과, 이 그룹은 동료들과 구별되는 더 다양하고 독특한 아이디어를 생산했다. 이는 기존 평가 방식이 놓치는 독창성을 포착하지 못함을 시사한다.

상보적 효과와 평가 방식의 변화 필요

ChatGPT 접근과 비판적 사고 훈련을 모두 받은 학생들은 두 가지 효과를 모두 보였다. AI는 답변의 완성도와 논리성을 높이고, 사고 훈련은 독창적인 아이디어와 가정에 대한 의문을 촉진한다. AI가 정제된 답변 생성을 용이하게 만들면서, 교육 현장에서는 독창성 등 다른 역량을 측정할 수 있도록 과제와 평가 방식을 적응해야 한다.