AI
더 나은 답변, 더 넓은 사고: ChatGPT와 비판적 사고 훈련이 학생에게 주는 효과
Better answers, broader thinking: What students gain from ChatGPT and critical-thinking training
두줄요약
무작위 실험에서 ChatGPT는 학생 답변의 품질과 논리성을 높였습니다. 인과 추론 훈련은 독창성을 넓혔고, 두 방식은 상호 보완적이었습니다.
핵심 발표
- 1,000명 이상 Bocconi University 학부 1학년생 대상 무작위 실험 결과 공개
- ChatGPT 접근과 인과 추론 훈련의 상호 보완적 학습 효과 확인
연구 방법·결과
- ChatGPT(GPT‑4o) 접근, 인과 추론 훈련, 두 조건 병행, 미제공의 4개 집단 비교
- ChatGPT 접근 학생의 5점 척도 점수 약 1점 상승, 아이디어 수·논리적 명료성·전문가 답안 유사성 증가
- 인과 추론 훈련 학생의 아이디어 다양성·독창성 및 작동 조건과 실패 가능성 설명 강화
- 두 조건 병행 집단에서 아이디어 다양성, 채점 점수, 아이디어 수, 논리적 일관성 관련 효과 동시 확인
개발자 영향
- AI 활용 결과물 평가 시 완성도뿐 아니라 독창성, 추론, 복수 접근법 고려 여부를 반영할 필요
- 최종 답변만으로 학생의 실제 이해 수준을 판단하기 어려워지는 평가 과제 부각
한계·주의점
- 사용한 5점 채점 루브릭은 대학 매장 인지도와 이용 증가라는 표준 마케팅 목표 충족도 중심
- 인과 추론 훈련으로 나타난 아이디어 다양성과 독창성 효과를 기존 루브릭 점수만으로 포착하지 못한 결과