"ChatGPT 美 변호사 시험 상위 10%로 통과"

"Claude 3, AI 첫 IQ 100 돌파"

위와 같이 AI의 능력을 홍보하는 문구들을 자주 접하셨을 것 같습니다. 이러한 성과들이 대단해 보이기는 하지만, 한편으로는 그 수준이 어느 정도인지 체감이 안될 때가 있는데요. 마침 지난 목요일 치러진 2025 대학 수능 시험을 통해 AI 능력을 시험해 보기로 했습니다. 

우선, 현시점 가장 우수한 모델이라고 평가받는 ChatGPT와 Claude를 테스트 대상으로 선정했으며, 그중에서도 'ChatGPT-4o' 모델과 'Claude 3.5 Sonnet' 모델을 선택했습니다. OpenAI의 경우 추론에 특화된 'o1' 모델도 존재하지만, 수능 문제에 시각 자료 해석이 필요한 문항들이 포함되어 있고 PDF 파일 업로드가 필요했기에 이러한 기능들을 지원하는 'ChatGPT-4o' 모델로 테스트를 진행했습니다.