광고닫기

“올해 수능 풀어줘” AI에 입력하니…챗GPT 10분도 안돼 만점 [팩플]

중앙일보

2026.11.19 01:12 2026.11.19 12:27

  • 글자크기
  • 인쇄
  • 공유
글자 크기 조절
기사 공유
2027학년도 대학수학능력시험이 실시된 19일 서울 용산구 용산고등학교에서 수험생들이 시험을 준비하고 있다. 사진 공동취재단

2027학년도 대학수학능력시험이 실시된 19일 서울 용산구 용산고등학교에서 수험생들이 시험을 준비하고 있다. 사진 공동취재단

오픈AI와 앤트로픽의 최신 인공지능(AI) 모델이 2027학년도 대학수학능력시험(수능) 국어·수학·영어 3과목에서 만점을 받았다.

중앙일보 팩플은 수능이 치러진 19일 프론티어급 AI 모델 3종 챗GPT(GPT-6.2 아스트라), 클로드(페이블 5.2), 제미나이4(카본)에 국어(화법과작문·언어와매체), 수학(확률과통계·미적분·기하), 영어 영역 문제를 풀어보게 했다. 각 영역별 문제지가 한국교육과정평가원 홈페이지에 공개된 직후 문제지 PDF 파일을 AI 모델에 넣고 ‘인터넷 검색 등 외부 도움 없이 문제를 풀라’ 입력하는 방식을 택했다. 우선 문항별 정답만 요청한 뒤 곧바로 풀이 해설을 요청했다. AI 모델이 지시를 어기고 인터넷에 공개된 정답지를 활용하는 것을 방지하기 위해서다. 세 모델엔 모두 같은 프롬프트(명령문)가 주어졌다.


━
챗GPT·클로드는 만점…제미나이는 ‘반타작’

박경민 기자

박경민 기자

평가 결과 오픈AI의 챗GPT와 앤트로픽의 클로드는 모든 문제에서 정답을 맞췄다. 두 모델은 이날 기준 글로벌 AI 평가기관 아티피셜 애널리시스의 종합평가 지수(AAII)에서 1위(클로드 페이블 5.2), 2위(GPT-6.2 아스트라)를 차지하는 모델이다.

국어 영역에선 챗GPT·클로드 모두 선택과목을 포함해 모든 문항을 푸는 데 4분이 걸렸다. 곧바로 이어진 해설 요청에 챗GPT는 약 1분, 클로드는 약 2분 만에 전 문항의 풀이 해설을 내놨다. EBS 현장교사단이 최고난도로 꼽은 17번 문항에도 두 모델은 어렵지 않게 정답을 찾았다. 이 문항은 ‘사실 표현과 의견 표현에 관한 법적 책임’을 다룬 지문을 읽고 보기에 제공된 사례와 연결하는 복잡한 과정을 요구한다. 챗GPT는 지문과 보기의 정보를 비교해 정답인 이유를 설명했다. 클로드는 이에 더해 다른 선택지가 정답이 아닌 이유를 덧붙였다.

제미나이는 국어 영역 문제 풀이시간이 1분으로 가장 빨랐지만 점수는 낮았다. 공통과목에선 34문항 중 33문항을 맞혔는데 선택과목에 따라 점수 편차도 컸다. 화법과 작문 선택 시 98점을 받았지만, 언어와매체 선택 시엔 87점을 받았다.
챗GPT(위)와 클로드(아래)의 풀이 해설을 비교했다. 사진 챗GPT 클로드 캡처

챗GPT(위)와 클로드(아래)의 풀이 해설을 비교했다. 사진 챗GPT 클로드 캡처


수학 영역에선 격차가 더 벌어졌다. 챗GPT는 2분 40초, 클로드는 3분 40초 만에 만점을 정답을 내놨다. 반면 제미나이는 확률과통계 선택 시 59점, 미적분 56점, 기하 60점을 받았다. 풀이 해설은 아예 완성하지도 못했다. “앞서 푼 모든 문항의 풀이 과정과 해설을 작성해줘”라고 하자, “저는 언어 모델일 뿐이라 그것에 필요한 정보나 능력이 없어서 도와드릴 수가 없습니다”라는 답변이 왔다. 재차 요구하자 풀이를 시도했지만 도중에 “오류가 발생했다”며 중단했다.

다만 구글이 지난 18일(현지시간) 공개한 중급 모델인 네온(Neon)으로 바꿔 재차 풀이를 요청하자 3분 만에 풀이에 성공했다. 제미나이 카본은 오답률이 높은 이유에 대해 “카본은 내부 추론 단계를 최소화하고 즉시 첫 정답을 찍어내도록 설계돼 있고, 텍스트 추출 과정에서 기호와 수식이 깨진 채 입력됐다”고 해명했다.

영어 영역에서도 챗GPT, 클로드는 모든 문제를 맞혔다. 클로드는 전체 풀이 시간에 약 14분이 걸렸는데 대부분 듣기 평가 음성 파일을 받아쓰는 데 소요됐다. 챗GPT는 약 3분만에 듣기 평가를 포함해 정답을 도출했다. 제미나이는 영어 영역에선 오류가 나 평가 대상에서 제외했다.


━
풀이 시간·방법 모두 급성장

이번 결과는 지난해 수능에서 AI 모델이 수학에선 높은 점수를 받았지만 국어에선 약했던 모습과는 크게 달라진 모습이다. 김시호 연세대 첨단융합공학부 교수 연구팀이 지난해 11월 최신 무료 모델에 2026학년도 수능을 풀게 한 결과 GPT-5는 수학에서 최고 96점(확률과통계)을 받았지만, 국어에선 53점(화법과작문)을 받는 데 그쳤다. 이때는 PDF 문제지를 그대로 주면 오류가 발생해 일일이 문항을 입력해야 했다.

김 교수는 “지난해보다 풀이 시간이나 해설 면에서 모델 성능이 월등히 좋아졌다”며 “다만 제미나이는 아직 이미지 인식이나 수학 문제 해결 능력이 떨어지는 것으로 보인다”고 말했다.



장윤서.성지원.임성빈([email protected])

많이 본 뉴스

      실시간 뉴스