[🔍후기] GPT-5의 진정한 위력은 멀티모달능력에서 나옴

[익명(kamine3510)]

수능을 활용한 벤치마크는 이미 o1 선에서 끝났지만, 평가원이 출제하는 또 다른 시험으로 초등교사 임용시험이 있음. 이 시험은 특유의 문제 형식으로 인해 AI에게 난이도가 높은데, 텍스트를 기계적으로 인식하면 문제에서 요구하는 것을 잡기 어렵기 때문임.

오늘 풀 문제는 이것. 2025학년도 초등교사 임용시험 교육과정A 음악과 기출문제임.

이 문제의 백미는 바로 실제로 풀어야 할 문항에서 요구하는 것들을 텍스트와 악보가 섞여 있는 구성의 서로 다른 3가지 제시문에서 찾아야 한다는 점, 각 문항에서 필요한 악보가 서로 다르다는 점, 악보 사이에서 차이점을 찾아서 교육과정 문서를 바탕으로 답해야 한다는 점, 심지어 문항에는 서양악만 있는 것이 아니라 제시문에서 언급된 ‘종묘제례악의 보태평 시작 부분’이라는 점과 연결지어 제시된 악보를 해석해야 하는 점까지 있다는 것.

따라서 AI에게 지뢰밭과 같다는 것을 알 수 있다.

심지어 내가 갖고 있는 스캔본은 좀 기울여져 있음ㅋㅋ

참고로 정답은 다음과 같음

그래서 5 Pro에게 초등교사 임용시험 음악 문제를 ‘스캔 이미지’로 냅다 던져주고 다음과 같이 프롬프트했음.

메모리 끄고, 어떠한 사전 프롬프트 없이 냅다 던짐.

???????????????????

????????????

이게 왜 됨?

단순히 Web 검색으로 답을 본 것이라는 의견이 보여서 내용 추가)

5 Pro가 웹 검색으로 찾은 자료는 이 3가지만 제시되어 있고, 답이 직접적으로 명시된 자료가 아니며 오히려 수험생들이 ‘알고 이해한 상태에서 활용해야 하는 자료’ 그대로임.

https://achimnara.kr/upload/2024/07/30/29d56e7b523243cc9664268afd846806.pdf

https://www.gugak.go.kr/ency/topic/view/1970

국악사전

https://dh.aks.ac.kr/sillokwiki/index.php/%EB%B3%B4%ED%83%9C%ED%8F%89%28%E4%BF%9D%E5%A4%AA%E5%B9%B3%29?utm_source=chatgpt.com

보태평(保太平) - sillokwiki

이건 GPT-5(Pro)가 문제에 대한 답을 직접적으로 찾지 않고, 문항에서 제시한 ‘2022 개정 교육과정’, ‘종묘 제례악’, ‘보태평’만을 근거로 필요한 배경지식이 무엇인지 정확하게 인식해서 자료 해석으로 해결했다는 뜻임.

+ 실제로 제시문에서 외부 근거를 요구하지 않은 2번 문항의 (1)은 제시문 내에서의 자료 해석만으로 정확하게 풀어냄. 

- dc official App

[익명(critic1944)]

육손벤치를 찐빠내며

[익명(121.165)]

글을 읽는 습관

[익명(margin1774)]

박사급 ai가 초딩임용풀었다고 놀라는거임? - dc App

[익명(kamine3510)]

멀티모달에서 놀란거임. 문제에서 ‘무엇을 물어보는지’ 알 수만 있다면 당연히 답은 나오겠지만, 얼마나 다양한 형식으로 표현된 정보가 복합적으로 구성된 자료를 얼마나 Human-like하게 인지할 수 있느냐의 문제. 단순히 텍스트 인식이나 악보 인식을 요구한 게 아님. - dc App

[익명(hyeongim264)]

좆븅신새끼네 ㅋㅋㅋ 버러지년 - dc App

[익명(margin1774)]

@ㅇㅇ 니애미소개중? - dc App

[익명(demdem5533)]

화살표 벤치 빵점

[익명(bathroom0872)]

가속하라

[ㅇㅇ 1(39.113)]

검색해서 답봤나보네 ㅇㅇ

[ㅇㅇ 1(39.113)]

대놓고 나 검색했어요 써져있는데 얜 뭐하냐

[익명(kamine3510)]

관련해서 내용 추가했으니 참고 바람. - dc App

[ㅇㅇ 2(210.117)]

ㅋㅋㅋㅋㅋㅌㅋ

[ㅇㅇ 6(175.125)]

ㄹㅇ

[익명(passport0895)]

나도 정답 검색해서 푼 줄 알고 그럼 그렇지 했는데... 알고보니 검색은 참고용이고 순수 추론으로 푼건가보네

[익명(passport0895)]

gpt5에서 멀티모달이 엄청 향상됐다는 소식 듣긴 했는데 상당하구만

[익명(kamine3510)]

추론 과정을 보면 제시문에서 정확히 ‘~을 근거로’, ‘~을 참고하여’라고 명시한 것만을 찾은거임. 내가 넣은 프롬프트는 보다시피 문제의 답을 구하라는 것이 전부고, 그에 따라서 문제에서 요구하는대로 추론을 수행했음. 사실 가장 놀라운 점은 저 세 악보를 정확하게 구분하면서 제시문의 정보를 바탕으로 회귀적으로 제시문 내의 정보를 해석했다는 것임. 그래서 비교해야 할 부분들만을 정확히 짚어서 비교함. 특히 추론 과정에서 overgeneralization을 일으키지 않음. - dc App

[ㅇㅇ 3(125.241)]

위에 문맹이 몇 명이냐ㅋㅋㅋ

[익명(125.133)]

걍 문맹보단 쿨찐들인듯 "어휴 이걸 가지고 놀라네 gpt 처음 써보냐"

[ㅇㅇ 7(210.181)]

특평입니다 익숙해지십시오

[익명(211.222)]

댓글에 쿨찐새끼들 왤케 많노 ㅋㅋㅋㅋㅋ

[멘토스(gblzvhbddpj2)]

[익명(39.119)]

위에 문맹 수준 ㅋㅋㅋ

[ㅇㅇ 4(119.202)]

덧글보니 인간은 걍 대체하는게 맞노 ㅋㅋㅋㅋㅋ

[익명(121.165)]

[ㅇㅇ 5(210.179)]

[사의장(prize8382)]

[TheOneFreeman(wmf776759)]

ㅋㅋㅋㅋㅋㅋㅋㅋㅋ

[ㅇㅇ 8(125.177)]

[익명(175.210)]

댓글들 병신들의 향연이노