- 관련게시물 : 최신 AI 모델 'GPT-5' 공개‥"박사급 전문가"

- 관련게시물 : 싱글벙글 gpt5 근황.jpg

비교할 수 있는 벤치는 AIME, HLE, IMO인데 3개 전부 발렸음


7ced8076b5836df73eea98bf06d60403efd1586684dfbb254e


7ced8076b5836df73eeb98bf06d60403f91df7152a9462a1b9

누가 보기 쉽게 딥띵크, GPT 5, GPT 5 프로까지 그래프로 정리한 게 있는데(벤치 표기 오류 있는 부분들이 있어서 오류 있는 부분들은 불편해서 짤랐음) 


보면 알겠지만 AIME, HLE에서 GPT 5 뿐만 아니라 GPT 5 프로도 발렸음



7ced8076b5836df73be898a518d60403995c0cc800e8adb9e4a9


7ced8076b5836df73be798bf06d60403744a203df55a16799074


7ced8076b5836df73be698bf06d604033e8cf508555f100f8280

더욱 압도적인 차이를 알 수 있는 게 IMO에서의 차이인데 


GPT 5는 best of 32로 측정을 했는데도 38.10%에 그쳤는데 


딥띵크는 best of 32에 비해 훨씬 불리한 pass@1으로 60.7%를 달성했음


딥띵크가 250달러의 울트라 요금제에서도 5번밖에 못 쓰는 모델이라 특갤에서 민심이 그리 좋진 않지만 


벤치는 딥띵크가 압도적으로 SOTA가 맞음


GPT 5 이새끼 독버섯인 붉은뿔사.슴버섯 답변 미친거아님???


1ebec223e0dc2bae61abe9e74683716d9cd526a0bc0699f0f856d4b0b7e255a740edf879cd7e8c4bfab6cbfc961a284dd544be

생각이란게 없네


(링크첨부) GPT-5도 ㅈ병신같이 환각 심하긴 함


 

78988076c48660f2239d8e96479c706caff1d379f3cc7be8842cf3629cdee2fe6e93ffb8a807b7b2085f58ba40e5018631feaa71dd70