After the IMO, we ran full evals on the IMO gold model and found that aside from just competitive math, it was also our best model in many other areas, including coding. So folks decided to take the same exact IMO gold model, without any changes, and use it in the system for IOI.
— Noam Brown (@polynoamial) August 11, 2025
IMO 이후, 우리는 IMO 금메달 모델에 대해 전체 평가를 진행했고, 단순히 수학 대회 경쟁력뿐 아니라 코딩을 포함한 여러 다른 분야에서도 가장 뛰어난 성능을 보인다는 사실을 발견했습니다.
그래서 팀에서는 아무런 변경 없이 동일한 IMO 금메달 모델을 그대로 IOI 시스템에 사용하기로 결정했습니다.
IOI 시스템 구조는 여러 다른 모델에서 샘플을 뽑고, 또 다른 모델과 휴리스틱을 이용해 제출할 해답을 선택하는 방식이었습니다. 이 시스템은 금메달을 획득했고, 인간 참가자 중 6위에 올랐습니다. 우리가 샘플링한 모든 모델 중에서도 IMO 금메달 모델이 가장 뛰어난 성능을 보였습니다.
명확히 하자면, 이 시스템은 스캐폴딩(scaffolding)을 사용했지만, 작년보다 훨씬 가벼운 형태였습니다. 일반 목적 모델이 생성한 샘플 중 어떤 것을 제출할지 결정하는 역할만 했습니다.
저는 내년에는 모델 자체가 우리가 고안한 어떤 스캐폴딩보다 더 좋은 성능을 낼 수 있을 것이라 확신하고 있습니다.
수학 코딩을 포함한 다른 분야에서도 뛰어난 성능
차기 gpt6은 진짜 성능 기대해볼만함
- dc official App
내년 나왔다 - 2025 AGI
또 속아줘야겠지...!
해당 댓글은 삭제되었습니다.
6위가 사실이 아니라 속이는거란 소리야?
이건 GPT5 때처럼 실체가 없는 게 아니라 성적을 낸 건데 어떻게 같냐
선
gpt6가 agi가 아니면 걍 겨울인거지