[일반] o1은 단순히 추론컴퓨팅만으로는 설명이 안됨 by Epoch AI

[테세우스의배(current2012)]

Epoch AI가 프리뷰, 미니 둘다 테스트해본 결과

단순히 추론 컴퓨팅 스케일링만으로는 성능이 설명이 안된다고함

o1은 기존보다 훨씬 더 고품질의 트레이닝 데이터 + 숨겨진 알고리즘 개선이 결합된 것으로 추정됨

[익명(orangestar1122)]

그냥 n샷이랑 비교한거라 별의미는업지안나

[테세우스의배(current2012)]

애초에 프리뷰, 미니 o1 시리즈들이 토큰수가 많잖? 그래서 1:1로 그냥 비교하면 토큰수 많이 쓰는 모델이 유리한게 당연한거 아니냐는 질문에서 시작해서 비교군을 설정함. o1 vs 4o의 토큰출력을 늘린 버전 이렇게 비교함. 토큰출력 늘리는 방법은 majority voting(n번 중 가장 많이 나오는 솔루션) 이랑 revision(n번 수정 가능) 이렇게. 테스트 설정은 꽤 훌륭한 것 같음