[일반] O3가 sota라고 주장하는 근거가뭐임

[익명(charm6751)]

O3아쉽다고 생각하는사람도 많아서 헷갈리네

Sota라고생각하시는분들 벤치말고 구체적인 이유좀

실사용 후기를 근거로 예를들어 코딩하는데 llm중 가장버그픽스를 잘한다 이런식으로

[ㅇㅇ 1(14.4)]

기대치에 못미쳐서 아쉽다는거지 SOTA인건 다들 동의할거임

[ㅇㅇ 2(59.7)]

사실 툴 사용 안하면 미묘한 차이로 벤치 점수 높음. -> 이래서 아쉽다는 의견 있는거 근데 툴 사용 가정하면 점수 꽤 오르고 실 사용에서도 체감 있음(미로 문제 같은거)

[ㅇㅇ 2(59.7)]

근데 툴 사용때문인지 환각이 기존 o1이나 이런것보다 훨씬 심해짐 & 코딩, 수학 자폐아 경향 있음. 이래서 저평가 당하는 것도 있고

[ㅇㅇ 3(115.139)]

개개인 체감은 케바케라 크게 의미없고 벤치딸인거

[ㅇㅇ 4(115.143)]

몇 주 지나보면 나옴. 벤치는 의미는 별로 없는데 말싸움에선 의미가 있는 거고 각자 체감은 의미있긴 한데 그걸로 남을 설득하긴 어려울 뿐임. 난 별로임.

[qtwk(outrage3078)]

고점은 확실히 제일 높은 거 같은데 o1이나 2.5에서는 나오지 않을 수준의 환각들이 가끔 보임.