[일반] 근데 swe 벤치가 뭔가 이상한데

[익명(180.66)]

Pass@1 기준 꽤나 떨어졌네

o3, o4 mh swe 벤치 저거 맞냐? 둘 다 pass@1 아님? 

글고 o3는 69.1일텐데

뭔가 되게 이상함

[익명(wanted7407)]

패스 원 기준으로 저거 맞을껄 - dc App

[야하이잇(dignity123)]

어차피 다른 모델은 공개된 문서에서 가져오는거라 틀릴 일은 없음

[ㅇㅇ 1(180.66)]

아님, 내가 벤치 과몰입러라 이건 확실히 아닌 걸 알아. 그래서 0506 전체 벤치 찾고 있는데 보이지가 않는다 씨빨