[📪정보] 뉴소넷 벤치

[익명(orangestar1122)]

MMLU 어따 팔아묵엇노

[익명(106.254)]

아쉽긴하네

[chatgpt4o(ejrtksfl2)]

개선판은 뭐야 오퍼스 기다리는데 o1은 비교도 안하네 쪽팔리나보네

[익명(121.178)]

GPQA 점수 많이 올랐네 SWE-bench Verified도 이거 OAI 최근에 만든 벤치자나

[뮤비오(krfrozen5)]

3.5 하이쿠가 3.0 오푸스 성능 낸다는데

[wurld(boxing8245)]

음... 3.5하이쿠는 4o mini나 제미니 1.5flash랑 비슷하거나 떨어지네

[익명(14.6)]

o1에는 개쳐발리네

[익명(59.12)]

수학 너무 처참한데

[익명(orangestar1122)]

수학은 전통적으로많이밀리긴햇는데 저는저거질나오는 QwenMath랑 제미나이 둘다 만족도가크지않아서 그르르니함

[네덕근첩(naverduck1234)]

생각보다 별로네.