[일반] 4.5 MMLU 떴다

[익명(125.136)]

공식 자료는 아님

[익명(119.64)]

90언저리면 체감 되나?

[alphaca(qqq0101kr)]

4.5맞긴함?

[익명(218.154)]

당연히 아니지 4 mmlu 점수부터 틀렸는데 걍 흔한 환각

[연맛(ejrtksfl2)]

오호 13점 증가 ㅋㅋ

[익명(118.33)]

4가 75라고? 86아니였나

[gpt교주(pomcro)]

5shot 기준이긴 해 - dc App

[연맛(ejrtksfl2)]

제미니랑 비교할때 gpt4 90점이었음 ㅋㅋㅋ

[익명(118.33)]

어떤 기준으로 해야 gpt4가 75점이 나오는거지

[빙냥이ㄱㅇㅇ(6zd2cxvc44h4)]

[익명(bluewarp)]

[익명(175.120)]

Gpt-4 절대 70점대 아님 너무 낮아