[일반] mmlu 86-88 수준에서 정체된거 같은 기분임

[익명(110.145)]

4o도 결국 4turbo에서 2 올려서 88된거고

나머지 상용모델들도 죄다 86수준에서 놀고 있고

라마3 405b도 중간점검에서 86이었고

결국 90 넘기가 이리 힘든건가?

[익명(shore1232)]

정체는 아님.. gpt3 -> gpt4로의 도약이 2년 10개월 걸렸다

[익명(112.186)]

mmlu 인간 전문가가 89점이었나 그럼

[익명(125.240)]

1.5 pro mmlu는 얼마였지

[익명(125.240)]

86이네 뭐 내년엔 90 넘겠지..