[일반] 아레나 리더보드도 끝물인듯

[익명(61.254)]

제미나이 1.5 프로가 오푸스보다도 위인게 말이 되냐ㅋㅋ

아레나 리더보드도 이제 신뢰성이 위태로워 보인다

[익명(scene3440)]

프로 좋아졌던데

[익명(61.254)]

4월9일자 최신버전이긴 하다만 1.5 울트라도 아니고 프로가 오푸스보다 좋아진게 말이 안된다고봄. 아직 누적 데이터가 덜 쌓였거나

[익명(61.254)]

저게 진짜면 1.5 울트라는 4옴니 귀싸대기 때릴정도 수준이라는 얘기임. 말이 안됨

[익명(scene3440)]

왜 말이 안 됨 ㅋㅋ 애초에 벤치차도 그리 크지 않았자나

[익명(61.254)]

컸던 걸로 기억해. 오푸스는 커녕 소넷한테도 쪽도 못썼던걸로 아는데

[익명(scene3440)]

https://bito.ai/blog/gemini-1-5-pro-vs-gpt-4-turbo-benchmarks/
https://www.promptingguide.ai/models/gemini-pro
이미
2월부터 터보랑 비비거나 넘고 있었는데 뭘 커.. 너 기준이 애매한 것 같음

[익명(124.49)]

Also 구경 간 사람들 때문에 불남

[익명(124.49)]

막 평가하니까 레이팅이 터지지

[익명(119.77)]

1.5 프로땜시 말 많긴했지 ㅋㅋ