[일반] 인간전문가 vs AI 벤치마크 비교

[익명(1.223)]

ㅇㅇ

[익명(121.159)]

과학이랑 엔지니어링 씨발이노

[익명(156.146)]

그냥 럭키 특붕이 수준인듯ㅋㅋ

[익명(121.159)]

ㄹㅇㅋㅋㅋㅋ

[익명(123.100)]

SOURCE?

[익명(121.176)]

제미나이울트라 왤케올려치기되어있음 절대 저정도 성능아니넌데 ㅋㅋㅋ

[익명(121.176)]

딱 벤치보니까 신뢰도라곤 1도없는벤치네 ㅋㅋㅋ

[익명(121.176)]

울트라는 gpt4와 클로드3 opus와 비교대상이아니라 소넷보다도못함ㅋㅋㅋ

[익명(121.176)]

제미니울트라는 전반적인저거 -10점깍여서 49.4가맞는데 ㅋㅋ

[익명(121.176)]

환각심하고 답변퀄리티도 겁나저조한데 제미니울트라는 비교대상이아니고 클로드무료보다도 ㄹㅇ못함

[익명(121.176)]

딱 저거만든애들이 구글직원들아니냐? 자사모델 올려치기 ㅈ되는거 ㅋㅋ

[익명(121.176)]

클로드3는 진짜 GPT4이상인거 인정하는데 제미니울트라? 저게?

[익명(121.176)]

제미나이울트라 전반적인성능 50도안된다 클로드 gpt4와 급차이있는데

[익명(121.176)]

제미나이울트라는 걍 GPT3.8정도성능이던데 뭔 클로드3 4보다높게측정되있냐 ㅋ 100프로 과장된거맞음 여기에서 신뢰도0임

[익명(121.168)]

애미시발 절망인데

[익명(121.131)]

저벤치마크자체가 문제있는거임 제미나이울트라 환각엄청나고 오류도많고 써보면 걍 GPT3.8수준인데 무슨 클로드3 4보다높게측정되있음 애초에 특갤이나 다른ㄱㅅ에서도 클로드3는 gpt4 이상인 최초모델이라고 극창받았지만 울트라는 처음나왔을때부터 반응 ㅈㄴ쌔했음

[익명(121.131)]

울트라가 진짜 클로드3보다 좋았으면 초극찬받았겠지 여기저기서 근데 반응 ㅈㄴ쌔한이유가뭐겠냐 첫날버터 ㅋㅋㅋ

[익명(121.131)]

제미나이울트라는 걍 GPT3.8급이맞음

[익명(121.131)]

울트라는 걍 특갤에서 나왔을때부터 혹평이었음

[익명(220.84)]

인간전문가급과 언어모델은 저것보다 수준차이더난다.. 특히 이과쪽은 저것보다 차이훨씬심함