[📪정보] 국대 AI 모델 5종 벤치마크 비교표.

[회색(counsel8318)]

SK하고 LG가 대부분 상위권이랍니다.

https://www.aitimes.com/news/articleView.html?idxno=205433

그래프 출처이니 확인해보실 분들은 확인해보세요.

[ㅇㅇ 1(210.97)]

모델체급 생각하면 엘지가 1등 업스테이지는 준수하고 슼은 큰모델 믿고 가는느낌

[야하이잇(dignity123)]

크기 다른데 이런식 비교가 맞나 싶기도 한데 뭐 알아서 감안하겠지

[OpenAl(skirt8272)]

전부터 궁금한게 얘네는 프론티어매쓰나 심플벤치같이 공신력 있는 벤치마크로 측정하면 누구 뒤지는병 있음? - dc App

[야하이잇(dignity123)]

1번 한국어 성능 벤치 말고는 그래도 자주 보는 벤치들이긴 한데

[약팔이아님(vital7966)]

한국어벤치 죄다 네이버 업스테이지에서 만든건데 ㅅㅂㅋㅋ

[레알팜(lottohelp)]

[익명(study7965)]

좆이버는 ㄹㅇ 쇼핑 기업으로 전락했네

[익명(daily5094)]

모델사이즈를 봐

[익명(falling1648)]

저번에 수능도 못 푼다고 하지 않았나? 저 벤치마크가 신뢰도가 있긴 한건가?

[익명(220.77)]

그건 평가자체를 좆병신같이 한거같던데

[ㅇㅇ 5(121.158)]

수능은 추론 모델로 풀어야 하는데 아직 추론 아닌데 풀려서 점수가 낮았던거라 조금 억까. 이전 프론티어 모델들이 했던 것처럼 벤치를 하나 하나 정복해 가는 과정으로 평가해야 할 것 같음.

[ㅇㅇ 6(112.152)]

교수란 인간들이 평가를 ㅄ같이 해서 그점수가 나온거임 ㅋㅋ 추론모드도 안켰을걸? 추론모드 안켜고 + 굳이굳이 파이썬으로 풀게해서 억지로 틀리게만든거임. LG쪽에서 개빡쳤는지 반박을 보도자료로 냈음

[ㅇㅇ 7(211.181)]

기존 학술계가 떨어진다고 느끼는게 특갤러1 보다 정보가 느린 경우가 있음. 수능문제 어쩌구 그것도 로컬모델 좀 돌려본 사람이면 그런실수 안하는데 교수가 멍청하고 정보까지 느려서 난 촌극임

[ㅇㅇ 2(110.12)]

sk는 500b로 뭘한거냐;;

[ㅇㅇ 3(59.6)]

맘같아선 업스테이지인데 파라매터빨로 sk가 미는거 보소..

[익명(daily5094)]

이번 탈락자는 NC겠다

[ㅇㅇ 4(211.252)]

LG가 골고루 높네 ㄷㄷㄷ

[거니바니(kkksu7ss7s)]

네이버는 뭔 자신감으로 국대ai한다고 설치냐 - dc App

[익명(mainly9988)]

엑사원이 압도적이네 - dc App

[익명(tragedy7204)]

[ㅇㅇ 6(112.152)]

업스테이지는 100b인데도 저정도면 나중에 200b,300b로 파라미터 수 늘렸을 때 볼만할듯

[ㅇㅇ 7(211.181)]

이번 1차때 nc탈락은 확정이고, 퍼포먼스 보면 진짜 2차때 네이버가 탈락할듯. 언론엔 충격! 이런 식으로 나오고. LG,SKT,업스테이지 이렇게 셋 남다가 LG.업스테이지 이렇게 둘 남는게 정배일듯.

[ㅇㅇ 7(211.181)]

네이버 생각보다 개못하는듯 ㅋㅋ 이번 32B모델도 벤치보면 5개월전 엑사원4.0 수준 겨우 되던데 한심함. 그리고 컨소시엄중에 제일 하려는게 blurry 함. 뭘 하겠다는건지... ㅋㅋ; 모델 사이즈를 키워야할텐데 네이버는 MOE 모델을 만들어본적이 없음. 네이버가 2차때 탈락확정임

[익명(220.76)]

lg는 이미지때문에 중국ai 가져왔을거같은 느낌이네