[일반] '솔라' 이거 ㄹㅇ임? ⬅ 이새기 지금 진짜로 몰라서 묻는거임

[hoon050..(hoon050824)]

https://v.daum.net/v./20231215030128275

허깅페이스 성능검증 1위라고 나와있는데

근들갑임? 아니면 진짜 공신력 있는 지표임?

분탕아니고 진짜로 몰라서 여쭙습니다... 이미 식은 떡밥이라면 알려주시면 감사하겠습니다

[익명(220.77)]

일단 한국산은 무조건 근들갑이라고 보면 됨 괜히 자국민들조차도 사기의 민족이라고 하는게 안디ㅏ

[0000(jhleeno1)]

어떻게 3.5 터보 위에 4.0이 업씀 - dc App

[et(evgz6v8f9z)]

실성능 테스트전에는 구라라고 믿는게 좋음 - dc App

[et(evgz6v8f9z)]

우리가 쓰기전에는 그냥 모르는거임 - dc App

[고로쇠(101.235)]

오픈소스 중에서인거임 ㅋㅋ 맞긴함
https://huggingface.co/spaces/HuggingFaceH4/open_llm_leaderboard

[익명(175.206)]

일단 오픈소스 중에서 1등입니다. 근데 오픈소스 랭킹은 원래 자주 바껴서요. 대단한 건 맞지만...뭐랄까. 어떤 게임 스피드런 랭킹1등 한국인! 이런 느낌입니다. 곧 다른 국적이 앞설 수 있어요. 그리고, 언어모델은 원래 평가지표가 다양하거든요. 하나로 딱 평가하기 힘들어서. 그거 평균 점수가 1등이란거라. 뭐 GSM8k 이게 아마 중학수학 지표던가. 이거는 지금보면 64점. 근데 이거만 높은 오픈소스는 73점이예요. 즉, 많은 스피드런이 있는데, 스피드런 종합랭킹1등 상황입니다.

[익명(175.206)]

대단한 건 맞는데........워낙 금방 뒤집히고요. 한국에서 이런 성과 낸건 진짜 대단한 건 또 맞는데, 믹스트랄 애들도 유럽치고 대단한거지만, 자본 빵빵한 미국이나 다른 국가들이...진짜 자본이 짱이라서 언제까지 상위권에 있을 지 모르겠어요. 응원은 합니다만. 대충 듣기로는, 이젠 평가지표들도 약간 내용 유출이 돼서 최적화 시키니까 성능이 찔끔찔끔 오른다는 얘기도 있긴한데. 어쨌든. 투자 받기 위해서 랭킹1등하고 홍보한 거 아닐까 싶어요. 다시 말하지만 대단한 건 맞음.

[gpt교주(pomcro)]

말투가 세동이형 같누 ㅋㅋ - dc App