*Aidan 벤치마크하고는 다른 벤치마크임
*코드 편집 벤치마크로, 최근 공개됐으며 이전 벤치마크보다 훨씬 더 어려운 벤치마크로 구성됨
이게 기존 벤치결과고, Deepseek-V3 600B가 new sonnet보다 높은 점수를 기록함
*Aidan 벤치마크하고는 다른 벤치마크임
*코드 편집 벤치마크로, 최근 공개됐으며 이전 벤치마크보다 훨씬 더 어려운 벤치마크로 구성됨
이게 기존 벤치결과고, Deepseek-V3 600B가 new sonnet보다 높은 점수를 기록함
그 오픈소스 aider를 말하는게 맞나
600B면 보통 무거운 새끼가 아닌데 빡으로 경량화 시킨 소넷보다 약간 나은 수준이면 조금 아쉽네
3.5 sonnet 추정치가 400B임
https://epoch.ai/gradient-updates/frontier-language-models-have-become-much-smaller
참고
모델만 유출되면 ㄹㅇ 좋겠네 라마 405B 크기정도구나
4o보다 소넷이 배는 더 컸었구나 ㄷㄷ 저번에 어떤 테스터가 4o가 200b 언더라길래 소넷도 그 언저리인줄 알았는데 100% 더 무거운 모델이었네
그나저나 o1 파라미터 개수가 진심 궁금하긴 하네 600B보다 얼마나 클까
600b보다 작지
오 혹시 이유 아냐 궁금해서
600b면 가중치 존나 때려박았네
o1은 진짜 압도적이네 그냥 - dc App