[일반] 10만장 + 10만장으로 학습시켰다 오피셜

[익명(222.97)]

기존 알려진 10만장에

공개하지 않은 10만장을 추가했고 

그 모든 GPU 와 컴퓨팅 파워로 

그록을 개선했고 그 성과를 보여주겠다 라고

라이브때 말했었음 

실 담당자 오피셜 

[글쓴 ㅇㅇ(222.97)]

20만장 절대 아니라는 애들 다 어디감?

[익명(wooden6879)]

10만장으로 사전학습하고 20만장 구축한 게 24년 말인데 병신아?

[글쓴 ㅇㅇ(222.97)]

1조 파라미터면 그 모델을 올리는게 문제인거지 학습시간과 체크포인트 뜨는건 어자피 자기들 마음대로임

[00(39.122)]

이렇게 보니까 추론모델이 궁금하네 빨리 나와줬으면

[ㅇㅇ 1(39.123)]

ㅋㅋㅋㅋ 이거 아니라고 개 까던 애들 살짝 정신병있어보이던데 다 튀었누 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ

[익명(wanted7407)]

영어도 못알아쳐먹어서 자막영상 가져왔더니 지은거랑 쓴거랑 다르잖아!! ㅇㅈㄹ ㅋㅋ 아오

[ㅇㅇ 1(39.123)]

특갤의 병폐중 하나가 정신병 홍위병들이 득실득실하다는거같음ㅋㅋ

[익명(shore1232)]

겨울이다..

[익명(wooden6879)]

저 터임라인대로면 그록3 학습하는데 1개월 남짓 걸렸다는 건데 그게 말이 되냐?

[익명(wanted7407)]

원래 gpu 많을수록 빨리 학습할 수 있다

[익명(wooden6879)]

10만장 가지고 4~5개월 걸리는데 20만장 있으면 한달 걸림? ㅋㅋ

[글쓴 ㅇㅇ(222.97)]

일단 올리고 나면 학습시간은 자기들이 정하기 나름임 딥식 논문 재현때는 몇시간만에 뽑아낸것도 있음

[익명(wanted7407)]

그래서 지들도 계속 개선중이라 하는 게 그 이유임 ㅇㅇ

[ㅇㅇ 2(219.250)]

너무 추워요...

[ㅇㅇ 3(121.175)]

이걸로 왜 계속 싸우는거냐

[익명(118.6)]

? 영어 원문에서 20만장으로 학습시켰다는 말이 있었음?

[글쓴 ㅇㅇ(222.97)]

한글자막 뒤에 있는 영상화면에도 보면 Phase 2때 200k 라고 떠있는데 자막에 가려졌네

[익명(118.6)]

원문 듣고 옴 Last year April 부터 머스크가 지어야 한다고 함 그때부터 122일 걸려서 지음 8월 완공 이때 100,000K running 이라 함 그 후에도 추가로 92일 걸려서 완공 11월 완공 이때도 그럼 running 하겠지 use all of this to improve grok 이라 했으니 결국은 200k 다 활용한게 맞음 처음부터 200k X 점진적으로 늘리면서 성능 향상 O

[익명(118.6)]

근데 이걸로 왜 싸운거임?

[익명(wanted7407)]

정신병자들 말로는 이딴 게 200k? 이거라 현실부정 이 느낌임

[익명(118.6)]

난 후발주자가 이정도로 빨리 성장한게 놀랍던데

[익명(h1r5enpsrrsq)]

ㅇㅇ실제 발표도 그게 초점이었음

[익명(h1r5enpsrrsq)]

근들갑 떨어서 까인거라 봐야

[ㅇㅇ 4(121.152)]

같은 영상에서 대놓고 10만장으로 학습했다고 나오는데 선동은 역시 선평