[일반] 근데 진짜 순수하게 문득 궁금해져서 그런데

[익명(61.97)]

결국 오픈ai가 하는건

스케일만 늘리는거 밖에 없는거아니야?

이렇다할 알고리즘 혁신같은것도 없고...

이러면 일리야같은 공돌이 애들이 존재할 필요가 있나 그냥 샘알트만 혼자서 온갖곳에서 투자 유치하고 칩만 수급해오면 끝 아님?

[익명(211.59)]

하사비스 인터뷰 보니까 스케일 늘리는것도 노하우가 필요함 어려움

[익명(61.97)]

아 ㄹㅇ?

[익명(220.89)]

정렬은 누가해!!!!!!!!!!!!!!!!

[익명(121.128)]

스케일 늘리는게 복사 붙여넣기 하면 딸깍 되는 건 이닌가벼

[익명(220.117)]

현재 많은 모델들이 Moe 방식을 채택하기 시작한것도 같은 이유임 그냥 스케일만 무지성으로 늘리니까 모든 데이터가 다 섞여버린 마냥 갈피를 못잡는 현상이 생기니까 모델 여러개를 최고 데이터로 학습시켜서 연결한다음 필요한 데이터만 골라서 쓰는 방식으로 변화한거 스케일 키운 모델을 만드는게 생각보다 어려운 모양임