[📪정보] 젠슨 황 "AI 스케일링 법칙이 지속되고 있다"

[익명(182.230)]

https://www.threads.net/@choi.openai/post/DCvEEGEhfPB

Threads

이는 개발이 진행될 수 있는 세 가지 차원 때문이라고 설명합니다.

첫 번째는 사전 학습(pre-training)으로, 이는 대학 학위 과정처럼 AI가 기본적인 지식을 쌓는 과정에 해당합니다.

두 번째는 사후 학습(post-training)으로, AI가 특정 주제나 문제에 대해 깊이 있게 학습하는 단계를 말합니다.

마지막으로 테스트 시점 계산(test-time compute)은 AI가 실제 상황에서 마치 '생각'하듯이 응답을 생성하는 능력으로 설명됩니다.

그는 엔비디아가 지난 10년 동안 컴퓨팅 비용을 100만 배나 줄였다고 밝혔습니다.

GPU가 비싸게 느껴질 수 있지만, "100만 배 더 높은 비용을 상상해 보라"고 말하며 그 가치를 강조했습니다.

또한, AI의 "환각(Hallucination)" 문제를 해결하려면 "아직 몇 년이 더 걸릴 것"이라고 밝혔습니다.

그동안 그는 "계속해서 계산 능력을 증가시켜야 한다"고 덧붙였습니다.

https://www.youtube.com/watch?v=NuTZNgrLBJk

[천사다천사(jjtheman999)]

시대의 승리자다 진짜 ㅋㅋ - dc App

[ㅁㅁ(mission1187)]

[익명(125.133)]

아직 몇년이라 그래도 된다니 좋아쓰

[수직(player5319)]

[익명(39.123)]

람쥐싼더!!!!!

[익명(ek4li3ixxkv2)]

넌 스케일링 법칙 막히면 젤 손해보잖아

[익명(211.219)]

그건맞긴함 ㅋㅋ

[익명(123.143)]

황 슨 황

[익명(121.168)]

얘가이렇게 말하니까 오히려 상황안좋아진거같다고 느낌이오는데?

[익명(119.70)]

'메타버스가 오고 있다'

[익명(125.241)]

엔비디아 회장은 당연히 저렇게 말하겠지. 상황은 지켜봐야 아는 거고

[익명(125.179)]

다좋은데 그래픽카드만 좀 싸게팔면 안되냐..

[익명(175.206)]

애초에 스케일링 법칙이 틀렸다는 말도 좀 틀렸었음. 정확하게는 다음 스케일링 법칙을 확인 못 해봄. 스케일링 법칙은 단순하게 모델 크기 2,3배 늘리는 게 아니라 몇천배 늘려봐야함. 근데 당연히 수천배를 지금은 못 키우고, 수백,수천억 써서 몇배정도 키워봤을텐데 성능향상이 미미한거지. 그래서 방향을 추론시간으로 틀어버린거고. 추론 시간도 늘수록 좋아지니까 이것도 스케일링이라고 생각하면 틀린 말은 아니기도 하고, 기존 법칙도 아직 틀린 게 증명은 안 된거고. 근데 분탕들은 '모델 키웠는데 구렸다며? 스케일링 법칙 깨졌다며? 그럼 AGI 확신 못 하는거네? 니들 이제 어쩌냐?' 이러더라.

[익명(verse1800)]

gpt3과 4가 10배 차이인데 몇천배는 무슨ㅋㅋㅋ

[익명(58.29)]

3이링4기10배차이면 agi는 대체 몇배여야 하는거냐

[익명(kyoko55)]

십 그럼 주가 떨어지게 우리 글카사도 이제 스케일링 한계있어서 안사도 됨?이라 할까?? 씹 ㅋㅋㅋㅋㅋ