GPT-3랑 뭐가 달라?
뭐 새로운 기능이라도 있냐?
스케일이 크잖아
스케일은 큰데 뭐가 새롭냐고 기능상으로
모델이 커지면서 일정 수준에 도달할 때마다 새로운 능력이 생긴다. 초등학교 수준이긴 하지만 계산능력 생기는게 그 뚜렷한 예지. 트위터에 누가 정리해둔 표 본 기억이 있는데 찾아오기 귀찮다.
언어모델뿐 아니라 이미지 모델도 그렇잖아. 일정 크기 이상 파라메타가 늘어나니까 글자를 정확히 인지하고 표현하잖아. 그런거지. 스케일이란게.
그래서 무슨 새로운 기능이 생겼냐고
112.166 이 병신은 말을 해줘도 쳐 못알아듣네 니가 찾아 핑프년아
이번 결과가 안좋으면 '스케일이 모든 것이 아니다.' 라는 식으로 결론날까봐 그게 걱정됨 지금은 조단위 스케일을 커버할 수 있는 상황이 안됨
170조개 언저리만큼 가본 기업이 없어서 아무도 모름… - dc App
물론 효율성은 떨어질거라고 생각은 드는데.. - dc App
gpt-3가 왜 나와
어떻게 170조 파라미터 만든거임? 그렇게 만드려면 몇조든다는데
미국을 자극하는 것만으로 충분히 의미가 있다
만든애들이 알려줘야 알지 뭐 어떻게 알아
만든애들이 스케일만 공개하고 벤치마크를 안공개했는데 우리가 어케알아
174조라는 수치만 보면 인간 수준의 크기인데 성능이 궁금하긴하네
스케일이 크잖아
스케일은 큰데 뭐가 새롭냐고 기능상으로
모델이 커지면서 일정 수준에 도달할 때마다 새로운 능력이 생긴다. 초등학교 수준이긴 하지만 계산능력 생기는게 그 뚜렷한 예지. 트위터에 누가 정리해둔 표 본 기억이 있는데 찾아오기 귀찮다.
언어모델뿐 아니라 이미지 모델도 그렇잖아. 일정 크기 이상 파라메타가 늘어나니까 글자를 정확히 인지하고 표현하잖아. 그런거지. 스케일이란게.
그래서 무슨 새로운 기능이 생겼냐고
112.166 이 병신은 말을 해줘도 쳐 못알아듣네 니가 찾아 핑프년아
이번 결과가 안좋으면 '스케일이 모든 것이 아니다.' 라는 식으로 결론날까봐 그게 걱정됨 지금은 조단위 스케일을 커버할 수 있는 상황이 안됨
170조개 언저리만큼 가본 기업이 없어서 아무도 모름… - dc App
물론 효율성은 떨어질거라고 생각은 드는데.. - dc App
gpt-3가 왜 나와
어떻게 170조 파라미터 만든거임? 그렇게 만드려면 몇조든다는데
미국을 자극하는 것만으로 충분히 의미가 있다
만든애들이 알려줘야 알지 뭐 어떻게 알아
만든애들이 스케일만 공개하고 벤치마크를 안공개했는데 우리가 어케알아
174조라는 수치만 보면 인간 수준의 크기인데 성능이 궁금하긴하네