[토의] 인공지능 스케일 키우는거 다 좋다 이거야

[알파(macom1122)]

근데 사칙연산이나 논리추론같은걸 하려면 스케일만 키운다고 무조건 되는게 아니란걸 모두가 알잖음

물론 연구원들도 다 생각이 있겠지만,

좀더 다른 시각에서의 접근에 대해서도 좋은 소식이 들려왔으면 좋겠음

- dc official App

[익명(39.115)]

코드 인터프리터라고 못들어보셨나요

[알파(macom1122)]

뭔진 대충 아는데 그건 왜? - dc App

[익명(211.34)]

연구원들이 알아서 하겠지

[oo(venchoi)]

근데 스케일 키워서 이정도 수준까지 온거라 아직 다른 해법이 있는지는 모르겠음

[알파(macom1122)]

꼭 그렇지만은 않음<br>내가 자세히 아는건 아니지만 여기까지 오는데 스케일 키우는거 말고도 여러 구조적인 혁신들이 있어왔다는걸로 알고있음 - dc App

[oo(venchoi)]

트랜스포머 모델 등장이 혁신이긴 했는데 또 그럴만한 혁신이 또 나올지는 모르겠네 ㅠ..

[ㅇㅋ(ijh2005)]

한 3개월쯤 전부터 문제풀이과정들을 낱낱이 뜯어서 반성하고 학습하고있다고 openai에서 논문냈었음
https://openai.com/research/improving-mathematical-reasoning-with-process-supervision

[ㅇㅋ(ijh2005)]

더 나은 강화학습법을위해 과련부서 팀 모집한다고 공고 낸지도 2개월정도된것같고