영상 두 개를 스킵하면서 대충 들었는데 AGI 예상은 5개월 전 인터뷰였음


- 2024년에는 기존 모델들의 성능이 많이 개선되는 한 해가 될 것인데 현실을 뒤집는 변화는 없을 것. 큰건 25~26년에 올거라 본다.


- 2015년 OpenAI 설립 전부터 스카웃 제의를 받았으나 거절했었는데 몇달 후 AI 좀 친다는 놈들이 OpenAI로 가는 분위기여서 나도 들어갔다.


- OpenAI가 설립되기 직전에 일리야 수츠케버를 만났어요. 그가 저에게 처음 한 말 중 하나는 "보세요. 모델들은 그저 배우고 싶을 뿐이에요. 이 점을 이해해야 합니다. 모델들은 그저 배우고 싶을 뿐이에요." 마치 선!불!교의 선문답 같았어요. 저는 그 말을 듣고 깨달음을 얻었습니다.


- 스케일링이 될 거라는 아이디어는 2014~2017년에 걸쳐 서서히 생성됐다.


- 스케일링이 왜 잘 되는지 우리는 아직도 잘 모른다.


- 2021년 앤트로픽 설립 당시 OpenAI의 14~15명을 데리고 왔고 당시 OpenAI 전직원의 10% 정도였다. 공교롭게도 내가 LLM 팀이었기 때문에 LLM팀 거의 전체가 따라왔고 OpenAI의 LLM팀에는 약 2명(수츠케버가 이 중 한 명일 듯) 밖에 안 남았었다. 



https://www.youtube.com/watch?v=Nlkk3glap_U

Dario Amodei (Anthropic CEO) - $10 Billion Models, OpenAI, Scaling, & AlignmentHere is my conversation with Dario Amodei, CEO of Anthropic.Dario is hilarious and has fascinating takes on what these models are doing, why they scale so we...www.youtube.com


https://www.youtube.com/watch?v=gAaCqj6j5sQ

Anthropic CEO on Leaving OpenAI and Predictions for Future of AIDario Amodei is the Co-Founder and CEO of Anthropic. In the episode, we discuss detailed predictions on the AI industry for 2024, 2025, and beyond. Dario dis...www.youtube.com