1. 얀 르쿤은 AGI라는것도 사실 탐탁치 않아함 Artificial Machine Intelligence라는 AMI를 쓰는게 맞지 않냐고 할정도
2. 얀 르쿤은 LLM 자체의 장점이자 단점인 그럴듯해 보인다라는걸 모두 인지해야 된다고 봄
정확한 답이 있는 분야보다 정답이 정해져있다고 보기 어려운 분야(예술)에서는 활용도 높은거 맞음
다만 이렇게 만든걸로 물리적 세계를 이해한다?
3. 틀리면 안되는 분야에서 그럴듯해 보인다는건 치명적이라고 봄
스케일이 전부라고 하는 곳에서는 그럼 스케일 늘려서 존나 그럴듯해 보이면 지금도 완벽하지 않은 인간이랑 다를 바 없다라고 주장하겠지만
얀 르쿤은 10조 토큰을 학습하는 거대 언어 모델보고 사람들이 와 저거 사람이 읽으려면 17만년 걸린다 ai는 자지도 쉬지도않는다!라고 근들갑 떨지만
4살짜리 아이가 시각 피질에서만 얻는 정보량이 초당 20MB x 6만시간(발달 심리학자에게 물어본 아이가 깨어있는 시간에 기반함) x 3600초 곱하면 4살 아이가 존나 비싼돈 들인 거대 언어 모델 학습의 최소 50배 더 많은 데이터를 갖고 있는거라고 얘기함
4. 그러니까 AGI고 AMI고 스케일 존나 늘려서 물리 세계 이해 실컷하시고 저희는 라마3 ^오픈소스^로 금방 보여드림 ㅎㅎ
라고 말하려다 급발진한거임 르쿤이햄 입장에서는 좆같을만하잖아?
왜냐면 여기서는 물로켓이라고 까지만 생각해봐 AI 겨울 시대를 겪은 사람이고 그 나이에도 현역 수석 개발자임
구글이 오라는것도 오픈소스 아니면 좆까라그러고 메타에서 열심히 일하는 사람이기도한데 보수적 입장은 갖다 버리고 뭐 7트릴리온 달러?(관계자 추정치지만) 그정도 자본 갖다박고 결과가 초지능이 아니면 AI는 겨울이 아니라 빙하기 올걸 누구보다 잘 알 사람이라는거지
LLM으로 비즈니스 잘 할 수 있는거 아는데 AGI 거리지만 말라는거지 OAI 망해라 입지가 흔들린다 이런 심보는 아니라고 생각하니까 너무 쌍욕박지는 말아줘..
우리 르쿤이햄 절대 지켜
얀르쿤사랑단 출동
오픈소스하자는것도 마음에 드네
중요하지 신뢰성의 문젠데
애초에 얀르쿤이 특갤에 오랫동안 남는이유도 단지 다른 몇몇학자처럼 ai를 무지성 반대나 거부가 아니라 본인의 주장을 뒷받침한다고 라마같은거만드니깐 ㅇㅇ
오히려 ai 규제는 세상에서 제일 급진적인 수준으로 반대함
다른쪽의 길이 맞다고주장하는 학자라서 난 이런 스탠드를 유지하는 사람도 필요하다봄 ㅇㅇ 얀르쿤정도면 걍 추구하는방향이 다른쪽으로볼수있으니
근데 뭔 얀 르쿤보고 나이들어서 뇌가 썩었다니 이러고있는게 ㅅㅂ
3번은 신기하네. 4살아이도 지금 거대모델들보다 훨씬 많은 데이터를 학습했구나. 그럼 이정도 수준까진 데이터 늘려보는것도 괜찮겠네?
놀라운건 이게 시신경에 한정한 데이터임 후각 촉각 이런건 넣지도 않음ㅋㅋㅋ
개추를벅벅 르쿤햄을 너무 비난하는거 좀 그랬음 오픈소스 규제반대를 외치는 사람인데
ㄹㅇ
얀 르쿤보다 낫네.
https://twitter.com/ylecun/status/1759501018281267613
여기서 이러고 있지 말라고 전해 좀 줘
비 LLM 분야가 지금까지 LLM에 비해 자원은 10배로 퍼먹고 성괴는 10분의 1도 안되는데 이정도면 본인이 따르는 방법론에 문제가 있는것 정도는 인지를 해야하지 않을까
LLM의 한계도 모르는건 아닌데 다른 방법론을 옹호하기에는 성과가 파멸적으로 없음 솔직히 open ai 이전에 ai 분야 발전 속도가 답도 없었던것도 사실이밚아
진짜 openai 까이면 바득바득 달려드는게 종1교충 수준임
적어도 오픈 ai 는 제프리 힌튼조차 기술 발전이 너무빠르더며 '우려'를 표명할만큼의 기술적 성과를 내놨고 지금도 계속 성과를 보여주는반면, 르쿤이는 ㄹㅇ 허구헌날 트위터에서 일반 유저랑 키배뜨는거나 박제당해서 인기글올라오니 .. 진짜 인식이 바닥까지 떨어짐. 물론 그렇다고 해서 얀 르쿤이 ai 업계에서 이뤄낸 발전을 결코 무시하거나 경시할만한 이유는 되지 않지만. 특갤이 거시적으로 보이는 과학기술의 성과를 바탕으로 기술적 특이점이 도래한다고 믿는 커뮤니티인만큼. 오픈 ai 쪽으로 여론이 쏠리는건 당연하다고 봄.
글 잘읽었어요. 여기서 욕먹는건 거시적으로 sora에 근접한 물건도 안(못)내놓고 트위터에서 추잡스럽게 키배뜨는게 ㅄ 보이는게 한 몫 할듯. 사실 특붕이들 입장에선 얀르쿤 같은 사람이 전혀 나쁠게 없는대 말이지. 저렇게 다른 시각에서 다른 접근방식을 택하는 사람도 있어줘야 LLM 이 aig 개발에 시원찮을대 다른 걸로 한번 파볼 수도 있는거고.
2번 3번에 대해 짐팬과 제프리 힌튼은 다른 입장이니까 그건 참고
참고로 gpt3땐 llm으론 추론 절대 불가!! 이러다 gpt4나오고 부랴부랴 ‘이해 자체는 가능하지만 피상적’으로 의견 바꾼 사람이 얀르쿤임..오픈ai가 뭘 보여주냐에 따라 의견바꿀 사람이니 그러려니 함 그래서 gpt5에 기대하는 거고
근데 gpt5는 llm이라 부르기엔 좀 완전히 다를 물건 같은 데 트랜스포머 기반이 아니라면 얀르쿤 말이 어느정도는 맞을지도ㅋㅋ
어떤 부분이 완전히 다름? 나 잘 몰라서 물어보는거 - dc App
큐스타 루머 같은 거 보면 완전히 다른 접근법도 추가될 모양새인 디 오픈ai가 까주지 않으면 모르지 뭐 /단지 gpt기반에 강화학습만 섞는다던가 그런 방식일수도 있고