제프리 힌턴이
2016년 인터뷰에서는 현재의 딥러닝(아마도 알파고 리)은 인간 뇌의 백만분의 1이라고 했는데
2020년 안터뷰에서는 GPT3가 천분의 1이라고 했음
(1750억 파라미터였으니 인간 뇌를 100조 시냅스라 치면
대략 571분의 1 정도고 150조라 치면 857분의 1임)
즉 4년간 1천배 커졌고
이 추세라면 2023년말이나 2024년 상반기에 파라미터 100조개 넘어가는 뇌와 동급의 인공신경망이 만들어질 것임
(돈이 문제지만 지금보다 인공지능 경쟁이 더 치열할테니 자금이 부족하진 않을거 같다)
물론 파라미터 = 시냅스라고 할 수는 없지만
하나의 시냅스가 파라미터보다 월등히 복잡한 것도 아니고
오히려 인공시냅스의 신호전달 속도가 백만배가량 빠르니
알고리즘 방식이 아닌 규모나 복잡성의 측면에선
인공신경망이 뇌를 확실히 능가한다고 봐야지.
몰랐는데 제프리 힌턴은 2016년에도 2020년에도
딥러닝은 모든 것을 할 수 있을거라는 입장을 유지했더라.
학자다 보니 100% 장담하진 못하고
발언을 살짝 얼버무리긴 했지만 말이지
휴먼브레인 프로젝트나 브레인 이니셔티브도 2023년까지 완료할 예정이고
레이 커즈와일도 세계지식포럼에서 3~4년 내를 슬쩍 언급한 걸 보면
2023~2024년에 최소한 하드웨어상으로는 인간 뇌를 능가하게 된다는 건 거의 확실해보인다.
2016년 인터뷰에서는 현재의 딥러닝(아마도 알파고 리)은 인간 뇌의 백만분의 1이라고 했는데
2020년 안터뷰에서는 GPT3가 천분의 1이라고 했음
(1750억 파라미터였으니 인간 뇌를 100조 시냅스라 치면
대략 571분의 1 정도고 150조라 치면 857분의 1임)
즉 4년간 1천배 커졌고
이 추세라면 2023년말이나 2024년 상반기에 파라미터 100조개 넘어가는 뇌와 동급의 인공신경망이 만들어질 것임
(돈이 문제지만 지금보다 인공지능 경쟁이 더 치열할테니 자금이 부족하진 않을거 같다)
물론 파라미터 = 시냅스라고 할 수는 없지만
하나의 시냅스가 파라미터보다 월등히 복잡한 것도 아니고
오히려 인공시냅스의 신호전달 속도가 백만배가량 빠르니
알고리즘 방식이 아닌 규모나 복잡성의 측면에선
인공신경망이 뇌를 확실히 능가한다고 봐야지.
몰랐는데 제프리 힌턴은 2016년에도 2020년에도
딥러닝은 모든 것을 할 수 있을거라는 입장을 유지했더라.
학자다 보니 100% 장담하진 못하고
발언을 살짝 얼버무리긴 했지만 말이지
휴먼브레인 프로젝트나 브레인 이니셔티브도 2023년까지 완료할 예정이고
레이 커즈와일도 세계지식포럼에서 3~4년 내를 슬쩍 언급한 걸 보면
2023~2024년에 최소한 하드웨어상으로는 인간 뇌를 능가하게 된다는 건 거의 확실해보인다.
요약 : 소프트웨어는 몰라도 하드웨어는 4년내에 인간 뇌를 능가한다.
그러면 알고리즘만 어떻게 잘 하면 agi는 의외로 금방 볼수도 있다는 말이 되는거야?
내 생각은 그래. 근데 알고리즘 연구가 잘 풀린다는 보장은 없으니 확답은 못하지. 소프트웨어 특성상 돌파구만 마련되면 물리적 설비가 필요없으니 폭발적으로 발전하는데, 돌파구를 발견 못하면 개념적 진전에 얼마나 걸릴 지 알 수 없지. 하지만 머신러닝이 욕먹다가 컴퓨팅과 데이터가 커지면서 재조명 되듯이 압도적인 컴퓨팅이 새로운 도약의 문을 열어줄 가능성도 있겠
강인공지능 가능성: 딥러닝 기반에서 하드웨어 깡스팩으로 씹어버리면 된다
풉...ㅋ
행복회로도 적당히 좀 돌려라... 진짜 애잔해지네 이정도면ㅠ
106.102 분탕 왔니? 부정의 근거는?
부정의 근거는 새끼야. 지금 컴퓨터 속도 cpu 느려지고 있는거 안보이냐? 5년전보다 cpu1코어 속도는 20%밖에 좋아지지 않았따. 니들이 맨날 삭제해달라고 지랄떠니까 선형근거가 없어지지 븅신.
단일 코어의 클럭 스피드ㅋㅋ AI연산에선 병렬연산 능력이 압도적으로 중요하단다. 괜히 슈퍼컴이 CPU중심에서 GPGPU로, 거기서 다시 AI가속기와 뉴로모픽칩으로 발전해가는줄 아나. 선형충 수준이 아직 그모양이라는 게 참 안심이다.
글고 단일 코어의 클럭스피드는 기술발전이 느리다는 근거가 못되. 5Ghz이상은 발열때문에 포기하고 병렬처리 능력에 몰빵하고 있는건데 과학자 공학자들의 눈밖에 난 방향을 쳐다보면서 발전이 느리다고 하면 멍청이지 초전도체나 광컴퓨터가 발전하면 단일 클럭 스피드도 1천배 정도는 올라가겠지만 한계는 그정도로 명확해서 다른데 집중하는거야
그나마 발전한다고 쳐주는 그래픽카드도 30시리즈가면서 느꼈지. 점점 크기가 커진다고. 즉 한계가 있다는 것. 또 3nm 미만으로 떨어지면 양자간섭때문에 더이상 올릴수가 없다는것 그래서 양자컴퓨터 연구하는 거다. 레커도 9년 보는데 감히 미쳤다고 4년이래
난 최고 최신 기술 얘기하는데 너는 개인용 PC 얘기하고 앉았네. 개인용이야 당연히 뇌 수준 될려면 슈퍼컴 기준에서 20년은 더 걸리지 클라우드 활용 안하는 한 말이야.
병렬연산 코어수까지 포함해도 2015년->2020년 인텔기준 2.5배 정도밖에 좋아지지않았다. 지금도 점점 빨라지는 속도가 느려지고있지. 그래픽카드도 마찬가지야. 어딘가로 수렴하고있다. 이거 논리적으로 길게 쓴 장문 글 있었는데 보나마나 삭제되었지. 에휴 하나만 보니까 제대로 판단을 못하지
3nm이하는 그래서 gaafet이나 mbcfet으로 전자 컨트롤 능력 높여서 1nm대까지 갈려고 하잖아. 불가능은 뭔 불가능. 경제성이 낮을 뿐이지 0.1나노공정까지 청사진은 나와있다.
억단위 조단위 비용 투입되는 HPC 얘기하고 있는데 끝까지 개인용 컴 얘기만 하네. 그게 딱 선형충 수준이지 지 눈 앞에 있는 것 밖에 몰라
개인용컴퓨터를 모아서 슈퍼컴퓨터 만드는건 알잖아. 전년도에 4년동안 천배 커졌다고 앞으로 4년동안 천배 커질보장이 거의 없다는걸 말하는거다.
ㅋㅋㅋ 가정용 컴퓨터로 현대 Ai를 논하고있네 ㅋㅋㅋ
오히려 가능성이 더 높지. 지난 4년간은 GPGPU와 초기형 AI가속기의 발전에 기반했지만 앞으로의 4년은 전력효율성이 훨씬 좋은 후기형 AI가속기와 뉴로모픽 칩의 발전에 기반하거든
그래서 애잔한거야. 행복회로 돌리는거지. 점점 속도는 느려지고있는데,
느려지는 건 너의 뇌회로인듯
ㅋㅋㅋㅋㅋ ai칩까지 동원해서 행복회로 돌린다 이거지. 아직 그건 실제로 적용되는지 얼마나 빨라지는지 확실하게 밝혀진게 없다. 그것만 알았두었으면 해.
ai칩 이미 한참 돌리고 있는데 뭔 개소리인지
고작 일부분에서만 적용될수있는것 적용된다고 보면 어쩔수없지. 그렇게 긍정적인걸. 사고회로가. 하지만 세상은 그렇게 호락하지가 않아. 어떤 알고리즘도 적용시킬수있는 칩들은 내가 아까 말했듯이 점점 느려지고있다고. 그거 적용해서 딥러닝해봤자 실제 강인공지능이 되는것도 아니고. 눈물난다.......... ㅠ
이젠 딥러닝 하드웨어만 확장시키면 그게 강인공지능이 된다고 믿는거지. 긍정적이니까. 애잔하다. ㅠㅠ
내가 다 애잔하다. 하드웨어에 대한 나의 예측은 낙관적인 것도 아닌 현실적인거다. 니 말대로 설령 발전속도가 느려지고 있다 한들 성능 자체는 더 좋아지고 있는데다 인간 뇌 수준의 규모와 복잡성을 가진 인공두뇌가 4년내로 만들어질 것은 거의 명백하다. SpiNNaker2는 이미 상세스펙과 건립 및 예산계획이 잡혀있다.
이 새끼는 어그로만 끌고 반박도 못하네.
ㄹㅇ 어그로만 끌고 반박도 못하는 ㅄ임. 어거지로 ai칩 ㅈㄹ거리고 이제 또 안되면 양자컴 들고온다. 하여튼
여기서 봤듯이 특이점 망상충은 문제가 심각하다. 예측이 아니라 망상을 쳐하고있다. 내가 뭔 말해봤자 이새끼들은 답이없어. ai칩 꺼내는거봐라. ai칩이 1000배 발전한다는 보장 있어? 데이터가 없다. 그런데도 열심히 우기잖아. 된다고. 긍정적이라고 보면 긍정적인데 얼마나 한심하냐 이상황 자체가
특이점 자체가 이새끼 말처럼 걍 뇌피셜 덩어리야 논리라곤 전혀 찾아볼수가 없다. 그런데 그걸 믿고있지. 성경책이랑 똑같에. 어쩌면 천동설주장하는 지적설계론과 동일하게 봐도 되겠다.
분명히 데이터상으로는 느려지고있다고 말했는데, 계속 말돌리는거봐. 데이터를 부정못하니까 그런거다.
특이점 망상이랑은 별개로 첫 댓글처럼 보는사람 기분 ㅈ같게 만드는 말투는 좀 고쳐라 걍 아닌거같다 하면 될걸 풉 ㅇㅈㄹ
글쓴이는 여러 사례를 들어서 자신의 생각을 말하는데 얘는 한가지의 논리로 깽판놓네. 특이점, 선형을 떠나서 말투가 너무 띠꺼워.
218 이새기는 그냥 아니다 빼애애애액 수준인데 ㅅㅂㅋㅋㅋ
온다잇 - dc App
딥러닝만으로 강인공지능이 가능함? 난 좀 회의적인데
난 하드웨어에 대해서만 얘기했음 알고리즘은 제프리 힌턴 말로는 뭐든지 가능하다고는 하는데 꽤 많은 개념적 돌파구도 필요하다고 하니 알 수 없겠지 하지만 오토ML제로 같은게 나오는거 보면 인간이 아닌 AI자기개선에 의해 AGI가 개발될 가능성도 있다고 본다.
확실히 하드웨어이던 가능 할 거 같음
논리적인 특붕이는 개추야! - dc App