[일반] 딥러닝의 한계는 곧 역전파의 한계아님?

[익명(211.228)]

딥러닝 주요 알고리즘이 역전파잖아

역전파를 쓴 결과물이 뭐냐면

환각, 손가락못그림, 수학못함

이런거아님?

역전파를 뛰어넘는 방법은 어떻게 만들수 있을거라고 생각하냐?

[익명(210.100)]

내말이~ llm이결국 저거라서 여기서도 계속 한계있다고 말나오는거잖아 뭐알트만믿는 특붕이들도 많지만 난얀르쿤파라서

[익명(gkrrms1)]

한계인지는 모르겠는데 개같이 비효율적인건 씹팩트라서 이대로는 agi는 몰라도 asi는 힘들다고 생각함

[익명(gkrrms1)]

이대로 가면 agi는 어떻게든 만들어서 재귀개선 하더라도 구조 자체의 한계에 부딪혀서 asi로 올라가지 못할수도 있다고 생각함..

[익명(211.228)]

재귀개선해서 역전파를 뛰어넘는걸 만들어내면 ASI로 가는거 아님?

[익명(gkrrms1)]

Asi는 될 수 있는데 폰노이만 구조 자체를 아예 뜯어고치지 못할수도 있고 고치더라도 오래 걸릴수도 있고 어케될지는 모르지

[익명(gkrrms1)]

갤주가 말하는 인간지능 총합 이정도는 오래걸려도 Baby asi 정도는 될지도 ㅋㅋ

[익명(175.206)]

역전파든 순전파든, AGI가 되기만 하면 자기가 알아서 발전할거라 '어? 역전파로는 더 발전 안 되겠다. 다른 방법 써야지.' 이것조차도 AGI 스스로가 하는 단계라고 생각함. 그러니까 역전파로 ASI 달성 여부를 우리가 걱정할 필요는 없는 것 같고. AGI 달성만 신경 쓰면 될 듯. 제프리 힌튼옹도 처음에 역전파 자체에 대해서 한계가 명확하고, 구려서 AGI는 불가능하다고 했다가 나중에 의견을 약간 수정함. 구리긴 한데, 인간보다 나은 부분도 있는, 장단이 명확한 방식이다. 그래서 모르겠다고 했을 걸. 그러니까 지금 당장은 역전파가 구린 단점이 부각되더라도, 얘가 가지는 장점도 있으니까 다들 역전파로 가는거지. 그리고 역전파 한계 느껴서 다른 방식도 이미 많이 연구하고 있을 걸. 기다려야지 뭐.