그림그리기에 특화시킨 인공지능이기 때문에
공간지각, 수학, 글자인식, 글자쓰기 이런 부분에 있어서 확실히 못하는 게 느껴짐
반면에 인간 두뇌는 학습효율은 떨어지고 개인편차는 있지만
국영수, 과학, 사회, 역사, 예체능 등 보편적인 분야에 대한 학습이 가능함
이번에 달리 문제점 보면서 agi로 가기 위해선 보상만으론 충분치 않다는 게 확실히 느껴졌음
인공신경망에서 구조적인 퀀텀점프가 필요함
그림그리기에 특화시킨 인공지능이기 때문에
공간지각, 수학, 글자인식, 글자쓰기 이런 부분에 있어서 확실히 못하는 게 느껴짐
반면에 인간 두뇌는 학습효율은 떨어지고 개인편차는 있지만
국영수, 과학, 사회, 역사, 예체능 등 보편적인 분야에 대한 학습이 가능함
이번에 달리 문제점 보면서 agi로 가기 위해선 보상만으론 충분치 않다는 게 확실히 느껴졌음
인공신경망에서 구조적인 퀀텀점프가 필요함
우리의 느낌 따위는 그닥 믿을게 못됨. 인간은 자신의 감각과 이해범위를 넘어서면 마치 엄청난 차이가 있다고 지레짐작하지만 나중에 도달하고 보면 꼭 그렇지만도 않거든. 똑같은 건물이라도 미니어쳐는 장난감이고 우리의 시야를 벗어날 정도로 거대해지면 신비로움과 경외감을 느끼지.
느낌이라고 무시할건 못되는게 어쨌든 현존하는 유일한 인공일반지능이 인간두뇌임. 그리고 내가 쓰기는 느낌이라고 썼는데, 그림그리기 인공지능이 공각지각/없다개념과 숫자개념/글자인식에서 처참한 결과가 나온건 사실임.
지금 대기업들이 어떻게든 데이터 끌어모으고 매개변수 늘리고 거대화, 사이즈 증가시키는 쪽으로 가고 있는데, 이걸로는 인공일반지능 갈수 없다는 게 내 생각임. 그림그리기에 글자인식 붙이고 거기에 수학인공지능 붙이고 과학인공지능 붙이고.... 이런 식이라는건데, 문제는 학문분야, 학습할 분야도 엄청나게 증가하고 있다는거다. 과학도 물화생지, 물리도 이론물리 실험물리 양자역학 상대성이론 온갖걸로 분화됨. 이거 하나하나 다 학습시켜서 전부 이어붙일거야? 언제? 이런 방향으론 절대 불가능임. 지금의 딥러닝과는 전혀 다른 차원의 보편적인 학습알고리즘이 필요함.
뭔가가 지적되면 그에 대한 해결책이 나오는거지. GPT3가 언어 말고는 세상에 대해 전혀 상식이 없다고 지적되었지만 플라밍고는 상당한 진전이 있었지. 인간은 몇개의 요소에 의한 단편적인 개선의 예측은 잘해도 수많은 요소들의 상호작용에 의한 전방위적인 개선과 변화는 제대로 인지하지도 못함. 반면 AI는 그 부분에 있어서 정보만 충분하면 인간보다 월등하지.
어쨌든 그것도 '이미지인식'이라는 1개분야 한정이잖아. 진정한 의미에서의 일반지능이라고 할수없음. 그걸 가지고 전혀 다른 작업, 예를 들면 그림그리기나 글쓰기를 할수있음? 인간두뇌는 효율은 떨어져도 여러가지 분야의 학습이 가능하다는게 장점임. 근데 지금 나오는 것들은 어디가지나 약인공지능, 특화의 범주라고 봐야 함
그리고 퀀텀점프 얘기하는 건 좋지만 기본적인 작동원리와 성과로 얘기해야겠지 그리고 그 퀀텀점프가 무엇이건 간에, 인간의 뇌가 신피질을 키워서 현명해졌듯이, AGI-초지능으로 나아가려면 확장성은 아주 중요함. 지금의 기호주의자 같은 사람들은 더 효율적인 설계가 필요하다고 주장하는데 그 말이 맞다 쳐도 시스템 확장은 계속해나가는게 그 퀀텀점프를 실험하는데 중요함. 만약 한정된 하드웨어에서는 잘 작동하는데 더 큰 시스템에서는 잘 작동하지 못한다면 확장성이 낮은거고 퀀텀점프가 아님. 딥러닝이 초기에는 제대로 작동을 하지 않았다가 데이터와 컴퓨팅이 받쳐주니 잠재력을 발휘한 것처럼 퀀텀점프에 해당하는 기술이라면 오히려 지금 수준에서는 비효율적이거나 잘 작동하지 않을 가능성도 있다고 봄
이런 억쉴러들때문에 특붕이들이 욕먹지 ㅋㅋㅋㅋㅋ
플라밍고에서 많이 개선 됐는데...
그건 스케일 문제야 지금 달리는 50억 파라미터밖에 안 쓴 거로 알고 있음 GPT-3이 1750억이었던 거 생각하면 미친 성능이지
이렇게 나열해놓은거 보니까 ANI를 모듈화하는게 경제적인 AGI 구현법인 것 같은데? 달리, GPT 같은 다른 ANI가 표준화된 인터페이스를 통해 정보를 제공해주면, 그걸 정보 분석에 특화된 신피질 같은 ANI가 받아와서 분석하고 뿌리는데 이 정보분석 ANI가 초기 AGI가 될 것 같은 느낌쓰?
ANI 여러 개가 잘 만들어지고 나면, 그걸 네트워킹 하는 시도가 있을 건데 그 과정에서 AGI가 등장할 수도 있을 것 같다
달리나 GPT가 직접 AGI로 성장하는 것보다 이런 모델이 확장성이 더 높아서 범용적으로 쓰일 듯
그러니까 여전히 인공지능은 다섯살 꼬마아이의 지능에도 못미친다는게지. 부분적으로야 알파고처럼 인간 최고지능을 가볍게 눌렀지만 전체적으로는 개판인게야... 지능이란게 꼭 논리와 연산이 전부가 아니거든. 그 논리와 연산도 상황인지,감성인지 등 복잡다변하는 변수들을 모두 통찰해서 적용했을 때 비로소 지능이 빛을 발하는 건데 여전히 인공지능은 인간지능의 부분적 모방에 불과하다....