-선- 각오하고 쓴다.
파라미터 수는 돈 때려박으면 솔직히 더 늘일 순 있음.
근데 왜 안되냐? 파라미터 수 늘인다고 속도가 같이 늘어나는 건 아니기 때문임.
지금도 속도가 좀 느려서 초거대형은 훈련 한번 시키는데 수개월씩 걸리고
훈련 다 시킨 다음에도 이제 뭐 할라치면 하다못해 질문 같은거라도 하나 답변 얻으려면
또 이거 파라미터 수에 비례해서 대답 속도가 느려짐.
이래서 지금 현재 파라미터 수 정도 보다 더 큰 파라미터 가진걸 구글 같은 대기업에서 안 만드는 거임.
돈 없어서가 아니고, 부자들이 ai에 관심이 없어서도 아님. 그냥 지금 파라미터 수가 지금 기술수준 상으로 한계라서 그래.
그래서 결론적으로 agi 언제나온다고 보느냐?
2024.
선인척하다가 급선회네 왜2024임?
난 선이 아니니까. 그리고 내가 생각하는 agi는 좀 더 도달하기 쉬워서일 수도 있음. 난 그냥 영화 Her에 나오는 그런 인공지능 정도면 agi 왔다고 보기때문에. 사실 이거만 되도 현실에서 쓰일 게 굉장히 많거든. 일단 기본적인 상담이나 이런거 부터해서 그냥 친구가 하나 생기는 것도 되고, 애인 역할도 가능하고 뭐 진짜 다양한 역할이 가능한데 무엇보다 사람들의 인식 변화가 젤 크게 다가오겠지. 이제 더이상 특슬람이 음지에서 활동할 필요가 없어짐. 최소 국민 50% 이상이 특슬람인 세상이 될테니까.
아 그리고 당연하겠지만 내가 생각하는 그런 agi 나온 순간 이제 다른 더 쩌는 agi 나오는 것도 몇년 안걸릴테고.
연산력이나 메모리 총량은 칩을 늘려서 올릴 수 있는데 연결 대역폭은 마냥 대폭 올릴 수가 없음. 그래서 기존 칩을 늘려서 2배 성능 올리는 것보다 다음세대 칩으로 더 적은 칩 수로도 동일 성능을 달성하는게 시스템 비효율이 적고 같은 수준의 건물 설비와 에너지 사용량으로는 3~4배의 성능을 확보할 수 있으니 시스템 구축할 적절한 타이밍도 고려하는거지. 또 AI전용칩의 기술은 GPU를 약간 개조한 임시방편식 1세대를 지나 AI연산에 어느정도 특화 시도를 한 2세대가 현재 수준이고 올해 후반기나 내년에 3나노 공정과 보다 AI연산에 최적화된 설계가 된 차세대 칩이 양산될테니 그걸로 시스템을 구축하는게 훨 낫지
그거 차세대칩 어떤 기업이 만드는줄알아? 여기 언급됐던 어떤 천재 아키텍처 한명이 그곳 CTO로 갔던데 거기꺼 칩말하는거? - dc App
2025 agi 가즈아