현재 생성 AI의 기반인 '트랜스포머'와는 다른 새로운 아키텍처 개발 중이라는 사실을 공개했다고 보도했다.
이에 따르면 르쿤 수석이 소개한 아키텍처는 '제파(JEPA, Joint Embedding Predicting Architecture)'라는 방식이다.
그는 현재 트랜스포머 기반 AI 시스템은 "실제로
생각이나 계획 없이 한 단어씩 차례로 생성"하는 구조라고 설명했다. 또 복잡한 질문을 다루거나 정보를 장기간 유지하는 데 어려움을
겪기 때문에 여전히 "어리석은 실수를 저지른다"라고 지적했다.
반면 제파는 대형언어모델(LLM)처럼 학습한 내용을 확률에 따라 뱉어내는 방식이 아닌, 실제로 추론하고 계획하는 방법이다.
"추론을 추가한다는 것은 AI 모델이 가능한 답을 검색하고 행동의 순서를 계획하며 행동의 효과가 어떻게 될지를 종합하는 '정신적 모델'을 구축한다는 것을 의미한다"라고 설명했다.
반면 제파는 대형언어모델(LLM)처럼 학습한 내용을 확률에 따라 뱉어내는 방식이 아닌, 실제로 추론하고 계획하는 방법이다.
"추론을 추가한다는 것은 AI 모델이 가능한 답을 검색하고 행동의 순서를 계획하며 행동의 효과가 어떻게 될지를 종합하는 '정신적 모델'을 구축한다는 것을 의미한다"라고 설명했다.
https://www.aitimes.com/news/articleView.html?idxno=158694
https://www.aitimes.com/news/articleView.html?idxno=158694
메타'AI 사대천왕' 중 하나이자 메타의 수석 AI 과학자인 얀 르쿤이 생성 인공지능(AI)의 한계를 넘는 새로운 아키텍처를 개발 중이라고 밝혔다. 학습한 지식을 확률적으로 출력하는 현재의 '트랜스포머' 방식을 넘어, 사람처럼 추론하고 계획하는 방식으로 인공일반지능(AGI)에 도달할 수 있다고 설명했다.테크크런치와 파이낸셜타임스 등은 9일(현지시간) 얀 르쿤 수석이 런던에서 열린 '메타 AI 데이' 행사에 참여, 현재 생성 AI의 기반인 '트랜스포머'와는 다른 새로운 아키텍처 개발 중이라는 사실을 공개했다고 보도했다.이에 따르면 르쿤www.aitimes.com
좋아좋아
이게 좀 가속되면 좋을탠데 뭐 결과물이 나와줘야
쿤햄이 한 10년안에 될거 같다고 그랬음
2034년 ㄷㄷ
랩틸리언은, 얀씨 트윗질 못하게 막고 일에 전념시켜야 함
별 믿음은 안감. 얀르쿤이 딥러닝에 기여도가 높다지만 이번엔 얀르쿤이 마빈 민스키 포지션인듯. 쓰라린 교훈이 결국 옳을듯
그게 가능한가ㅋ
이제 똥게이새끼는 못 믿겠어