[일반] 제프리 힌튼이 LLM 개념을 처음 제시한 거임?

[익명(211.241)]

그럼 사실상 이 사람이 현재의 인공지능을 만들었다 해도 과언이 아닌 거냐?

[익명(shore1232)]

힌튼은 시대엔 llm같은게 없었고 현재 "MLP" 라고 부르는 multi layer perceptron을 정립한 사람이 힌튼임

[글쓴 ㅇㅇ(211.241)]

이 사람이 AI 발전에 지대한 영향을 끼친 건 맞음?

[블랙Fos(neat5416)]

@글쓴 ㅇㅇ(211.241) 맞음 - dc App

[익명(shore1232)]

@글쓴 ㅇㅇ(211.241) 엄청난 영향을 미쳤음. 기존 퍼셉트론은 hidden layer가 없는 단층 퍼셉트론이라 가중치를 사람이 직접 업데이트 하는 방식이었는데 이런 식으로는 "XOR" 이라는 논리연산자를 구현하지 못하는 한계가 있었음.

[익명(shore1232)]

@글쓴 ㅇㅇ(211.241) 이때 힌튼이 "역전파"라는 개념을 다층 퍼셉트론에 적용해서 1차 ai 겨울을 극복한거임. 하지만 직후 기울기 소실과 Overfitting 문제가 발생하면서 2차 겨울 시작.. 이 겨울이 깨지기 시작한건 2000년대 CNN의 성공 이후임

[글쓴 ㅇㅇ(211.241)]

@ㅇㅇ 그럼 현재 AI 기술로는 시간만 지나면 확실히 AGI에 도달할 수 있다고 봄? 아니면 얀르쿤 말처럼 새로운 패러다임이 필요함?

[익명(shore1232)]

@글쓴 ㅇㅇ(211.241) 2차 겨울 돌파에 엄청난 역할을 한 사람이 얀르쿤이라 얀르쿤의 말을 완전히 무시할 수는 없지만, 솔직히 난 요즘 르쿤은 좀 퇴물이라 생각함.. 얀르쿤은 그냥 비전모델을 좋아하는거임 GAN을 극찬했는데 llm은 무시한다? 이건 말이 안되지

[글쓴 ㅇㅇ(211.241)]

@ㅇㅇ 너 근데 AI 전문 지식이 좀 있는 거 같은데 AI 분야 공부 중임 ㄷㄷ?

[익명(shore1232)]

@글쓴 ㅇㅇ(211.241) Ai 대학원은 아니고 타학과에서 ai 연구하는 대학원생임 ㅋㅋ

[글쓴 ㅇㅇ(211.241)]

@ㅇㅇ 그럼 너는 AGI 언제쯤 온다고 보냐?

[익명(shore1232)]

@글쓴 ㅇㅇ(211.241) 일단 지금 방식으로 가능하다고 생각하는데 타임라인은 나도 잘 몰라 ㅋㅋ 한국에서 타임라인 제대로 추측할 수 있는 연구자는 없을거임. 왜냐면 빅테크에서 다루는 모델과 대학원에서 학술적으로 다루는 모델들은 많이 다르거든.. 내 연구만 보면 agi는 까마득한 미래지. 하지만 빅테크의 현 추세대로라면 난 하사비스의 타임라인에 베팅하겠음. 혹은 "상황인식"이라고 엄청 유명한 글이 있는데 이거 읽어보셈 좀 길지만 읽어볼만함

[익명(amazonia)]

@ㅇㅇ 하사비스? 5년내 agi? 그러면 asi는 6년?