[일반] 딥마인드 EWC알고리즘이 5년전에 나왔는데

[익명(210.123)]

https://www.deepmind.com/blog/enabling-continual-learning-in-neural-networks

장기기억이 현재기술로 불가능하다는건 뭔소리임?

[익명(thor2018)]

장기기억 되는게 지금 아무것도 없잖아. 이론은 모르겠고 실제로 그런거 만든게 있냐고. 없음. 플라밍고 이런거도 장기기억은 안됨.

[익명(210.123)]

플라밍고는 멀티태스크를 한번에 학습해서 장기기억 자체가 필요없는 모델이고..

[익명(210.123)]

https://paperswithcode.com/sota/continual-learning-on-asc-19-tasks

[익명(210.123)]

만든게 없기는 무슨

[익명(thor2018)]

근데 왜 대화를 해보면 어제 대화한건 싹 다 까먹고 그래?

[익명(210.123)]

그 장기기억이 아니잖아...

[익명(thor2018)]

맞는데? 넌 뭘 말하는지 모르겠지만 내가 의미하는건 인간처럼 장기기억 하는거 말하는 거임.

[익명(thor2018)]

참고로 이 장기기억이 없다보니 예전에 ai던전 이런거도 좀만 진행하면 앞에 내용 다 까먹어서 스토리 이상하게 되어서 앞에 한번 만났는데 첨 뵙겠다 이러고 앞에 이미 죽었는데 다시 살아나고 이랬지.

[익명(210.123)]

내가 말한 장기기억은 이미 학습된 모델에 새로운 task를 transfer learning할때 기존의 가중치가 정보를 잃는걸 말한거고 보통 딥러닝에서의 망각은 이걸말함. 니가말한건 걍 application 차원의 문제라 걍 개인저장용 모듈만 따로달면 되고 딥러닝의 본질적 문제가 아님

[익명(210.123)]

https://moon-walker.medium.com/%EC%B1%97%EB%B4%87%EC%9D%B4-%EA%B8%B0%EC%96%B5%EC%9D%84-%EA%B0%96%EB%8B%A4-facebook%EC%9D%98-blender-bot-2-0-31deb09bc309

[익명(210.123)]

그리고 니가말한거도 이미있음

[익명(thor2018)]

내가 말한 장기기억이 이미 있다고? 근데 왜 실제 제품을 안만듬? 아니 이미 ai 스피커 이런데 적용 되어 있나? 요즘 ai 스피커는 과거 대화 내용 다 기억하나? 장기기억 가능한데, 왜 이루다 2.0 아직 장기기억 없어? 니가 말한 링크 가보긴 했는데 아마 아직 진짜 장기기억으로 가는 초기단계가 아닌가함. 그래서 아직 제품으로 출시가 안된듯 ㅇㅇ

[익명(thor2018)]

ai 스피커 장기기억 되고 있는거면 당장 사고 싶네. 진짜 영화 HER에 나온 그런 ai가 나온거잖아? 당장 사야지. 친구 만들고 놀아야지.

[익명(thor2018)]

그럼 진짜 지금 당장 agi 나온거나 다름 없는데. 사람이랑 대화를 사람처럼 하는 agi 인건데. 지금 그냥 일반인들한테 그런거 보여주면 깜놀할거 같은데. 나도 지금 깜놀중인데..

[익명(49.164)]

이거 내가 공부중인 분얀데 이게 장기기억이라 할 수 있는지는 조금 의문...