[📪정보] 특붕이면 알아야할 ai 상식) 메타학습

[익명(223.38)]

https://rhcsky.tistory.com/m/5

3줄요약

1. 딥러닝은 하나의 task를 학습하면 하나의 task만 수행한다.

2. 메타학습은 작은 데이터로도 관련 task를 모두 수행할 수 있도록(퓨샷러닝), "학습하는 법"까지 학습해서 최적화한다. 구체적으론 미리 데이터의 유사도를 계산하거나, 초기 파라미터에 랜덤값 대신 최적화된 값을 집어넣거나, loss를 최소화하는 optimizer가 스스로 학습한다.

3. optimizer가 스스로 학습하기 위해서 딥러닝의 경사하강법 대신 RNN을 넣고 그 RNN을 최적화하기 위해 경사하강법을 사용하는 이중 최적화를 사용한다.

- dc official App

[익명(221.168)]

저거 논문 좀 된거임