[📪정보] 구글 등, 스스로의 행동을 예측하는 강화학습으로 성능 향상

[스월빙(wkd48632)]

기사:

https://syncedreview.com/2021/09/15/deepmind-podracer-tpu-based-rl-frameworks-deliver-exceptional-performance-at-low-cost-104/

논문:

https://arxiv.org/abs/2109.03214

깃헙 페이지:

https://ben-eysenbach.github.io/rpc/

카네기 멜론 대학교, 구글 브레인, UC버클리 대학교 연구진들이 RPC(Robust Predictable Control)라는 방법을 고안했다.

RPC는 스스로의 행동에 일관성을 갖는 방향으로(self consistency) 자신의 행동을 점점 더 정확하게 예측하면서 성능을 개선해나간다고 전했다.

RPC는 학습에 더 적은 데이터를 요구했고, 더 좋은 일반화 성능을 갖췄으며, 일반적인 정보량이 주어질 때 기존 모델보다 다섯배 성능이 좋았다.

(5x higher reward than a standard information bottleneck)

오류 지적 환영

[익명(124.50)]

약인공지능 ㅡ> 더좋은약인공지능 재귀개선 인건가 딥러닝이랑 뭔차이임

[스월빙(wkd48632)]

더 적은 양의 데이터로 학습할 수 있다는 내용임

[익명(124.50)]

더 적은 양 안주고 똑같이 주면 5배인건가 쩔긴하네...

[익명(223.39)]

AI분야는 진짜 빠르게 발전해나가는게 너무 좋다

[익명(223.39)]

정보탭이면 더 좋을듯 합니다!

[스월빙(wkd48632)]

앗, ㄱㅅㅇ

[스월빙(wkd48632)]

기사:
https://syncedreview.com/2021/09/15/deepmind-podracer-tpu-based-rl-frameworks-deliver-exceptional-performance-at-low-cost-104/
논문:
https://arxiv.org/abs/2109.03214
깃헙
페이지:
https://ben-eysenbach.github.io/rpc/

[ㄱㄴㄷ(27.117)]

정보글 ㅊㅊ

[스월빙(wkd48632)]

점점 인공지능에서 사람이 보인다.

[스월빙(wkd48632)]

사람이 학습할 때도 미래를 예측하고 그대로 되면 보상을 받잖아? 사람은 미션에 실패한 것 보다 스스로의 일관성을 잃고, 예상대로 안 된 것에 더 큰 상처를 받는다고.

[스월빙(wkd48632)]

어쩌면 사람이 스스로의 일관성을 죽어라 지키는 이유, 이렇게 진화한 이유에 대한 대답이 이 논문일 수 있을 것 같다는 생각이 든다.

[익명(124.50)]

일관성 에서 벗어났을때 발생하는 혁신.. 일관성에서 벗엇날때 필요한 창의성,, 인간은 일관성도 잘 지키지만 벗어날땐 벗어나는데 쟤는 벗어나는거는 할수있음? 기계라서 너무 잘지키면 어떡해

[스월빙(wkd48632)]

그게 다음 문제가 되겠지?

[스월빙(wkd48632)]

원문에서도 보면 작은 환경에 대해서라고 함. 아직 창의력을 필요로 하는 환경은 아니라는 뉘앙스를 받았어.

[익명(124.50)]

어쩌면 내가 편견일지도 생각해보니 성능이 개선 된다는것은 일관성은 있지만 뭔가는 바뀌고 있다는건데 그게 무수히 쌓이면 최초의 일관성에선 벗어나는 거고 그럼 혁신이네

[스월빙(wkd48632)]

거기까지는 모르겠다. 아직 논문도 못 봄 ㅇㅇ

[익명(27.119)]

[supersonic2011(fa6396)]

뭔가 인공지능이 공부법을 익혔다는 느낌이네 ㅋㅋㅋ

[스월빙(wkd48632)]

ㄹㅇ 점점 사람같아지는 느낌임

[익명(223.39)]

오오오...

[익명(59.14)]

와 이거 메타인지네

[스월빙(wkd48632)]

메타인지랑 예측은 밀접한 관계가 있지.