λͺ¨ν„° μ œμ–΄μ—μ„œ κ΅¬ν˜„λœ 지λŠ₯κΉŒμ§€ (deepmind.com)

Watch DeepMind's digital humanoids learn to play soccer - YouTube



인간과 λ™λ¬Όμ˜ μ›€μ§μž„μ„ μ‚¬μš©ν•˜μ—¬ λ‘œλ΄‡μ—κ²Œ 곡을 λ“œλ¦¬λΈ”ν•˜λŠ” 법을 κ°€λ₯΄μΉ˜κ³ 
μΈκ°„ν˜• 캐릭터가 μƒμžλ₯Ό λ‚˜λ₯΄κ³  좕ꡬλ₯Ό ν•˜λ„λ‘ κ°€λ₯΄μΉ©λ‹ˆλ‹€.

5λ…„ μ „, μš°λ¦¬λŠ” μ™„μ „νžˆ κ΄€μ ˆμ΄ μžˆλŠ” μΈκ°„ν˜• μΊλ¦­ν„°μ—κ²Œ μž₯μ• λ¬Ό μ½”μŠ€λ₯Ό νš‘λ‹¨ν•˜λ„λ‘ κ°€λ₯΄μΉ˜λŠ” 도전에 μ°©μˆ˜ν–ˆμŠ΅λ‹ˆλ‹€Β . 이것은 μ‹œν–‰μ°©μ˜€λ₯Ό 톡해 κ°•ν™” ν•™μŠ΅(RL)이 달성할 수 μžˆλŠ” 것을 λ³΄μ—¬μ£Όμ—ˆμ§€λ§Œ λ˜ν•œΒ κ΅¬ν˜„Β μ§€λŠ₯을 ν•΄κ²°ν•˜λŠ” 데 μžˆμ–΄ 두 가지 과제λ₯Ό κ°•μ‘°ν–ˆμŠ΅λ‹ˆλ‹€.

  1. 이전에 ν•™μŠ΅ν•œ 행동을 μž¬μ‚¬μš©:Β μ—μ΄μ „νŠΈκ°€ "ν˜„μž₯μ—μ„œ λ²—μ–΄λ‚˜κΈ°" μœ„ν•΄ μƒλ‹Ήν•œ μ–‘μ˜ 데이터가 ν•„μš”ν–ˆμŠ΅λ‹ˆλ‹€. 각각의 κ΄€μ ˆμ— μ–΄λ–€ νž˜μ„ κ°€ν•΄μ•Ό ν•˜λŠ”μ§€μ— λŒ€ν•œ 초기 지식이 μ—†λŠ” μƒνƒœμ—μ„œ μ—μ΄μ „νŠΈλŠ” λ¬΄μž‘μœ„λ‘œ λͺΈμ„ λΉ„ν‹€κ³  λΉ λ₯΄κ²Œ λ°”λ‹₯으둜 떨어지기 μ‹œμž‘ν–ˆμŠ΅λ‹ˆλ‹€. 이 λ¬Έμ œλŠ” 이전에 ν•™μŠ΅λœ 행동을 μž¬μ‚¬μš©ν•¨μœΌλ‘œμ¨ 완화될 수 μžˆμŠ΅λ‹ˆλ‹€.Β 
  2. νŠΉμ΄ν•œ 행동:Β μ—μ΄μ „νŠΈκ°€ λ§ˆμΉ¨λ‚΄ μž₯μ• λ¬Ό μ½”μŠ€λ₯Ό νƒμƒ‰ν•˜λŠ” 방법을 배웠을 λ•ŒΒ λ‘œλ΄‡ 곡학과 같은 μ‘μš© ν”„λ‘œκ·Έλž¨μ—λŠ” λΉ„ν˜„μ‹€μ μΈ λΆ€μžμ—°μŠ€λŸ¬μš΄(Β μž¬λ―ΈλŠ” μžˆμ§€λ§Œ ) μ›€μ§μž„ νŒ¨ν„΄μœΌλ‘œ κ·Έλ ‡κ²Œ ν–ˆμŠ΅λ‹ˆλ‹€.

μ—¬κΈ°μ—μ„œ μš°λ¦¬λŠ” 인간과 λ™λ¬Όμ—μ„œ νŒŒμƒλœ μ›€μ§μž„ νŒ¨ν„΄μ„ μ‚¬μš©ν•œ μœ λ„ ν•™μŠ΅μ„ ν¬ν•¨ν•˜λŠ” NPMP(μ‹ κ²½ ν™•λ₯ μ  λͺ¨ν„° κΈ°λ³Έν˜•)λΌλŠ” 두 가지 λ¬Έμ œμ— λŒ€ν•œ μ†”λ£¨μ…˜μ„ μ„€λͺ…ν•˜κ³  이 μ ‘κ·Ό λ°©μ‹μ΄Β μ˜€λŠ˜ Science Robotics에 게재된  Humanoid Football λ…Όλ¬Έ μ—μ„œ μ–΄λ–»κ²Œ μ‚¬μš©λ˜λŠ”μ§€ λ…Όμ˜ν•©λ‹ˆλ‹€.

λ˜ν•œ 이 λ™μΌν•œ μ ‘κ·Ό 방식이 물체λ₯Ό μš΄λ°˜ν•˜λŠ” νœ΄λ¨Έλ…Έμ΄λ“œμ™€ 같은 μ‹œκ°μ—μ„œ νœ΄λ¨Έλ…Έμ΄λ“œ μ „μ‹  μ‘°μž‘μ„ κ°€λŠ₯ν•˜κ²Œ ν•˜λŠ” 방법과 곡을 λ“œλ¦¬λΈ”ν•˜λŠ” λ‘œλ΄‡κ³Ό 같은 ν˜„μ‹€ μ„Έκ³„μ˜ λ‘œλ΄‡ μ œμ–΄λ₯Ό κ°€λŠ₯ν•˜κ²Œ ν•˜λŠ” 방법에 λŒ€ν•΄μ„œλ„ λ…Όμ˜ν•©λ‹ˆλ‹€.