๋กœ๋ด‡์—์„œ ์ธ๊ฐ„๊ณผ ๋™๋ฌผ์˜ ์›€์ง์ž„์„ ์žฌํ˜„ํ•˜๋Š” ์ƒˆ๋กœ์šด ์ ‘๊ทผ ๋ฐฉ์‹ (techxplore.com)

Imitate and Repurpose: Summary - YouTube

[2203.17138] Imitate and Repurpose: Learning Reusable Robot Movement Skills From Human and Animal Behaviors (arxiv.org)

๋กœ๋ด‡์—์„œ ์ธ๊ฐ„๊ณผ ๋™๋ฌผ์˜ ์›€์ง์ž„์„ ์žฌํ˜„ํ•˜๋Š” ์ƒˆ๋กœ์šด ์ ‘๊ทผ ๋ฐฉ์‹

์ตœ๊ทผ ๋ช‡ ๋…„ ๋™์•ˆ ๊ฐœ๋ฐœ์ž๋“ค์€ ํŠน์ • ํ™˜๊ฒฝ์—์„œ ์ ์  ๋” ํšจ์œจ์ ์ธ ๋ฐฉ์‹์œผ๋กœ ์ž‘๋™ํ•  ์ˆ˜ ์žˆ๋Š” ๋‹ค์–‘ํ•œ ์ •๊ตํ•œ ๋กœ๋ด‡์„ ๋งŒ๋“ค์—ˆ์Šต๋‹ˆ๋‹ค. ์ด๋Ÿฌํ•œ ์‹œ์Šคํ…œ ์ค‘ ๋งŽ์€ ์‹ ์ฒด ๊ตฌ์กฐ๋Š” ์ž์—ฐ, ๋™๋ฌผ ๋ฐ ์ธ๊ฐ„์—์„œ ์˜๊ฐ์„ ๋ฐ›์•˜์Šต๋‹ˆ๋‹ค.


๊ธฐ์กด์˜ ๋งŽ์€ ๋กœ๋ด‡์ด ์‚ฌ๋žŒ์ด๋‚˜ ๋‹ค๋ฅธ ๋™๋ฌผ ์ข…์˜ ๋ชธ๊ณผ ์œ ์‚ฌํ•œ ๋ชธ์ฒด๋ฅผ ๊ฐ€์ง€๊ณ  ์žˆ์ง€๋งŒ ์˜๊ฐ์„ ๋ฐ›์€ ๋™๋ฌผ์ฒ˜๋Ÿผ ์›€์ง์ด๋„๋ก ํ”„๋กœ๊ทธ๋ž˜๋ฐํ•˜๋Š” ๊ฒƒ์ด ํ•ญ์ƒ ์‰ฌ์šด ์ž‘์—…์€ ์•„๋‹™๋‹ˆ๋‹ค. ์ด๋ ‡๊ฒŒ ํ•˜๋ ค๋ฉด ์ผ๋ฐ˜์ ์œผ๋กœ ์ƒ๋‹นํ•œ ๋ฆฌ์†Œ์Šค์™€ ๊ฐœ๋ฐœ ๋…ธ๋ ฅ์ด ํ•„์š”ํ•  ์ˆ˜ ์žˆ๋Š” ๊ณ ๊ธ‰ ์šด๋™ ์ปจํŠธ๋กค๋Ÿฌ์˜ ๊ฐœ๋ฐœ์ด ์ˆ˜๋ฐ˜๋ฉ๋‹ˆ๋‹ค.


DeepMind์˜ ์—ฐ๊ตฌ์›๋“ค์€ ์ตœ๊ทผ ์ธ๊ฐ„์ด๋‚˜ ๋™๋ฌผ์˜ ์›€์ง์ž„์„ ๋ณต์ œํ•˜๋„๋ก ๋กœ๋ด‡์„ ํšจ์œจ์ ์œผ๋กœ ํ›ˆ๋ จ์‹œํ‚ค๋Š” ๋ฐ ์‚ฌ์šฉํ•  ์ˆ˜ ์žˆ๋Š” ์ƒˆ๋กœ์šด ๊ธฐ์ˆ ์„ ๊ฐœ๋ฐœํ–ˆ์Šต๋‹ˆ๋‹ค. arXiv์— ์‚ฌ์ „ ์ถœํŒ๋œ ๋…ผ๋ฌธ์—์„œ ์†Œ๊ฐœ๋œ ์ด ์ƒˆ๋กœ์šด ๋„๊ตฌ๋Š” ๋ชจ์…˜ ์บก์ฒ˜ ๊ธฐ์ˆ ์„ ์‚ฌ์šฉํ•˜์—ฌ ์ˆ˜์ง‘๋œ ์‹ค์ œ ์ธ๊ฐ„๊ณผ ๋™๋ฌผ์˜ ์›€์ง์ž„์„ ๋‚˜ํƒ€๋‚ด๋Š” ๋ฐ์ดํ„ฐ๋ฅผ ํ™œ์šฉํ•œ ์ด์ „ ์ž‘์—…์—์„œ ์˜๊ฐ์„ ๋ฐ›์•˜์Šต๋‹ˆ๋‹ค .


DeepMind ํŒ€์€ ๋…ผ๋ฌธ์—์„œ "์šฐ๋ฆฌ๋Š” ์‹ค์ œ ๋‹ค๋ฆฌ๊ฐ€ ์žˆ๋Š” ๋กœ๋ด‡์„ ์œ„ํ•œ ์žฌ์‚ฌ์šฉ ๊ฐ€๋Šฅํ•œ ์ด๋™ ๊ธฐ์ˆ ์„ ๋ฐฐ์šฐ๊ธฐ ์œ„ํ•ด ์ธ๊ฐ„๊ณผ ๋™๋ฌผ์˜ ์›€์ง์ž„์— ๋Œ€ํ•œ ์‚ฌ์ „ ์ง€์‹์˜ ์‚ฌ์šฉ์„ ์กฐ์‚ฌํ•ฉ๋‹ˆ๋‹ค."๋ผ๊ณ  ์ผ์Šต๋‹ˆ๋‹ค. "์šฐ๋ฆฌ์˜ ์ ‘๊ทผ ๋ฐฉ์‹์€ ์ด๋™ ๊ธฐ์ˆ  ๋ชจ๋“ˆ์„ ํ•™์Šตํ•˜๊ธฐ ์œ„ํ•ด ์ธ๊ฐ„ ๋˜๋Š” ๊ฐœ ๋ชจ์…˜ ์บก์ฒ˜(MoCap) ๋ฐ์ดํ„ฐ๋ฅผ ๋ชจ๋ฐฉํ•˜๋Š” ์ด์ „ ์ž‘์—…์„ ๊ธฐ๋ฐ˜์œผ๋กœ ํ•ฉ๋‹ˆ๋‹ค. ์ผ๋‹จ ํ•™์Šต๋˜๋ฉด ์ด ๊ธฐ์ˆ  ๋ชจ๋“ˆ์€ ๋ณต์žกํ•œ ๋‹ค์šด์ŠคํŠธ๋ฆผ ์ž‘์—…์— ์žฌ์‚ฌ์šฉํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค."


๊ณผ๊ฑฐ์— ๊ฐœ๋ฐœ๋œ ๋กœ๋ด‡ ๋กœ์ฝ”๋ชจ์…˜ ์ปจํŠธ๋กค๋Ÿฌ์˜ ์ƒ๋‹น ๋ถ€๋ถ„์€ ์‹œ์Šคํ…œ์ด ์„œ๋กœ ์ƒํ˜ธ ์ž‘์šฉํ•˜๋Š” ์„œ๋กœ ๋‹ค๋ฅธ ๋ถ€๋ถ„(์ฆ‰, ๋ชจ๋“ˆ)์œผ๋กœ ๋ถ„ํ• ๋˜๋Š” ๋ชจ๋“ˆ์‹ ์„ค๊ณ„๋ฅผ ๊ฐ€์ง€๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค. ์ด๋Ÿฌํ•œ ์ปจํŠธ๋กค๋Ÿฌ ์ค‘ ์ผ๋ถ€๋Š” ์œ ๋งํ•œ ๊ฒฐ๊ณผ๋ฅผ ์–ป์—ˆ์ง€๋งŒ ์ด๋ฅผ ๊ฐœ๋ฐœํ•˜๋ ค๋ฉด ์ƒ๋‹นํ•œ ์—”์ง€๋‹ˆ์–ด๋ง ๋…ธ๋ ฅ์ด ํ•„์š”ํ•œ ๊ฒฝ์šฐ๊ฐ€ ๋งŽ์Šต๋‹ˆ๋‹ค. ๋˜ํ•œ ๋ชจ๋“ˆ์‹ ์„ค๊ณ„๋Š” ์ผ๋ฐ˜์ ์œผ๋กœ ์ž‘์—…์— ๋”ฐ๋ผ ๋‹ค๋ฅด๋ฏ€๋กœ ๋‹ค์–‘ํ•œ ์ž‘์—…, ์ƒํ™ฉ ๋ฐ ํ™˜๊ฒฝ์—์„œ ์ž˜ ์ผ๋ฐ˜ํ™”๋˜์ง€ ์•Š์Šต๋‹ˆ๋‹ค.


์ด๋Ÿฌํ•œ ์ปจํŠธ๋กค๋Ÿฌ์˜ ๋Œ€์•ˆ์œผ๋กœ ์ผ๋ถ€ ์—ฐ๊ตฌ์›์€ ๋ชจ์…˜ ํ”Œ๋ž˜๋„ˆ์™€ ์ถ”์  ์ปจํŠธ๋กค๋Ÿฌ๋ฅผ ๊ฒฐํ•ฉํ•œ "๊ถค์  ์ตœ์ ํ™”"๋ผ๋Š” ๋ฐฉ๋ฒ•์„ ์ œ์•ˆํ–ˆ์Šต๋‹ˆ๋‹ค. ์ด๋Ÿฌํ•œ ์ ‘๊ทผ ๋ฐฉ์‹์€ ๋ชจ๋“ˆ์‹ ์ปจํŠธ๋กค๋Ÿฌ๋ณด๋‹ค ์—”์ง€๋‹ˆ์–ด๋ง์ด ๋œ ํ•„์š”ํ•˜์ง€๋งŒ ์ข…์ข… ๊ด‘๋ฒ”์œ„ํ•œ ๊ณ„์‚ฐ์„ ์ˆ˜ํ–‰ํ•ด์•ผ ํ•˜๋ฏ€๋กœ ์‹ค์‹œ๊ฐ„์œผ๋กœ ์ ์šฉํ•˜๊ธฐ์—๋Š” ๋„ˆ๋ฌด ๋А๋ฆด ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.


๊ทธ๋“ค์˜ ๋…ผ๋ฌธ์—์„œ DeepMind์˜ Steven Bohez์™€ ๊ทธ์˜ ๋™๋ฃŒ๋“ค์€ ์ธ๊ฐ„๊ณผ ๋™๋ฌผ์˜ ์ด๋™ ์Šคํƒ€์ผ๊ณผ ์œ ์‚ฌํ•œ ๋ฐฉ์‹์œผ๋กœ ์›€์ง์ด๋„๋ก ์ธ๊ฐ„ํ˜• ๋กœ๋ด‡๊ณผ ๋‹ค๋ฆฌ๊ฐ€ ์žˆ๋Š” ๋กœ๋ด‡์„ ํ›ˆ๋ จ์‹œํ‚ค๋Š” ๋Œ€์•ˆ์ ์ธ ์ ‘๊ทผ ๋ฐฉ์‹์„ ์†Œ๊ฐœํ–ˆ์Šต๋‹ˆ๋‹ค. ๊ทธ๋“ค์˜ ๊ธฐ์ˆ ์€ ๋ชจ์…˜ ์บก์ฒ˜ ๊ธฐ์ˆ ๋กœ ์ˆ˜์ง‘๋œ ๋ฐ์ดํ„ฐ์—์„œ ์ธ๊ฐ„๊ณผ ๋™๋ฌผ์˜ ์šด๋™ ๋Šฅ๋ ฅ์„ ์š”์•ฝํ•œ ๋‹ค์Œ ์ด ๋ฐ์ดํ„ฐ๋ฅผ ์‚ฌ์šฉํ•˜์—ฌ ์‹ค์ œ ๋กœ๋ด‡์„ ํ›ˆ๋ จ์‹œํ‚ต๋‹ˆ๋‹ค.


์ ‘๊ทผ ๋ฐฉ์‹์„ ๊ฐœ๋ฐœํ•  ๋•Œ ํŒ€์€ 4๊ฐ€์ง€ ์ฃผ์š” ๋‹จ๊ณ„๋ฅผ ์™„๋ฃŒํ–ˆ์Šต๋‹ˆ๋‹ค. ์ฒซ์งธ, ๋ชจ์…˜ ์บก์ฒ˜ ๋ฐ์ดํ„ฐ๋ฅผ ์‹ค์ œ ๋กœ๋ด‡์— ๋‹ค์‹œ ํƒ€๊ฒŸํŒ…ํ–ˆ์Šต๋‹ˆ๋‹ค. ๊ทธ ํ›„, ๊ทธ๋“ค์€ ์‹œ๋ฎฌ๋ ˆ์ด์…˜๋œ ํ™˜๊ฒฝ ๋‚ด์—์„œ ๋ชจ์…˜ ์บก์ฒ˜ ๋ฐ์ดํ„ฐ์—์„œ ์›ํ•˜๋Š” ๋ชจ์…˜ ๊ถค์ ์„ ๋ชจ๋ฐฉํ•˜๋Š” ์ •์ฑ…์„ ํ›ˆ๋ จํ–ˆ์Šต๋‹ˆ๋‹ค.


์—ฐ๊ตฌ์›๋“ค์€ ๋…ผ๋ฌธ์—์„œ "์ด ์ •์ฑ…์€ ์ถ”์  ์ •์ฑ…์ด ์›ํ•˜๋Š” ์ฐธ์กฐ ๊ถค์ ์„ ๊ณ ์œ  ์ˆ˜์šฉ ์กฐ๊ฑด์— ๋”ฐ๋ฅธ ํ•˜์œ„ ์ˆ˜์ค€ ์ปจํŠธ๋กค๋Ÿฌ์— ํ›„์†์ ์œผ๋กœ ์ง€์‹œํ•˜๋Š” ์ž ์žฌ์  ๋™์ž‘์œผ๋กœ ์ธ์ฝ”๋”ฉํ•˜๋Š” ๊ณ„์ธต ๊ตฌ์กฐ๋ฅผ ๊ฐ€์ง€๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค"๋ผ๊ณ  ์ผ์Šต๋‹ˆ๋‹ค.


์ฐธ์กฐ ๊ถค์ ์„ ๋ชจ๋ฐฉํ•˜๋„๋ก ์ด ์ •์ฑ…์„ ํ›ˆ๋ จ์‹œํ‚จ ํ›„, ์—ฐ๊ตฌ์›๋“ค์€ ์ž ์žฌ์ ์ธ ๋™์ž‘์„ ์ถœ๋ ฅํ•˜๋Š” ์ƒˆ๋กœ์šด ์ž‘์—… ์ •์ฑ…์„ ํ›ˆ๋ จํ•จ์œผ๋กœ์จ ๊ณ ์ • ๋งค๊ฐœ๋ณ€์ˆ˜๋ฅผ ๊ฐ–๋Š” ์ €์ˆ˜์ค€ ์ปจํŠธ๋กค๋Ÿฌ๋ฅผ ์žฌ์‚ฌ์šฉํ•  ์ˆ˜ ์žˆ์—ˆ์Šต๋‹ˆ๋‹ค. ์ด๋ฅผ ํ†ตํ•ด ์ปจํŠธ๋กค๋Ÿฌ๋Š” ๊ณต์„ ๋“œ๋ฆฌ๋ธ”ํ•˜๋Š” ๊ฒƒ๊ณผ ๊ฐ™์ด ๋กœ๋ด‡์—์„œ ๋ณต์žกํ•œ ์ธ๊ฐ„ ๋˜๋Š” ๋™๋ฌผ์˜ ์›€์ง์ž„์„ ๋ณต์ œํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ๋งˆ์ง€๋ง‰์œผ๋กœ Bohez์™€ ๊ทธ์˜ ๋™๋ฃŒ๋“ค์€ ์‹œ๋ฎฌ๋ ˆ์ด์…˜์—์„œ ์‹ค์ œ ํ•˜๋“œ์›จ์–ด๋กœ ๊ฐœ๋ฐœํ•œ ์ปจํŠธ๋กค๋Ÿฌ๋ฅผ ์ด์ „ํ–ˆ์Šต๋‹ˆ๋‹ค.


"์ค‘์š”ํ•˜๊ฒŒ, MoCap ๋ฐ์ดํ„ฐ์— ์˜ํ•ด ๋ถ€๊ณผ๋œ ์‚ฌ์ „ ์„ค์ •์œผ๋กœ ์ธํ•ด ์šฐ๋ฆฌ์˜ ์ ‘๊ทผ ๋ฐฉ์‹์€ ์žฌ์‚ฌ์šฉ ์‹œ์ ์— ํ•ฉ๋ฆฌ์ ์ด๊ณ  ์ž์—ฐ์Šค๋Ÿฌ์šด ํ–‰๋™์„ ์ƒ์„ฑํ•˜๊ธฐ ์œ„ํ•ด ๊ด‘๋ฒ”์œ„ํ•œ ๋ณด์ƒ ์—”์ง€๋‹ˆ์–ด๋ง์ด ํ•„์š”ํ•˜์ง€ ์•Š์Šต๋‹ˆ๋‹ค."๋ผ๊ณ  ์—ฐ๊ตฌ์›๋“ค์€ ๋…ผ๋ฌธ์—์„œ ์ผ์Šต๋‹ˆ๋‹ค. "์ด๋ฅผ ํ†ตํ•ด ์‹ค์ œ ๋กœ๋ด‡์— ๋ฐฐํฌํ•˜๊ธฐ์— ์ ํ•ฉํ•œ ์ž˜ ์ •๊ทœํ™”๋œ ์ž‘์—… ์ง€ํ–ฅ ์ปจํŠธ๋กค๋Ÿฌ๋ฅผ ์‰ฝ๊ฒŒ ๋งŒ๋“ค ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค."


์ง€๊ธˆ๊นŒ์ง€ DeepMind ํŒ€์€ ์‹œ๋ฎฌ๋ ˆ์ด์…˜๊ณผ ์‹ค์ œ ํ™˜๊ฒฝ ๋ชจ๋‘์—์„œ ์ผ๋ จ์˜ ์‹คํ—˜์„ ํ†ตํ•ด ์ ‘๊ทผ ๋ฐฉ์‹์„ ํ‰๊ฐ€ํ–ˆ์Šต๋‹ˆ๋‹ค. ์ด ํ…Œ์ŠคํŠธ์—์„œ ๊ทธ๋“ค์€ ์ปจํŠธ๋กค๋Ÿฌ๊ฐ€ ๋‘ ๊ฐ€์ง€ ์ฃผ์š” ๋™์ž‘, ์ฆ‰ ๊ฑท๊ธฐ์™€ ๊ณต ๋“œ๋ฆฌ๋ธ”์„ ๋ณต์ œํ•˜๋„๋ก ํ›ˆ๋ จ์‹œํ‚ค๋Š” ๊ธฐ์ˆ ์„ ์„ฑ๊ณต์ ์œผ๋กœ ์‚ฌ์šฉํ–ˆ์Šต๋‹ˆ๋‹ค. ๊ทธ ํ›„, ๊ทธ๋“ค์€ ANYmal 4์กฑ ๋ณดํ–‰ ๋กœ๋ด‡๊ณผ OP3 ํœด๋จธ๋…ธ์ด๋“œ ๋กœ๋ด‡์ด๋ผ๋Š” ๋‘ ๊ฐœ์˜ ์‹ค์ œ ๋กœ๋ด‡์— ๋Œ€ํ•œ ์ ‘๊ทผ ๋ฐฉ์‹์„ ์‚ฌ์šฉํ•˜์—ฌ ๋‹ฌ์„ฑํ•œ ์›€์ง์ž„์˜ ํ’ˆ์งˆ์„ ํ‰๊ฐ€ํ–ˆ์Šต๋‹ˆ๋‹ค.


๋ณดํ—ค์ฆˆ์™€ ๊ทธ์˜ ๋™๋ฃŒ๋“ค์ด ์ˆ˜์ง‘ํ•œ ๊ฒฐ๊ณผ๋Š” ๋งค์šฐ ์œ ๋งํ•˜๋ฉฐ ๊ทธ๋“ค์˜ ์ ‘๊ทผ ๋ฐฉ์‹์ด ์ธ๊ฐ„๊ณผ ๋™๋ฌผ์„ ๋ณด๋‹ค ์‚ฌ์‹ค์ ์œผ๋กœ ์—๋ฎฌ๋ ˆ์ดํŠธํ•˜๋Š” ๋กœ๋ด‡์„ ๊ฐœ๋ฐœํ•˜๋Š” ๋ฐ ๋„์›€์ด ๋  ์ˆ˜ ์žˆ์Œ์„ ์‹œ์‚ฌํ•ฉ๋‹ˆ๋‹ค. ๋‹ค์Œ ์—ฐ๊ตฌ์—์„œ ๊ทธ๋“ค์€ ์ƒˆ๋กœ์šด ๋™๋ฌผ๊ณผ ์ธ๊ฐ„์˜ ํ–‰๋™์— ๋Œ€ํ•œ ์ •์ฑ…์„ ํ›ˆ๋ จํ•œ ๋‹ค์Œ ๋กœ๋ด‡์—์„œ ์ด๋ฅผ ๋ณต์ œํ•˜๋ ค๊ณ  ํ•ฉ๋‹ˆ๋‹ค.


์—ฐ๊ตฌ์›๋“ค์€ ๋…ผ๋ฌธ์—์„œ "์šฐ๋ฆฌ๋Š” ๋” ๋‹ค์–‘ํ•œ ํ–‰๋™์œผ๋กœ ๋ฐ์ดํ„ฐ ์„ธํŠธ๋ฅผ ํ™•์žฅํ•˜๊ณ  ๊ธฐ์ˆ  ๋ชจ๋“ˆ์ด ๊ฐ€๋Šฅํ•˜๊ฒŒ ํ•˜๋Š” ๋‹ค์šด์ŠคํŠธ๋ฆผ ์ž‘์—…์˜ ๋ฒ”์œ„๋ฅผ ๋” ํƒ์ƒ‰ํ•˜๊ธฐ๋ฅผ ์›ํ•ฉ๋‹ˆ๋‹ค"๋ผ๊ณ  ์ผ์Šต๋‹ˆ๋‹ค.