[📪정보] gp4를 사용하여 로봇의 동작을 생성하는 기술 개발

[익명(sky0204)]

대규모 언어 모델(LLM), 특히 GPT-4를 사용하여 자발적인 동작을 생성할 수 있는 휴머노이드 로봇인 Alter3의 개발 소식을 알려드립니다. 이 성과는 독점 안드로이드인 Alter3에 GPT-4를 통합함으로써 실현되었으며, 이를 통해 LLM을 Alter의 신체 움직임과 효과적으로 연결할 수 있게 되었습니다. 일반적으로 로우레벨 로봇 제어는 하드웨어에 종속적이며 LLM 코퍼스의 범위를 벗어나기 때문에 직접 LLM 기반 로봇을 제어하는 데 어려움이 있습니다. 하지만 Alter3와 같은 휴머노이드 로봇의 경우 프로그램 코드를 통해 인간의 행동에 대한 언어적 표현을 로봇의 신체에 매핑함으로써 직접 제어가 가능합니다. 놀랍게도 이러한 접근 방식을 통해 Alter3는 각 신체 부위에 대한 명시적인 프로그래밍 없이도 '셀카' 자세나 '유령인 척' 등 다양한 포즈를 취하고 시간이 지남에 따라 일련의 동작을 생성할 수 있습니다. 이는 로봇의 제로 샷 학습 능력을 보여줍니다. 또한 구두 피드백을 통해 포즈를 조정할 수 있으므로 미세 조정이 필요하지 않습니다.

https://youtu.be/SAc-O5FDJ4k

?si=fycV94xT6RVmHbJF

play the metal

"메탈 음악을 연주하는 동작. 이 동작은 언어적 피드백을 통해 GPT4에 의해 생성됩니다."

https://youtu.be/xKlTKDyis6Q

selfie

휴대폰으로 셀카 찍기' 모션

https://youtu.be/qNldkPX-y0w

shy

극장에서 팝콘을 먹으면서 영화를 감상하던 중,

옆 사람의 팝콘을 먹고 있다는 사실을 깨달아 당황하는 스토리를 이해

https://tnoinkwms.github.io/ALTER-LLM/

Research Paper Results

- dc official App

[익명(rty1x21s8nhq)]

[멜루(gustn1914)]

그러니까 gpt4가 알아듣는 이해하는 뇌역할을 하고있고 그 신호를 alter3에 전달해서 움직인다는 말이지?

[익명(sky0204)]

ㅇㅇ명시적인 프로그래밍 없이도 gpt4로 동작이 생성되고 적용 가능하다는 뜻 같음 - dc App

[익명(122.46)]

이제 휴머노이드 움직임 문제는 끝난듯. 배터리.. 배터리만 해결하면 된다.. 제발..

[익명(211.248)]

저 움직임을 보고 그런말이 나오냐....

[ㅁㄴㅇㄹ(tantandero)]

이니 시팔 팝콘 옆사람꺼인거 깨닫고 또 쳐먹네 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ

[멜루(gustn1914)]

(마지막으로 크게 한웅큼 쥐며)

[익명(59.22)]

제대로 배웠노 ~~~~~~~

[익명(119.194)]

ㄴㄴㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ

[엪뽀큐ㅗ(litsae)]

ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ - dc App

[부패하는유전자!!!(sansss2015)]

얼~

[TheOneFreeman(wmf776759)]

벌써 이 정도면 몇 년 뒤면 볼만할듯

[익명(203.171)]

귀엽냐 ㅋㅋ