[📪정보] Nvidia, 월드모델 cosmos-transfer1 공개

[익명(121.178)]

얼마 전에 공개했던

텍스트-비디오 월드모델인 Cosmos의 후속 작품

아래에 간단히 설명해봄

1. 센서에서 측정된 다양한 것들을 input modality로 사용할 수 있다.

2. Omniverse, Genesis와 같은 물리 시뮬레이터들에서 얻은 시뮬레이션을 입력으로 사용할 수 있다.

3. 물리 시뮬레이터에서 얻은 시뮬레이션을 Cosmos-transfer1을 통해 사실적인 동영상으로 변환하는 과정

4. 다양한 input modality들을 현실적인 동영상으로 변환하는 과정

5. 흐릿한 영상, HD Map 등의 input도 수용 할 수 있다.

6. HD Map + Lidar와 같이 여러 input을 함께 사용해 동영상 output을 얻어낼 수도 있다.

7. 하나의 HD Map (좌상단)으로 부터 현실적인 주행 영상을 여러 상황 (밤, 안개낀 날, 낮, 눈온 날 등)에 맞게 합성할 수 있다.

8. 물리 시뮬레이터의 시뮬레이션을 기반으로도 텍스트와 함께 입력하여 다양한 상황을 담은 합성 영상 데이터를

생산할 수 있다.

실제 물리 세계에서 얻은 센서 데이터들과

물리 법칙을 잘 구현한 시뮬레이션을 input modality로 사용하기 때문에

합성되는 영상들도 물리 법칙을 훨씬 더 잘 따를 것이므로 로보틱스 등에 매우 유용할 것으로 보임

-모델과 사후 학습을 위한 스크립트 오픈 소스

-상업적 사용 가능 라이센스

월드모델의 발전 굿

https://github.com/nvidia-cosmos/cosmos-transfer1

[익명(bluewarp)]

[익명(symphony5198)]

빨리 휴머노이드나 폭풍 생산해서 공급하라고

[익명(210.121)]

agi는 왔다

[도로시냥(slzpdnjsxnf)]

[익명(121.157)]

회사에서 cosmos 연구해보는데 ㅆㅂ 이거 물리법칙은 개뿔 다 뒤틀린 오브젝트 존나 뽑아냄

[ㅇㅇ 1(175.214)]

ㅇㄱㄹㅇ 위에서 엔비디아 거니까 건드려보라고 해서 붙잡고 있는데 뭐하자는 물건인지 모르겠더라

[멘토스(gblzvhbddpj2)]

[AI네이티브(thor2018)]

[ㅇㅇ 2(14.53)]

얀 르쿤, '엔비디아의 월드모델은 진정한 월드모델아냐... JEPA가 진정한 월드모델' 발언 [연예]

[디시콘발사대(fcbjsjmu1t9f)]

근데 genesis는 대체 어떻게 된거임..