[일반] 근데 죄다 이미지 분류만 다루고

[딥삣삐(118.235)]

왜 미래 예측 이미지 생성은 잘 안하는거같지... 학술적으로 말이야. 예를들어 시뮬레이션 분야쪽에선 예측 이미지 생성 모델이 꽤 유용할거같은데, 실제로 보면 죄다 yolo나 cnn, transformer 같은걸로 이미지 분류만 하더라고. 그래서 논문 찾을때도 좀 힘듬...  단순히 이미지 생성이 아니라, 미래를 예측해서 이미지를 생성하는 것을 다룬 논문이 비교적 분류모델 혹은 단순 이미지 생성보단 적은거같음.

[익명(rechido)]

니설명으론 next frame generation 문제처럼 들리는데, 그러면 비디오 생성 쪽으로 분류해야 하고, 생각보다 어려운 문제임 - dc App

[익명(rechido)]

일단 비디오 자체가 리소스를 많이 먹어서 경량화 연구가 많은걸로 알고 - dc App

[익명(rechido)]

거기다 현실적인 다음장면을 제대로 예측하려면 이 세계의 물리법칙을 이해해야 하니 구글에서 얘기하는 월드모델로 구분됨 - dc App

[익명(rechido)]

굉장히 도전적이지만 흥미로운 주제 같으니 화이팅 - dc App

[익명(rechido)]

physical ai랑도 엮일거 같은데 physics informed하게 비디오 생성하는 연구도 있던것 같음 - dc App

[글쓴 딥삣삐(118.235)]

일단 비디오 자체가 리소스를 많이 먹어서 경량화 연구가 많은걸로 알고 <- 이거 진짜 맞더라. 내가 지금 기관에서 학위따는중이라 그래도 나름 좋은 컴퓨터 쓰고있는데 vram이 gpu 8개 다 합쳐서 192gb거든? 근데 최대 5프레임까지 미래를 예측하는 모델을 여러 기법들, e3dlstm이나 cgan 등등을 사용해서 224x224로 학습시키고 있는데 vram이 간당간당함... 좀 억울한건 여기 기관에서 ai 다뤄본 사람들 대부분이 yolo, cnn 등으로 분류만 하신분들이라서 내꺼가 왜 이렇게 메모리를 많이 먹는지 이해를 못하시더라... 내가 논문을 퍼다 먹여드려도 이해를 못하심

[딥삣삐 1(106.102)]

돈되는걸해야지 미래예측하면 누가 돈 줌? 틀리먄 보상해줌? 니얼굴사진만으로 변비가있는지 수준까지 객체처리하는 사업은 돈이되는 분야다

[글쓴 딥삣삐(118.235)]

난 돈줘서 하는중.... 농생명분야쪽은 돈 주더라. 그거 받고 내가 지금 만들고있는거야

[글쓴 딥삣삐(118.235)]

그리고 난 이미 객체 탐지,분류 쪽은 많이 해봐서 새로운거 도전하는거기도해. 왜냐면 탐지,분류쪽은 이미 딸깍으로 끝낼 수 있을정도로 발전 많이 되어있어서, 내가 거기서 할게 그렇게 많지가 않더라. 근데 예측 이미지 생성 분야는 모델을 직접 만들어야되더라고. 레이어 설계, 각좀 기법들 알맞게 사용하고 연결하기 등등 말이야... 이렇게 하다보니깐 코드가 수천줄이 되더라. 분명 예전에 탐지,분류 할때는 길어봐야 몇백줄이었는데