[📪정보] omnigen (차세대 이미지 생성모델) 출시됨

[한가운데(centerofworld)]

성능이 대단한건 아닌데

엄청나게 다양한 기능이 한 모델에 들어있음

기존 우리가 아는 컨트롤넷 기능은 다 들어가있고, llm이 탑재?되어서 텍스트 가지고 이미지 인식하고 수정도 가능함

이미지 1의 인물이 이미지 2의 인물을 이미지 3에서 껴안는 이미지를 만들어줘~ 같은게 된다는 뜻

(이미지 퀄은 보장못함)

https://huggingface.co/spaces/Shitao/OmniGen

OmniGen - a Hugging Face Space by Shitao

데모 주소는 여긴데

실행이 안되네 버근감

모델이랑 코드 공개돼있으니 써볼사람은 써보고

아마 16기가 그래픽카드면 돌아가고

코드나 설정 좀 만지만 8기가에서도 돌아갈듯?

잘 모르겠음. 내가 돌려본게 아니라서.

+ 수정

24기가 vram에서 정상구동되고

flux처럼 양자화 코드가 떠야 8기가 16기가 가능할듯

모델 구조는 잘 모르겠는데 파라미터 크기만 보면 8기가도 언젠간 될듯

사람들이 관심 안가지면 코드 안나오고 묻히는거고

[익명(218.157)]

좆구린데? 이 시점에 이 퀄리티 ai를 낸다고?

[한가운데(centerofworld)]

왜냐면 이미지 퀄리티랑 별개로 기능이 지리니까 ㅇㅇ 지금까지 이거 달성한 곳 한곳도 없음

[디시콘발사대(fcbjsjmu1t9f)]

진짜 멀티모달이라고 거창하게 광고하지 않고 LLM이 그냥 껴있는거면 이미지 해석 -> 해석된 태그+유저 요청 내용을 LLM으로 처리해 새 프롬프트 작성 -> 이미지 생성 모델에 요청 이런거 아님? 달리3처럼

[한가운데(centerofworld)]

멀티모달 맞음

[한가운데(centerofworld)]

그런 구조 아님

[디시콘발사대(fcbjsjmu1t9f)]

오 잘 되면 좋지. 그럼 봐야겠네

[익명(121.178)]

florence 같은 모델도 그렇고 OAI omni 모델들도 결국 이런 식으로 만들듯 왠만한 vision task 다 가능하게 하나의 단일 모델로

[한가운데(centerofworld)]

그래야지...

[익명(bluewarp)]

[익명(175.206)]

그림AI는 그림퀄이 중요하긴 하지만, 그동안 그림퀄은 계속 나아지는데 기능 개선이 아쉬웠던 거 생각하면 이런 발표도 좋은 것 같아

[한가운데(centerofworld)]

학습 코드도 제공되니 아마 곧 더 나은 모델이 나올지도?

[디시콘발사대(fcbjsjmu1t9f)]

[ㅇㅋ(ijh2005)]

그렇지 최소한 이정도는 되어야 1인 애니제작 AI가 되지 ㅇㅇ

[ㅇㅋ(ijh2005)]

그림의 퀄이 중요한게 아니라 얼마나 다방면의 디테일한 내용을 정확하게 통제할수 있냐는거임