[📪정보] Infinity ∞: 고해상도 이미지 합성을 위한 비트 단위 자기회귀

[한가운데(centerofworld)]

모델 확장

(요약있음)

고해상도 및 사실적인 이미지를 생성할 수 있는 Bitwise Visual AutoRegressive Modeling인 Infinity를 소개합니다.Infinity는 무한 어휘 토크나이저 및 분류기와 비트 단위 자체 수정 기능을 갖춘 비트 단위 토큰 예측 프레임워크에서 시각적 자동 회귀 모델을 재정의합니다. 이론적으로 토크나이저 어휘 크기를 무한대로 확장하고 동시에 변환기 크기를 확장함으로써 우리의 방법은 강력한 확장 기능을 크게 발휘합니다. Infinity는 SD3-Medium 및 SDXL과 같은 최상위 확산 모델을 능가하는 자동 회귀 텍스트-이미지 모델에 대한 새로운 기록을 세웠습니다. 특히 Infinity는 GenEval 벤치마크 점수를 0.62에서 0.73으로, ImageReward 벤치마크 점수를 0.87에서 0.96으로 향상시켜 SD3-Medium을 능가하며 66%의 승률을 달성했습니다. 추가 최적화 없이 Infinity는 0.8초 만에 고품질 1024x1024 이미지를 생성하여 SD3-Medium보다 2.6배 더 빠르고 가장 빠른 텍스트-이미지 모델로 자리매김합니다.

요약 : diffusion 모델에서 벗어나서 자기회귀 모델로 이미지 생성 모델을 만들어서 속도 빠르고 성능은 더 높은 모델을 만들었다.

https://github.com/FoundationVision/Infinity

GitHub - FoundationVision/Infinity: Infinity ∞ : Scaling Bitwise AutoRegressive Modeling for High-Resolution Image Synthesis

깃허브 링크

링크 타고 들어가면 데모(디스코드 서버) 있는데 들어가서 테스트 가능함

추가적으로 지금 모델보다 10배 큰 모델도 학습중이라고 함

[Borazine(player4081)]

[난모르것다(farewell1592)]

[점심밥(yield0917)]

[익명(bluewarp)]

재귀개선이 온다

[익명(perform4782)]

왔네

[익명(124.56)]

감나무 풍년

[해당 댓글은 삭제되었습니다.]

해당 댓글은 삭제되었습니다.

[익명(ancestor7224)]

[익명(scare2023)]

[ㅇㅇㅇㅇㅇ(lsh0320jpgpw)]

오이

[떼껄룩해적단(piracykitten)]

[익명(114.201)]

성능 개쓰레긴데?

[익명(125.177)]

그럼 죽어

[익명(121.165)]

난 잘쓰는중

[익명(121.178)]

기존에 next scale prediction으로 VAR 만들었던 팀이네. 꾸준히 잘 발전하고 있어서 좋다. 결국 이미지 생성도 자기회귀 모델이 트렌드가 되고 있는 것 같아 신기함 ㅋㅋ Grok 오로라도 자기회귀 이미지 생성 모델로 잘 나오고

[ㄷㄷ(dried7542)]

[익명(craft0927)]

일러레갤에서 ai검증기 개발한다고 후원해달라고 사기치다가 박제된 한가운데님! 안녕하세요?