[일반] stable diffusion에서 VAE가 뭐하는 건가요?

[익명(210.99)]

검색해보니까 이미지를 더욱 선명하고 품질을 향상시키는데 VAE가 사용된다고 나오는데

VAE로 어떻게 그렇게 할 수 있죠? 

제가 알기로는 stable diffusion이 diffusion unet으로 latent 만들고 그걸 디코더에 넣어서 이미지가 나오는걸로 알고있는데 

여기에 VAE를 적용하면 어디에 어떻게 적용되는 건가요?

[익명(114.206)]

니가 아는 과정을 vae인코더로 차원축소 후에 진행하고 디코더로 복원한다는거 그럼 같은 연산량으로 고화질 얻을 수 있지 병신아 논문을 읽어

[익명(210.99)]

궁금증 해결 했습니다. 찾아보니, stable diffusion에서 VAE를 쓴다는게, 기존에 배포된 디코더 대신 파인튜닝된 디코더 쓴다는 뜻이었네요