Stable Diffusion VAE 적용하는 법 - [SD - 6]

Lora까지 적용해 보았으니 이번에는 VAE를 적용해 보겠습니다. Lora 적용하는 법은 아래로!

2023.09.15 - [Stable Diffusion] - Stable Diffusion 로라(Lora) 설치 및 적용하는 법 - [SD - 5]

Stable Diffusion 로라(Lora) 설치 및 적용하는 법 - [SD - 5]

 

VAE는 이미지를 보정해주는 역할을 합니다. 만약 생성된 이미지가 흐리거나 퀄리티를 높이고 싶다면 VAE를 적용하면 됩니다. VAE도 스타일에 따라서 선택을 해주셔야 하는데요. 크게 2D 스타일(애니메이션 풍)과 실사 이미지 중에서 선택을 해주시면 됩니다.

 

지금까지 이용한 그림이 2D 그림이기 때문에 여기에 적용할 VAE를 다운로드 해보겠습니다. 아래 링크에서 파일을 받아주세요.

https://civitai.com/models/118561?modelVersionId=131654 

Anything / Kl-f8-anime2 / Vae-ft-mse-840000-ema-pruned / Blessed / ClearVAE (fp16/cleaned) - kl-f8-anime2 | Stable Diffusion VAE

다운로드 버튼 클릭!

파일 경로 : stable-diffusion-webui/models/VAE

 

받은 파일을 설치경로 /stable-diffusion-webui/models/VAE 에 넣어줍니다. 그러면 Stable DIffusion 체크포인트 옆에서 선택할 수 있는데요. 처음 스테이블 디퓨전을 실행하시는 분들은 VAE 선택하는 곳이 없을 수도 있어요!

VAE 선택하는 곳

설정 탭으로 이동합니다.

설정 -> 인터페이스 -> 빠른 설정 리스트

만약 선택하는 곳이 없다면 설정 -> 인터페이스 -> 빠른 설정 리스트에 VAE를 추가해주세요. 그 후에 UI 새로고침을 하시면 VAE 탭이 나타납니다. 여기서 원하는 VAE를 선택해 주세요.

VAE 선택

 

각 VAE 마다 스타일이 다릅니다. 저희는 예전부터 써오던 체크포인트의 샘플 프롬프트로 이미지를 생성해서 차이를 보도록 하겠습니다.

 

긍정	solo, 1girl, portrait, looking at viewer, masterpiece, best quality, 4k, 8k
부정	(worst quality, low quality:1.4), (bad-image-v2-39000:0.75), (censored, bar censor), cropped, mature,  ((nsfw)), (bad_prompt_version2:0.85)

VAE: 없음

VAE: Kl-f8-anime2

VAE: color101

차례대로 VAE 없음, VAE kl-f8-anime2, VAE color101

이렇게 이미지에 VAE를 적용하면 선명도와 퀄리티 상승을 얻을 수 있습니다. 다음엔 임베딩을 적용하는 법에 대해서 적어보도록 하겠습니다.