VAE 설치하기-스테이블 디퓨전

VAE 파일이란 만들어지는 이미지를 좀 더 선명하게 채도를 높여 시안성이 높게 만들어주는 역할을 합니다.

처음에 스테이블 디퓨전만 깔고 혹은 모델만설치하고 이미지를 생성했을 때 이미지가 흐물텅 하게 나옵니다.

왜 이렇게나오나 하고 한참을 원인을 찾으실 텐데요. 해결방법은 VAE파일이 필요하단걸 알게 되실 겁니다.

그럼 대표적인 VAE 파일을 설치할수있는 방법과 사용방법을 알려드리도록 하겠습니다.

1.kl-f8-anime2와 vae-ft-mse-840000-ema-pruned 다운로드하기

대부분아래 두 가지의 VAE를 사용합니다.

 

1. 대표적은 애니그림체의 VAE입니다. 

해당 VAE는 https://huggingface.co/hakurei/waifu-diffusion-v1-4/tree/main/vae 여기 허깅페이스 들어가시면 

LFS라는 아이콘을 클릭하시면 다운로드하실 수 있습니다. 일단 다운로드합니다.

 

2. 대표적인 실사 그림체의 VAE입니다.

해당 VAE는 https://huggingface.co/hakurei/waifu-diffusion-v1-4/tree/main/vae 여기 허깅페이스에 들어가시면

위의  애니그림체와 마찬가지로 LFS라는 아이콘을 클릭하시면 다운로드하실 수 있습니다. 일단 다운로드합니다.

그럼 두 가지의 VAE파일을 다운로드하였습니다.

2. 설치하기

설치라고 이야기드리긴 했지만 사실 설치라기 보단 해달폴더에 넣으면 됩니다. 해당내용은 PC에 스테이블 디퓨전을 깔았을 때를 이야기하는 것입니다. 구글코렙이용 시 방법이 다르니 이 부분은 나중에 다시 이야기드리도록 하겠습니다.

 

방법은 간단합니다. 다운로드한 파일 두개를 복사혹은 이동합니다.  넣을 경로는 스테이블 디퓨전이 깔려있는 폴더로 들어가서 \stable-diffusion-webui\models\VAE 경로를 찾습니다. 그리고 해당경로에 복사 붙여넣기로 다운받은 파일을 넣습니다. 

자 그럼 사실상 완료입니다.

 

3. 적용해 보기

스테이블 디퓨전을 실행시킵니다. 그럼 어디에 깔렸는지 어떻게 적용해야 할지 잘 모르실 텐데요. 유아이에서 쉽게 적용할 수 있는 방법을 알려드리겠습니다. 아래이미지의 빨간색박스순선대로 찾아들어가셔서 마지막 3번에 텍스트를 입력하십시오.

1번 settings -> 2번 tset interface  그리고 3번에서는  sd_model_checkpoint 다음에 콤마 하고 sd_vae라고 입력합니다.

 

스테이블 디퓨전 화면

 

그리고 dnldp 노란색 긴 박스 apply settings를 클릭합니다. 자 그럼 다 왔습니다.

 

4. 실행해 보기

이제 다시 실행된 스테이블 디퓨전에서 상담메뉴에 vae파일을 확인하실 수 있으실 겁니다.

 

vae 적용 ui

위와 같은 이미지를 확인사실수 있는데요.이후부터는 실행하실때 항상 위와같은 메뉴가 같이 뜨시는 걸 확인하실 수 있습니다. 여기서 다운로드한 두 가지 vae를 선택하실 수 있습니다. 애니그림체의 VAE, 실사 그림체의 VAE를 각 체크포인트에 따라 적용해 보시면 좀 더 마음에 드는 결과물을 얻으실 수 있으리라 생각됩니다. 

 

여기까지입니다. 감사합니다.