셀균
문정동 개발자의 밤
셀균
전체 방문자
오늘
어제
  • 분류 전체보기 (10)
    • Game (0)
    • Stable Diffusion (10)
    • Unity (0)

블로그 메뉴

  • 홈
  • 태그
  • 방명록

공지사항

인기 글

태그

  • 스테이블 디퓨전 키워드
  • AI 태그 모음
  • 로라 적용법
  • Lora 적용
  • AI 프롬프트 키워드
  • Stable Diffusion Tag
  • 스테이블 디퓨전
  • Stable Diffusion txt2img
  • VAE 적용
  • stable diffusion 사용법
  • AI
  • Stable Diffusion 확장기능
  • AI 키워드 모음
  • Stable Diffusion VAE
  • Stable Diffusion 강좌
  • AI 태그
  • Stable Diffusion Embedding
  • 포즈 이미지 생성
  • 임베딩 적용
  • Stable Diffusion 태그
  • 스테이블 디퓨전 태그
  • AI 그림
  • Stable Diffusion 기초
  • Stable Diffusion 배우기
  • 스테이블 디퓨전 강좌
  • Stable Diffusion 하는 법
  • Stable Diffusion 임베딩
  • Stable Diffusion
  • Stable Diffusion 총정리
  • Stable Diffusion img2img

최근 댓글

최근 글

티스토리

hELLO · Designed By 정상우.
셀균

문정동 개발자의 밤

Stable Diffusion 로라(Lora) 설치 및 적용하는 법 - [SD - 5]
Stable Diffusion

Stable Diffusion 로라(Lora) 설치 및 적용하는 법 - [SD - 5]

2023. 9. 15. 19:46

Stable Diffusion의 이미지로 이미지를 생성하는 법까지 다뤄보았으니 이제는 Lora를 적용해 보도록 하겠습니다.

이미지로 이미지를 생성하는 법은 아래 링크를 참고해주세요.

 

2023.09.14 - [Stable Diffusion] - Stable Diffusion 기초 사용법 총정리 : img2img - [SD - 4]

 

Stable Diffusion 기초 사용법 총정리 : img2img - [SD - 4]

txt2img 사용법을 알았으니 이제는 그다음 단계인 이미지로 이미지 생성하는 방법을 알아보겠습니다. 텍스트로 이미지를 생성하는 방법이 궁금하신 분들은 아래 링크로! 2023.09.13 - [Stable Diffusion] -

selgyun.tistory.com

 

로라(Lora)는 기존 학습 모델(체크포인트)에 새로운 이미지를 학습시킨 모델 파일입니다. 기존 학습 모델에 본인이 적용하고 싶은 스타일을 추가로 학습시킨 파일로, 프롬프트에 적용시켜 좀 더 원하는 이미지를 생성할 수 있게 해 줍니다. Lora는 본인이 직접 만들 수도 있고, 사이트에서 다운로드하여 이용할 수도 있어요. 만약 게임을 제작하고 있다면, 주인공 캐릭터의 로라를 만들어 여러 주인공 이미지들을 생성할 수 있습니다. 이번에는 로라를 다운로드하여서 설명하겠습니다.

 

기존에 다운로드하였던 체크포인트를 사용할 거예요. 체크 포인트는 취향에 맞춰서 골라주시면 됩니다. 다만 로라는 이미 있던 체크포인트에 추가로 학습시킨 모델이기 때문에, 다운로드하는 로라와 분위기가 맞는 체크포인트를 활용해 주시는 게 더 좋겠죠! 이번에 사용하는 체크포인트는 아래 링크를 참고해 주세요!

 

2023.09.12 - [Stable Diffusion] - Stable Diffusion 체크 포인트(Checkpoint) 학습 모델 추가하기 - [SD-2]

 

Stable Diffusion 체크 포인트(Checkpoint) 학습 모델 추가하기 - [SD-2]

Stable Diffusion을 설치 완료했으니 이젠 프로그램을 잘 써먹어야겠죠! (설치를 못 하신 분들은 아래 링크를 참고해 주세요.) 2023.09.11 - [Stable Diffusion] - Stable Diffusion 윈도우 설치하는 방법 - [SD-1] Stabl

selgyun.tistory.com

 

아래 사이트에서 필터를 걸어줄 거예요.

https://civitai.com/models

 

Civitai | Share your models

 

civitai.com

로라를 찾아주세요!
로라를 찾아주세요!

마음에 드는 로라를 찾아주세요! 블러 처리된 샘플들은 연령 제한이 있는 것이니 주의해 주세요. 저는 아래 로라를 다운로드해 보겠습니다.

https://civitai.com/models/25995?modelVersionId=32988 

 

blindbox/大概是盲盒 - blindbox_v1_mix | Stable Diffusion LoRA | Civitai

BlindBox Artstyle 更新了V3版本,调整了眼睛,俗话说眼睛是心灵的窗口。但是目前还是实验性质的,从稳定性上还是推荐v1_mix版本。 如果你喜欢我的作品,可以点个Like,或者请我 喝杯咖啡 。 爱来

civitai.com

샘플 이미지 상세 화면
샘플 이미지 상세 화면

위 샘플 이미지 상세 화면을 보시면 어떤 체크포인트를 사용해서 이미지를 생성했는지 알려주고 있어요. 샘플과 비슷한 이미지를 얻기 위해선 같은 체크포인트를 사용하시는 게 가장 좋아요! 하지만 저는 로라만 이용해 보겠습니다.

 

다운로드한 파일을 stable-diffusion-webui/models/Lora 경로에 넣어주세요!

경로로 이동!
경로로 이동!

 

이제 Stable Diffusion을 실행해 주세요. 만약 이미 실행 중이었다면 로라 탭에서 새로고침을 누르시면 됩니다.

로라 탭에서 새로고침!!
로라 탭에서 새로고침!!

이제 이미지를 생성해 볼 차례입니다. 프롬프트는 예전에 체크포인트를 생성해 봤던 그대로 사용해 볼 거예요. 일단 로라 없이 생성된 결과를 보여드리겠습니다.

긍정 solo, 1girl, portrait, looking at viewer, masterpiece, best quality, 4k, 8k
부정 (worst quality, low quality:1.4), (bad-image-v2-39000:0.75), (censored, bar censor), cropped, mature, 
((nsfw)), (bad_prompt_version2:0.85)

생성된 이미지
생성된 이미지

 

이제 로라를 적용해 보겠습니다. 긍정 프롬프트를 누르시고, 받은 로라를 로라 탭에서 눌러주세요.

누르면 자동으로 들어가요.
누르면 자동으로 들어가요.

로라의 가중치는 0.1 ~ 1.0까지 반영할 수 있어요. 지금은 1로 들어가 있는데요. 지금은 로라를 100% 적용한다는 의미입니다. 그럼 0부터 각 단계별로의 이미지 변화를 보여 드리겠습니다.

 

가중치 0 ~ 1 (step 0.1)
가중치 0 ~ 1 (step 0.1)

<lora:blindbox_v1_mix:0.1> <lora:blindbox_v1_mix:0.5> <lora:blindbox_v1_mix:1>

가중치 별 이미지0.1가중치 별 이미지0.5가중치 별 이미지1
가중치 별 이미지(0.1, 0.5, 1.0)

로라가 이미지에 어떤 영향을 주는지 알아보았습니다. 이젠 취향에 맞는 가중치를 선택해서 이미지를 생성해 보세요! 각자 다른 체크포인트에 로라를 적용시켜도 색다른 느낌을 낼 수 있습니다. 다음엔 이미지의 퀄리티 보정을 해주는 VAE에 대해서 적어 보겠습니다!

 

다음글 링크입니다!

2023.09.16 - [Stable Diffusion] - Stable Diffusion VAE 적용하는 법 - [SD - 6]

 

Stable Diffusion VAE 적용하는 법 - [SD - 6]

Lora까지 적용해 보았으니 이번에는 VAE를 적용해 보겠습니다. Lora 적용하는 법은 아래로! 2023.09.15 - [Stable Diffusion] - Stable Diffusion 로라(Lora) 설치 및 적용하는 법 - [SD - 5] Stable Diffusion 로라(Lora) 설치

selgyun.tistory.com

 

'Stable Diffusion' 카테고리의 다른 글

Stable Diffusion 임베딩 적용하는 법 - [SD - 7]  (1) 2023.09.17
Stable Diffusion VAE 적용하는 법 - [SD - 6]  (6) 2023.09.16
Stable Diffusion 기초 사용법 총정리 : img2img - [SD - 4]  (2) 2023.09.14
Stable Diffusion 기초 사용법 총정리 : txt2img - [SD - 3]  (1) 2023.09.13
Stable Diffusion 체크 포인트(Checkpoint) 학습 모델 추가하기 - [SD-2]  (3) 2023.09.12
    'Stable Diffusion' 카테고리의 다른 글
    • Stable Diffusion 임베딩 적용하는 법 - [SD - 7]
    • Stable Diffusion VAE 적용하는 법 - [SD - 6]
    • Stable Diffusion 기초 사용법 총정리 : img2img - [SD - 4]
    • Stable Diffusion 기초 사용법 총정리 : txt2img - [SD - 3]
    셀균
    셀균
    문정동에 거주하는 게임 클라이언트 개발자입니다~

    티스토리툴바