Stable Diffusion을 어느 정도 사용해 보면 느껴졌을 것입니다.
생각하는 이미지가 있는데 생각했던 것보다 고정이 간단하게 되지 않는 것입니다.
이 때 사용할 새로운 것을 찾습니다.
모델을 변경하거나 다른 AI 이미지 생성 도구를 사용해 볼 수도 있습니다.
SD는 Lora를 이용하면 고정적인 이미지를 만들기 쉬워집니다.
* 출처: https://rentry.org/2chAI_LoRA_Dreambooth_guide_english#what-is-lora
1. LoRa 개념
위의 소스에서 LoRa를 기반으로 설명합니다.
LoRA(Low-rank Adaptation for Fast Text-to-Image Diffusion Fine-tuning)는 Stable Diffusion의 *.ckpt, *.safetensor인 모델과 같은 방식입니다.
- DreamBooth 방법보다 두 배 빠릅니다.
- 작은 출력 파일 사이즈(ckpt 4~6기가, safetensor가 1~2기가 정도에 비하면 많지 않으면 350메가, 보통 150메가 이하로 적은 것은 10메가도 안 되네요.)
- 일반 모델에서 잘 조정되지 않은 부분은 롤러를 통해 더욱 안정적으로 조정할 수 있습니다.
최소 요구 사항: NVidia 비디오 카드, 6GB 이상의 VRAM.
2. LoRa 설치
마찬가지로 LoRa는 여러 사이트에서 다운로드할 수 있습니다.
해깅 얼굴이나 유명한 ci***.com이 있지만 성인 채널이므로 자세한 언급은하지 않습니다.
구글을 하면 바로 나옵니다.
나는 허깅 페이스에있는 LoRa에서 예를 들어. https://huggingface.co/로 들어가서 검색창에 LoRa를 입력하여 검색하면 여러 개의 LoRa가 표시됩니다.
그 중에서 하나를 선택합시다.
이 LoRA는 한복에 특화된 Lora입니다.
적용하면 한복을 입고 나온다고 하므로 한번 설치해 보겠습니다.
(파일 및 버전) 탭을 클릭하여 입력하면 다운로드 가능한 파일이 표시됩니다.
그 안에 확장자. safetensors라는 파일을 탭하여 다운로드합니다.
다운로드한 파일은 Stable-Diffusion-webui > models > Lora 폴더에 넣어주세요.
3. SD에서 LoRa 실행
적용 방법은 Generate 아래에 달빛의 화찰을 클릭하면 Lora 탭이 있습니다.
그래서 지금 다운로드 한 hanbok 롤러를 누르십시오.그런 다음 자동으로
이곳에서
그리고 곧 : 1은 무게이지만 더 효과를 높이기 위해서는 1.2, 1.5 정도 주면 됩니다.
롤러가 올바르게 적용되었는지 확인하는 방법은 가중치를 2.0 이상으로 설정하면 화면이 손상됩니다.
제대로 롤러가 적용되지 않으면 아무런 변화가 없습니다.
|
같은 seed에서 한복 Lora 적용시킨 화면입니다.
원래 복장이 더 예쁘게 보이는 것은 유감이네요.
이전 기사:
2023.03.08 – ((TIP) Stable Diffusion) – (SD. TIP) Stable Diffusion prompt 기본 조작