체신 기술이다보니 아무래도 빠르게 신기술이 적용되는 comfyui를 사용합니다.
그리고 본문은 SD1.5모델을 기준으로 작성했습니다.
워크플로우(아래 이미지를 클릭한 후에 다운받아서 쓰시면 됩니다)
1. comfyui 설치
https://github.com/comfyanonymous/ComfyUI
위 주소로 들어간 후 쭉 스크롤을 내리면 다운로드 링크가 있습니다.
이걸 다운받고 적당한 위치에 풀어주면 끝
실행은 run_nvidia_gpu.bat로 하면 됩니다.
comfyui가 C드라이브의 ComfyUI_windows_portable 폴더에 설치되어있다고 가정했을 때,
사용할 모델은
C:\ComfyUI_windows_portable\ComfyUI\models\checkpoints
에 넣어주면 됩니다.
2. LCM로라 준비
https://huggingface.co/latent-consistency/lcm-lora-sdv1-5/tree/main
위 주소에서 다운받을 수 있습니다.
저는 SD1.5용은 lcm-lora-sdv1-5.safetensors라고 이름을 바꿔서 저장했습니다.
다운받은 LCM 로라들은
C:\ComfyUI_windows_portable\ComfyUI\models\loras
에 넣어줍니다.
생성에 사용할 다른 로라들이 있다면 이 로라들도 같은 폴더에 넣어줍니다.
3. ComfyUI-Manager 설치
comfyui가 C드라이브의 ComfyUI_windows_portable 폴더에 설치되어있다고 가정했을 때,
일단 comfyui를 끄고 C:\ComfyUI_windows_portable\ComfyUI\custom_nodes로 이동합니다.
그리고 주소 표시줄에 cmd라고 입력해서 cmd 창을 띄우고
cmd 창에 git clone https://github.com/ltdrdata/ComfyUI-Manager.git를 복붙 후 엔터를 입력합니다.
다시 comfyui를 켜면 설치가 완료됩니다.
4. 워크플로우 적용 후 노드 추가 설치
comfyui를 실행하면 열리는 화면에 첨부된 워크플로우를 드래그 앤 드롭으로 넣으면 끝입니다.
그런데 에러 메시지가 뜨고 빨갛게 보이는 노드들이 많은 상태일 것입니다.
이를 해결하기 위해 매니저를 열고
Install Missing Custom Nodes에 들어가서 필요하다고 나오는 커스텀 노드들을 설치해주면 됩니다.
그리고 comfyui를 껏다가 다시 켜줍니다.
5. 생성
초록색 노드에 긍정 프롬프트를, 붉은색 노드에 부정 프롬프트를 넣고
우측의 Queue prompt를 클릭해주거나 Ctrl+엔터키를 눌러서 생성해주면 끝입니다.
프롬프트를 바꿀 때에는 위에서 언급한 초록/빨간색 노드에 원하는 프롬프트를 넣으면 됩니다.
로라를 추가 적용할 때에는 아래의 노드에서 원하는 로라를 적용하면 됩니다.
고화질로 확대하지 않고 빠르게 빠르게 이미지를 생성하려면 저 두 부분을 선택한 후 Ctrl+M을 눌러서 작동을 안하게 만들어도 되고요.
아니면 그냥 del키로 지워버리셔도 됩니다.
3080 10g을 쓰는 중인데
512*768 생성에 약 1.2초
hires fix 2배의 경우 약 5초가 걸렸습니다.
LCM로라 없이 생성하면
512*768 생성에 약 2.5초(20스텝)
hires fix 2배의 경우 약 10초(20+10스텝)가 걸렸습니다.
딱 2배 빨라짐
대신 퀄리티는 조금 떨어진다는 느낌이 듭니다.
근데 반대로 보면 LCM을 적용하지 않았을 때보다 덜 입체적으로 보이는 것 같기도 해서 더 그림 같은 느낌을 준다는 생각도 듭니다.
저는 flat한 느낌을 선호해서 오히려 좋더라고요.
|
|
|
| 512*768: 1.5초 | 1024*1536: 5초 |
