스테이블디퓨전 3.5 설치

스테이블디퓨전 XD 버전을 작년에 설치하고 좀 가지고 놀다가, 

최근의 미드저니 결과물에 비해 너무 아웃풋이 안 좋길래 SD 3.5 를 설치해보다. 

 

역시나 내용량 다운로드가 필요했고 

 

 

 

현재 설치된 경로는 

D:\ComfyUI_windows_portable

 

메모해둬야 하는 경로는 

1) 모델 : D:\ComfyUI_windows_portable\ComfyUI\models\checkpoints

2) 언어토큰 : D:\ComfyUI_windows_portable\ComfyUI\models\clip

 

설치 후에 

'NoneType' object has no attribute 'tokenize' error #5388 

이걸 만나서 꽤 한참 고생을 했는데, 답은 깃허브에서 찾았다. 

 

https://github.com/comfyanonymous/ComfyUI/issues/5388

 

 

요약하면 Prompt 입력이 TripleCLIPLoader에서 들어가게 하라는 것이고 

아래와 같은 화면을 제시했다. 

 

 

내 경우는 세 개를 모두 clip_I.safetensors 로 지정된 상황에서는 정상작동 되었으나 

화면처럼 i, g, fp16을 모두 지정했을 때에는 오류가 발생했다. 

(i, g, i 로 지정했을때는 되고... 정확한 이유를 알 수가 없다) 

 

실행했을 때 초기 로드에는 약 1분 가까이 디스크와 메모리를 가득채웠고 (모델을 디스크에서 메모리로 올리는 작업일 듯) 

그런 다음에야 GPU 작업이 시작된다. 훨씬 무거워진 것이 느껴진다. 

 

트리플 클립로드에 같은 모델을 넣는다는게 넌센스라, 듀얼클립로더를 사용해봤는데 작동은 잘 했다. 결과물이 별로라서 그렇지. 

 

셋팅 문제인지, SDXL에서와 똑같은 키워드를 넣었는데 이런 결과물이 나왔다 -_- 

 

긍정 godzilla destoring the city, fire breath, dynamic lighting, historic, photorealistic, ultra detailed, RAW, stunning visuals, cinematic, ultra detailed, scary art, dark, suspenseful, grim, highly detailed, 

부정  ac_neg2, zip2d_neg,  ziprealism_neg,  closed eyes, watermark, username, signature, text, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, 

Seed: 3713904611

CFG : 7

출처: https://sampo.tistory.com/208 [디지털로 혼자 놀기:티스토리]

 

 

 

클립로더 세팅하는 법. 일단 되게는 만들어놨으니 신규 엔진들을 다운받아서 좀 더 넣어봐야겠다. 

 

 

 

 

 

sd35MediumGoogleFLANFP8 이라는 safetensor를 적용하고, 

TripleClipLoader에서 clip 순서를 g, i, fp16 순서로 적용했더니 이번에는 정상적으로 작동했다. 

다만 이미지의 퀄리티는 이전보다는 낫지만, SDXL 에서 Juggernaut을 적용했을 때보다 훨씬 못하다.