기본 콘텐츠로 건너뛰기

Wildcard 를 이용한 프롬프트 관리 및 사용방법 - comfyui 에서 프롬프트관리 (2)

Wildcard 를 이용한 프롬프트 관리 및 사용방법은

Switch 노드를 이용하여 100여개의 프롬프트 관리하는 것과 차이가 있다.
가장 자주 또는 가장 마음에 드는 프롬프트 100여개 정도를 바로바로 사용하기 위해서는 Switch 노드를 이용하여 관리하는 것이 좋다고 생각한다.    그런데 프롬프트들에 따라서 Pony 모델에서 사용하는 것과 Flux에서 사용하는 것이 많이 다르기 때문에 보통 각 주요 Checkpoint model 별 용 100여개 씩 보관하여 사용하고 있다.    Pony 용, Flux 용 , QWEN 용 그리고 Wan2.2  Video 용 ......

이렇게 해도 프롬프트들이 1000개가 넘어가고 엄청 많아지면 Wildcard 노드를 이용하여 관리하고 사용한다. 이렇게 관리하여 사용하면 쉽게 Pony 용 프롬프트를 QWEN 모델에도 적용하여 이미지를 생성 할 수 있다.
QWEN 이미지


1. Wildcard 사용 노드들

    Wildcard 를 사용하기 위하여 주로 사용되는 custom_nodes 는 
  • comfyui-easy-use 
  • comfyui-impact-pack
인데 두 종류 모두 주로 사용되는 custom nodes 이기 때문에 comfyui 사용자 라면 모두 깔려 있을것으로 생각되며, 없으면 comfyui manager 를 통하여 설치하면 될 것이다.
두 종류 모두 사용하는 데  큰 차이는 없다.

2. Wildcard 를 사용을 위한 txt 파일 만들기

    wildcard 라는 말은 카드게임에서 유래하였는데 조커 처럼 어떤 카드로도 사용가능한 카드를 wildcard 라고 불렀다.
그래서 프롬프트를 어떤 방식으로 사용 할 것인가에 따라 txt 파일을 다르게 만들어야 한다.
txt 파일은 메모장을 이용하여 만들면 된다.    
  • 완성된 프롬프트 들을 한개의 txt 파일로 만드는 방법 :  이 txt 파일을 사용하면 임의로 wildcard 노드에서 txt 파일 내에 완성된 한개의 단락 프롬프트만 랜덤 추출한다.  따라서  한개의 완성된 프롬프트  문장 내에는 return(줄바꿈 표시) 가 없어야 한다. 만약 중간에 그런 표시가 있으면 잘려서 일부분만 추출되기 때문이다.  그냥 완성된 프롬프트를 랜덤하게 사용할 때 좋다.
  • 프롬프트의 내용을 좀 더 세분화 하여 각각 필요한 카테고리 별로 txt를 만드는 방법: 각각을 만들어 연결해 사용하면 적은 숫자의  프롬프트로  더 다양한 완성형 프롬프트를 만들 수 있다. 
    • 얼굴.txt
    • 국적.txt
    • 상의.txt
    • 하의.txt
    • 란제리.txt
    • 악세사리.txt
    • 머리 스타일.txt
    • 메이크 업.txt
    • 장소.txt
    • 몸매 스타일.txt
    • 아트 스타일.txt  등등 이런 식으로 만들어 사용한다.
  • 완성된 프롬프트 한개당 하나의 txt 파일로 만드는 방법 : 이 경우는 switch node 를 이용하여 다양한 프롬프트를 관리 사용하는 것 처럼, txt 파일 하나 당 완성된 한개의 프롬프트 이기 때문에 필요한 파일을 추출하여 사용할 수 있다.   개인적으로 내가 선호하는 방식이다.
  • txt 파일을 만들때 주의할 점은 wildcard node 에서 프롬프트를 추출 할 때는 return(줄바꿈) 표시에서 각각 한개의 단락으로 인식하여 txt 파일에서 한개의 단락만 랜덤 추출한다.  따라서 txt 파일 내의 각 단락 한개가 하나의 프롬프트 라도 생각하면 된다.  
    첫번째는 한개, 두번째는 두개, 세번째는 세개 의 프롬프트로 인식

    아름답다는 것은 보는것만으로도 즐겁다.

3. txt 파일의 위치

    이 txt 파일을 사용할 려면 해당 custom node 의 폴더 아래에 설치되어 있어야 한다.
  • comfyui-easy-use :  ..\ComfyUI\custom_nodes\comfyui-easy-use\wildcards
  • comfyui-impact-pack : ..\ComfyUI\custom_nodes\comfyui-impact-pack\wildcards 폴더에 있으면 된다. 하위 폴더를 더 만들어 구분하여 보관 사용하여도 된다.

4. Workflow 에서 사용방법

comfyui-easy-use
이 노드를 적용하여[ Select the Wildcard to add to the text ] 를 클릭하면 폴더에 보관된 txt 파일들을 드롭다운 list 로 보여준다.  그 중에서 선택하여 사용하면 된다.
위에서는 하위폴더 ysw 폴더의 081.txt 파일과 100.txt 파일이 선택된 것이다.

comfyui-impact-pack
이 노드도 [ Select the Wildcard to add to the text ] 를 클릭하면 폴더에 보관된 txt 파일들을 드롭다운 list 로 보여준다.  그 중에서 선택하여 사용하면 된다.
위에서는 하위폴더 promptbuilder 내에 pose_action.txt 와 a_lingeriesets.txt 파일을 선택한 것이다.
__폴더명1.txt__,__폴더명2.txt__,...  이런식으로 불러서 사용한다.  해당 입력란에 직접 이런식으로 입력해도 상관없으며, 추가적인 프롬프트를 덧 붙여 완성하여도 된다.

예 : masterpiece, best quality, __ysw/p190__, __whis-lingerie/accessories/body__,  The background is minimalistic with a white surface

이런식으로 wildcard를 사용하면 다양하고 쉽게 사용 할 수 있다.

Text Encode 에 연결하여 사용

중간에 show text 노드를 추가하여 연결 사용

위의 방법으로 연결하여 사용하면 된다.
중간에 Show Text 를 연결한 이유는 wildcard 로 txt 파일에서 text 를 추출하여 적용할 때 그 내용이 text encode 에는 나타나지 않기 때문에 중간에서 내용을 표시하여 알 수 있도록 하기 위함이다.

5. 결론

    개인적으로 선호하는 방식은 각각의 카테고리 별로 txt 파일을 만들어 묶어서 랜덤하게 사용하기 보다는 한개의 완성된 프롬프트를 한개의 txt 파일로 번호를 붙여 파일명을 작성하고 불러서 사용한다.
만약 완성된 프롬프트가 1000개 라면 txt 파일도 1000개를 만들어 사용한 다는 의미이다.
물론 한 폴더내에 파일이 너무 많으면, 하위폴더를 만들어 구분하여 관리 사용한다.  그리고  txt 파일의 내용은 파일탐색기에서 미리보기로도 쉽게 볼 수 있기 때문에 사용상 어려움은 없다.
각자의 좋은 방식으로 만들어 적용하면 될 것이다.

QWEN 으로 생성

10월의 어느날 ......
날씨 맑음......









댓글

이 블로그의 인기 게시물

Comfyui Wildcard 사용법 - Stable Diffusion , Flux 에서 쉽게 Random Prompt 로 이미지 만들기

 Comfyui Wildcard 사용법에 대하여 알아본다. Comfyui 로 Stable Diffusion 또는 Flux 로 이미지를 만들 때 Prompt 가 이미지를 결정하는데 매우 중요한 역할을 한다.  영어가 모국어가 아닌 이상 영어로 prompt 를 만드는 것이 참 어려운 일이다. 물론 처음에는 많은 다른 사람들이 사용한 prompt 들을 모방하여 수정하고 사용하는데 이런 일을 하나하나 해 보기가 시간이 많이 걸리고 어렵다.   그래서 Random 으로 prompt 가 만들어 져서 이미지가 생성되고 그 이미지 중에서 마음에 드는 이미지들을 골라 그 이미지의 Prompt들 만을 가지고 보완하고 개선하면 더 편리하고 좋지 않을까 생각이 든다.  그런 식의 Random Prompt 생성이 가능하게 해주는 것이 wildcard 사용이다. Joker는 card game에서 wildcard 이다. 1. Wildcard 의 의미      와일드 카드(Wildcard)란 카드 게임에서 유래되었다.  이런 카드 게임에서 모든 카드의 대용으로 쓸 수 있는 비장의 카드를 와일드 카드라고 한다. 포커나 훌라를 할 때 조커가 이런 역할을 하는데 ,  이 의미가 컴퓨터와 스포츠로 확장되어 사용되는 것이다. 컴퓨터 용어로 쓰일 때는 한 디렉터리 내에 여러 파일이 존재하거나, 파일 이름의 뒷부분을 정확히 알지 못하는 경우에도 사용할 수 있는 명령어를 말합니다. '*'을 넣으면 빠진 것에 어떤 문자열이 있든지 대신할 수 있고,  '?'는 임의의 한 문자에만  대응한다. Comfyui 에서 wildcard 사용은 "--문자열--"  이런 식으로 wildcard 사용 가능한 노드에 prompt 를 입력해 주면 그 노드는 "문자열" 에  해당되는 파일을 찾아 그 파일 내용 중에서 임의의 일부분을 prompt 로 대체해 준다. 2. Wildcard 사...

Pinokio 앱 설치 - 오픈 소스 AI 플랫폼

  Pinokio 는 오픈 소스 AI 플랫폼이다. 로컬에서 AI 애플리케이션을 쉽게 설치하고 실행할 수 있게 도와주는 오픈 소스 AI 플랫폼이다. 이 플랫폼은 사용자가 복잡한 설치 과정 없이 클릭 한 번으로 AI 도구들을 설치할 수 있도록 설계되어 있다. 이를 통해 기술적인 배경 지식이 없는 초보자나 비전문가들도 쉽게 AI 애플리케이션을 사용할 수 있다.   이미 설치되어 있는 애플리케이션이 있어도 별도의 독립된 공간에서 문제없이 사용할 수 있게 해준다.   우리가 stable diffusion 을 comfyui 에서 사용하기 위해서는 "Python", "git ....", "conda"  뭔지 모르지만 설치해야 하는데 pinokio 브라우저에서 원 클릭으로 알아서 설치를 해주기 때문에  컴맹인 일반인도 쉽게 설치하고 사용 할 수 있다. pinokio.computer 1. Pinokio 주요 기능 원클릭 설치 : 복잡한 환경 설정이나 명령어 입력 없이도 다양한 AI 모델을 한 번의 클릭으로 설치할 수 있다. 예를 들어, Comfyui 나 Flux 같은 AI 도구들을 손쉽게 설치할 수 있다. 다양한 AI 애플리케이션 제공 : Pinokio는 다양한 오픈 소스 AI 애플리케이션을 제공하는 허브 역할을 하며, Pinokio 브라우저 나 홈페이지에서 쉽게 찾아 설치할 수 있다. 브라우저 기반 인터페이스 : 모든 설치된 애플리케이션은 Pinokio 웹 브라우저에서 관리할 수 있어, 친숙한 인터페이스로 쉽게 사용이 가능하다. 독립적인 가상 컴퓨터 : Pinokio는 백엔드 작업을 자동으로 처리하여, 애플리케이션이 로컬에서 실행되는 동안 인터넷에 연결되어 있지 않아도 된다. 2. Pinokio 설치 구글에서 pinokio 를 검색하여 " pinokio.computer " 를 클릭 Download 클릭 다운로드 된 pinokio 압축 파일을  푼다. pinokio 설치파일을 실행하여 설치 설치과정은 복...

Flux Lora 제작 - Local 에서 Fluxgym 을 이용하여 자체 Lora 만들기

 Flux Lora 는 일관된 이미지를 만드는데 꼭 필요하다. 특히 일관된 얼굴의 이미지를 만드는데 있어서 다른 기능들 (ipadapter , controlnet, imgtoimg 등) 을 이용하는 것 보다 훨씬 일정한 캐릭터를 생성하게 해준다.  문제는 이런 Lora는 주로 CIVITAI , Tensor, Hugging face 등 사이트에서 다운 받아 사용하면 되지만  그것은 나만의 독특한 캐릭터가 아니고 나의 취향과 일치 되기가 어려워서 Lora를 구하기가 어렵다.  아니면 그런 사이트 내에서 자체 Lora를 제작하면 되는데 모두 비용이 필요하다. 여기 소개하는 Fluxgym AI 는 Local 컴퓨터에서 VRAM 12G 이상이면 자체 Lora를 만들 수 있게 해준다.   소요되는 시간도 생각보다 많이 걸리지 않는다.   이제 설치하고 자체 Lora를 한번 만들어 보자. Fluxgym 으로 만든 Lora 대표이미지 1. fluxgym 설치 pinokio 앱을 실행한다. ( pinokio 앱 설치 참조 ) 우측 상단 맨 처음 아이콘 (discover) 클릭 fluxgym 을 찾아서 클릭 fluxgym 이것을 클릭하면 된다. 여러가지 파일들을 설치하기 때문에 시간이 좀 소요될 것이다. 모든 설치가 끝나면 pinokio 브라우저 하단 부분에 fluxgym 메뉴가 추가된다. fluxgym 나중에 불필요하면 삭제(쓰레기통 아이콘 클릭) 하면 모두 unintall 된다. 2. fluxgym 실행 항상 pinokio 앱을 실행하여 pinokio 브라우저에서 fluxgym 을 클릭하면 된다. flux화면3-1 -. 1번항 : 여기에 입력한 대로 fluxgym/outputs/ 의 하위 폴더를 만들어 준다. -. 2번항 : Lora를 작동시키는 trigger word 를 입력한다. (예,  hart_style_a......) -. 3번항 : 자신의 가능한 VRAM 선택 : 나는 12 G 선택 ...