기본 콘텐츠로 건너뛰기

Qwen-Image-Edit - comfyui 를 이용하여 image 를 편집한다. (1)

 Qwen-Image-Edit은 20B 규모의 Qwen-Image 모델을 기반으로 훈련된 이미지 편집 모델이다. 기존 Qwen-Image 모델이 가지고 있던 고유한 텍스트 렌더링 기능을 편집 작업으로 확장하여, 이미지 편집 분야에서 강력한 성능을 보여준다.

QWEN-Image-Edit 를 이용한 결과


기존의 사진이나 이미지들을 편집하는 것은 주로 photoshop 으로 많이 하는데 , 요즈음은  이미지 편집 AI 를 이용하여 간단한 것들을 쉽게 편집하고 있다.   
물론 아주 세밀한 작업은 photoshop 툴을 이용하는것이 좋겠지만 여기에 사용되는 다양한 이미지 편집은 Flux-Kontext 나 QWEN-Image-Edit 등을 이용하는 것이 훨씬 편하고 자연스럽다.

1. 사용 Model 다운로드 및 설치

  • Qwen_Image_Edit-Q5_K_S : 여기서는 이미지 생성 속도를 위하여 gguf 모델을 다운받아 사용하였다.  " https://huggingface.co/QuantStack/Qwen-Image-Edit-GGUF/tree/main " 에서 적합한 모델을 다운받아   Comfyui 의 models\unet 폴더에 설치한다.
  • qwen_2.5_vl_7b_fp8_scaled : CLIP 모델은 " https://huggingface.co/Comfy-Org/Qwen-Image_ComfyUI/blob/main/split_files/text_encoders/qwen_2.5_vl_7b_fp8_scaled.safetensors " 에서 다운로드 하거나 찾기 어려우면 구글에서 검색하여 찾아서 설치하자.
  • qwen_image_vae : VAE 모델 기존 QWEN 모델에서 사용한 것을 그대로 사용한다.
  • Qwen-Image-Edit-Lightning : 이 로라 파일은 적은 스텝으로 이미지를 생성할 수 있기 때문에 이미지 편집 생성 시간을 단축시킬 수 있다.  " https://github.com/ModelTC/Qwen-Image-Lightning?tab=readme-ov-file " 에서 적합한 파일을 다운받아 설치한다.

2. QWEN Edit Workflow

QWEN Image Edit Workflow
 이미지 파일을 그대로 Comfyui 창에 드래그 하면 workflow 를 그대로 사용할 수 있다.

3. 하나의 사진이나 이미지를 편집하는 다양한 방법

    Qwen-Image-Edit을 활용한 몇 가지 편집 예시이다.

  • 이미지 내 텍스트 추가 및 수정 (한국어 및 영어) : 텍스트는 영어 와 중국한자 가 가능하고 한글은 아쉽게도 정확하게 표시가 안된다.
    • Prompt : Put the text "Love U" at the bottom of the image, leave everything else as is.
    • 편집 결과 
      Text : Love U

      Text : 사랑해

      Text : 夫婦一心同體

    • 결과물을 보면 영어는 잘 표현해 주지만 한글은 완전하지 못하다.  한자도 완전하지 못하지만 중국 한자는 비교적 표현을 잘해준다.
  •  이미지 속 특정 객체 변경 및 스타일 적용
    • 원본 이미지 
      원본이미지

    • Prompt :  only Change cloths into a checkered one-piece dress, leave everything else as is. face and hair style is same. 
      의상 체크무늬 원피스로 교체

    • Prompt : Change hairstyle to long wavy hair leave everything else as is. face is same. 
      머리스타일을 긴 웨이브 머리로

    • Prompt : Change into a black miniskirt,  leave everything else as is. face is same. 
      하의만 검정색 미니스커트로 변경

  • 이미지 내 요소 제거 및 배경 변경
    • 원본이미지 
      원본이미지

    • Prompt : Get rid of the vase and make a coffee cup,  leave everything else as is. face is same. 
      화병을 없애고 찻잔을 만들어 놓은것
      화병만 없애고 꽃은 변형하여 그대로 두었다. 
    • Prompt : Get rid of the vase with flowers and make a coffee cup,  leave everything else as is. face is same.  
      화병과 꽃을 모두 깔끔하게 없앤 이미지

    • Change the background to a garden,  leave everything else as is. face is same. 
      배경이 정원으로 바꿔었다.

  • 캐릭터 또는 사물의 회전 및 위치 변경
    • 캐릭터나 사물의 위치 변경도 쉽게 가능하다.
  • 사진이나 이미지 스타일 변경
    • 원본이미지 
      원본이미지

    • Prompt : Change the image into a classic watercolor painting,  leave everything else as is.  
      고전적인 수채화 스타일

    • Prompt : Change the image to a Ghibli style drawing,  leave everything else as is.  
      지브리 스타일

    • Prompt : Change the image into a Van Gogh style painting,  leave everything else as is.  
      화가 반 고흐 스타일로 바뀌었다.

4.  QWEN-Image-Edit 모델을 이용하여 사진이나 이미지를 편집해 보면  

    상당히 요구조건에 맞게 편집을 해 준다.   Flux-Kontext 모델도 편집 기능이 뛰어난 모델인데 이것도 뒤지지않는 뛰어난 이미지 편집 모델이다.   Image to Image 를 함께 이용하면 실제 광고에도 적용할 수 있을 것으로 보인다.    
다음에는 어떤 이미지 AI 모델이 탄생 될것인지 기대가 많이 된다.

이제는 폭염은 물러난 것으로 생각한다.  폭염이 심한 올 여름을 무사히 보낸것을 감사히 생각합니다.




 


Labels:

댓글

댓글 쓰기

이 블로그의 인기 게시물

Comfyui Wildcard 사용법 - Stable Diffusion , Flux 에서 쉽게 Random Prompt 로 이미지 만들기

 Comfyui Wildcard 사용법에 대하여 알아본다. Comfyui 로 Stable Diffusion 또는 Flux 로 이미지를 만들 때 Prompt 가 이미지를 결정하는데 매우 중요한 역할을 한다.  영어가 모국어가 아닌 이상 영어로 prompt 를 만드는 것이 참 어려운 일이다. 물론 처음에는 많은 다른 사람들이 사용한 prompt 들을 모방하여 수정하고 사용하는데 이런 일을 하나하나 해 보기가 시간이 많이 걸리고 어렵다.   그래서 Random 으로 prompt 가 만들어 져서 이미지가 생성되고 그 이미지 중에서 마음에 드는 이미지들을 골라 그 이미지의 Prompt들 만을 가지고 보완하고 개선하면 더 편리하고 좋지 않을까 생각이 든다.  그런 식의 Random Prompt 생성이 가능하게 해주는 것이 wildcard 사용이다. Joker는 card game에서 wildcard 이다. 1. Wildcard 의 의미      와일드 카드(Wildcard)란 카드 게임에서 유래되었다.  이런 카드 게임에서 모든 카드의 대용으로 쓸 수 있는 비장의 카드를 와일드 카드라고 한다. 포커나 훌라를 할 때 조커가 이런 역할을 하는데 ,  이 의미가 컴퓨터와 스포츠로 확장되어 사용되는 것이다. 컴퓨터 용어로 쓰일 때는 한 디렉터리 내에 여러 파일이 존재하거나, 파일 이름의 뒷부분을 정확히 알지 못하는 경우에도 사용할 수 있는 명령어를 말합니다. '*'을 넣으면 빠진 것에 어떤 문자열이 있든지 대신할 수 있고,  '?'는 임의의 한 문자에만  대응한다. Comfyui 에서 wildcard 사용은 "--문자열--"  이런 식으로 wildcard 사용 가능한 노드에 prompt 를 입력해 주면 그 노드는 "문자열" 에  해당되는 파일을 찾아 그 파일 내용 중에서 임의의 일부분을 prompt 로 대체해 준다. 2. Wildcard 사...
댓글 쓰기
Read more »

Pinokio 앱 설치 - 오픈 소스 AI 플랫폼

  Pinokio 는 오픈 소스 AI 플랫폼이다. 로컬에서 AI 애플리케이션을 쉽게 설치하고 실행할 수 있게 도와주는 오픈 소스 AI 플랫폼이다. 이 플랫폼은 사용자가 복잡한 설치 과정 없이 클릭 한 번으로 AI 도구들을 설치할 수 있도록 설계되어 있다. 이를 통해 기술적인 배경 지식이 없는 초보자나 비전문가들도 쉽게 AI 애플리케이션을 사용할 수 있다.   이미 설치되어 있는 애플리케이션이 있어도 별도의 독립된 공간에서 문제없이 사용할 수 있게 해준다.   우리가 stable diffusion 을 comfyui 에서 사용하기 위해서는 "Python", "git ....", "conda"  뭔지 모르지만 설치해야 하는데 pinokio 브라우저에서 원 클릭으로 알아서 설치를 해주기 때문에  컴맹인 일반인도 쉽게 설치하고 사용 할 수 있다. pinokio.computer 1. Pinokio 주요 기능 원클릭 설치 : 복잡한 환경 설정이나 명령어 입력 없이도 다양한 AI 모델을 한 번의 클릭으로 설치할 수 있다. 예를 들어, Comfyui 나 Flux 같은 AI 도구들을 손쉽게 설치할 수 있다. 다양한 AI 애플리케이션 제공 : Pinokio는 다양한 오픈 소스 AI 애플리케이션을 제공하는 허브 역할을 하며, Pinokio 브라우저 나 홈페이지에서 쉽게 찾아 설치할 수 있다. 브라우저 기반 인터페이스 : 모든 설치된 애플리케이션은 Pinokio 웹 브라우저에서 관리할 수 있어, 친숙한 인터페이스로 쉽게 사용이 가능하다. 독립적인 가상 컴퓨터 : Pinokio는 백엔드 작업을 자동으로 처리하여, 애플리케이션이 로컬에서 실행되는 동안 인터넷에 연결되어 있지 않아도 된다. 2. Pinokio 설치 구글에서 pinokio 를 검색하여 " pinokio.computer " 를 클릭 Download 클릭 다운로드 된 pinokio 압축 파일을  푼다. pinokio 설치파일을 실행하여 설치 설치과정은 복...
댓글 쓰기
Read more »

이미지에서 프롬프트 추출하기 in Comfyui - QWEN3-VL

 이미지 또는 사진에서 Prompt(프롬프트)를 추출하여 사용하기 네이버, 구글 또는 핀터레스트 등의 사이트에서 마음에 드는 사진을 보고 비슷한 이미지를 만들고 싶을때,   그 사진을 보고 직접 그것을 프롬프트로 만들기가 어려운 일이다.  만들었다고 해도 그것을 이용하여 이미지를 생성해 보면 원하는 이미지와는 동 떨어진 이미지가 만들어지기 쉽다. 그래서 보통은 chatGPT 나 GEMINI 를 이용하여 이미지를 업로드하고 프롬프트를 만들어 달라고 하여 추출한다.  나도 이런 방식으로 종종 프롬프트를 추출하여 사용하곤 한다. 여기에서는 외부 도움을 받아 추출하는 대신  내 컴퓨터에서 추출하여 사용하는 방법이다. 1. 이미지에서 프롬프트 추출 예 Z-Image-Turbo 로 만든 이미지 위의 이미지에서 프롬프트를 추출 한다면...... chatGPT : A soft, elegant portrait of a young woman sitting on the floor, painting flowers with a brush and a palette. She wears a crisp white shirt with rolled-up sleeves and fitted blue jeans. Her long dark hair flows naturally as she focuses calmly on her artwork. A vase filled with colorful roses stands beside her. The scene has a warm beige background, smooth lighting, clean details, and a serene, gentle atmosphere. Ultra-high-definition, photorealistic illustration, soft shadows, pastel tones, refined skin texture, delicate rendering. G...
댓글 쓰기
Read more »