Flux 신규 모델 ( Flux1-Fill-Dev) - Inpaint , Outpaint 기능 모델

Flux 의 신규 모델이 출시되었다.

Flux1-Fill , Flux1-redux 그리고 Flux1-canny and Flux1-depth 이다. 이중에서 오늘은 Flux1-fill 을 이용하여 Inpaint 와 Outpaint 기능으로 이미지를 생성해 본다.

유우니 사막을 배경으로 만든 AI 이미지- Outpaint

1. Flux1-Fill-Dev 모델 다운

Huggingface 사이드에서 다운 받는다. ( https://huggingface.co/black-forest-labs/FLUX.1-Fill-dev/tree/main ) 28.3G 이기 때문에 상단히 큰 모델이다. 이것을 다른 Flux 모델들이 있는 동일한 폴더에 설치하면 된다.

( ..\comfyui\models\unet )

2. Inpaint 기능을 위한 workflow

Inpaint Workflow

Inpaint 란 기존의 이미지 일정한 영역에 이미지를 추가 시키는 기능이다.

특별한 node들은 없다. 기존의 Flux 로 Inpaint 를 해 보았다면 대부분 설치가 되었을 것이다.

다만 이 모델은 inpaint 와 outpaint 를 위한 전용 모델로 출시되었기 때문데 좀 더 원하는 이미지를 잘 만들어 줄 것으로 생각한다.

배경 사진을 로딩한 후, Inpaint 원하는 부위를 masking 처리한 후, prompt 에 원하는 이미지 의 prompt 를 입력하면 잘 만들어 진다.
주의할 값은 FluxGuidance 값이 30.0 이다.
모델이 크기 때문에 VRAM 용량이 작으면 시간이 많이 소요 될 것으로 생각한다.

Flux - Inpaint 사용 결과

3. Outpaint 기능을 위한 workflow

Outpaint workflow

Outpaint 란 기존의 이미지에서 배경부분을 자연스럽게 더 확장시켜주는 기능이다.

사진이나 이미지에서 인물에 비하여 배경이 적어 뭔가 구도가 부자연스러울 때 자연스럽게 배경부분을 원하는 만큼 확장하여 준다.
여기서도 FluxGuidance 값은 30.0 이다.

Inpaint 로 반사되는 부분을 확대

원본 이미지에는 반사되는 부분이 잘려서 아쉬웠는데 아래부분을 Outpaint 로 확장하니까 좀 더 마음에 드는 이미지가 완성 되었다.

개인적인 생각으로 Flux1-Fill 모델은 주로 멋진 배경에 이미지를 추가하거나 또는 이미지의 배경부분이 아쉽게 잘려있을때 사용하면 자연스럽게 완성된 이미지가 될것으로 생각한다.

다른 추가 모델들도 좀 더 시도를 해보고 정리해 볼 생각이다.

이 블로그의 인기 게시물

Comfyui Wildcard 사용법 - Stable Diffusion , Flux 에서 쉽게 Random Prompt 로 이미지 만들기

Comfyui Wildcard 사용법에 대하여 알아본다. Comfyui 로 Stable Diffusion 또는 Flux 로 이미지를 만들 때 Prompt 가 이미지를 결정하는데 매우 중요한 역할을 한다. 영어가 모국어가 아닌 이상 영어로 prompt 를 만드는 것이 참 어려운 일이다. 물론 처음에는 많은 다른 사람들이 사용한 prompt 들을 모방하여 수정하고 사용하는데 이런 일을 하나하나 해 보기가 시간이 많이 걸리고 어렵다. 그래서 Random 으로 prompt 가 만들어 져서 이미지가 생성되고 그 이미지 중에서 마음에 드는 이미지들을 골라 그 이미지의 Prompt들 만을 가지고 보완하고 개선하면 더 편리하고 좋지 않을까 생각이 든다. 그런 식의 Random Prompt 생성이 가능하게 해주는 것이 wildcard 사용이다. Joker는 card game에서 wildcard 이다. 1. Wildcard 의 의미 와일드 카드(Wildcard)란 카드 게임에서 유래되었다. 이런 카드 게임에서 모든 카드의 대용으로 쓸 수 있는 비장의 카드를 와일드 카드라고 한다. 포커나 훌라를 할 때 조커가 이런 역할을 하는데 , 이 의미가 컴퓨터와 스포츠로 확장되어 사용되는 것이다. 컴퓨터 용어로 쓰일 때는 한 디렉터리 내에 여러 파일이 존재하거나, 파일 이름의 뒷부분을 정확히 알지 못하는 경우에도 사용할 수 있는 명령어를 말합니다. '*'을 넣으면 빠진 것에 어떤 문자열이 있든지 대신할 수 있고, '?'는 임의의 한 문자에만 대응한다. Comfyui 에서 wildcard 사용은 "--문자열--" 이런 식으로 wildcard 사용 가능한 노드에 prompt 를 입력해 주면 그 노드는 "문자열" 에 해당되는 파일을 찾아 그 파일 내용 중에서 임의의 일부분을 prompt 로 대체해 준다. 2. Wildcard 사...

QWEN-Image-Edit-2509 에 얼굴 과 포즈를 적용시켜 이미지 완성하기 - Comfyui

QWEN-Image-Edit-2509 의 편집 기능은 3개의 이미지를 이용하여 다양한 이미지를 생성 할 수 있는데 그중 2개의 이미지를 적용하여 이미지를 생성해 본다. 얼굴과 포즈 적용한 이미지 하나는 인물 얼굴을, 하나는 인물의 포즈를 적용하도록 입력한다. 1. 이미지 하나 적용된 Workflow 이미지 하나 적용한 workflow 지난 포스트 중 " QWEN-Image-Edit-2509 를 이용한 이미지 생성 팁 - Comfyui " 에서 사용된 workflow 이다. 여기에 인물의 포즈도 함께 적용해서 이미지를 생성해 볼 려고 한다. 2. 두번째 이미지 (포즈)를 적용하기 위한 workflow 이미지의 pose를 추출 두번째 이미지가 직접적으로 연결되면 포즈만 적용하는 것이 아니고 다른 것들도 적용되기 때문에 AIO Aux Preprocessor 노드를 이용하여 Pose 만을 추출하여 연결 시킨다. 3. 두개의 이미지를 연결한 완성된 Workflow 1번에 인물사진, 2번에 Pose 이미지 이 Workflow를 이용해서 원하는 인물의 얼굴과 원하는 포즈로 새로운 이미지를 생성 할 수 있다. 4. 이미지 생성 Prompt : same woman, same face, An elegant woman with a statuesque and well-proportioned figure, embodying timeless beauty and grace. naturally long hair, She is dressed in a luxurious evening gown inspired by haute couture from Paris and Milan , with intricate embroidery, flowing silk fabrics, and a sophisticated neckline. Her accessories include a sparkling diamond neck...

Pinokio 앱 설치 - 오픈 소스 AI 플랫폼

Pinokio 는 오픈 소스 AI 플랫폼이다. 로컬에서 AI 애플리케이션을 쉽게 설치하고 실행할 수 있게 도와주는 오픈 소스 AI 플랫폼이다. 이 플랫폼은 사용자가 복잡한 설치 과정 없이 클릭 한 번으로 AI 도구들을 설치할 수 있도록 설계되어 있다. 이를 통해 기술적인 배경 지식이 없는 초보자나 비전문가들도 쉽게 AI 애플리케이션을 사용할 수 있다. 이미 설치되어 있는 애플리케이션이 있어도 별도의 독립된 공간에서 문제없이 사용할 수 있게 해준다. 우리가 stable diffusion 을 comfyui 에서 사용하기 위해서는 "Python", "git ....", "conda" 뭔지 모르지만 설치해야 하는데 pinokio 브라우저에서 원 클릭으로 알아서 설치를 해주기 때문에 컴맹인 일반인도 쉽게 설치하고 사용 할 수 있다. pinokio.computer 1. Pinokio 주요 기능 원클릭 설치 : 복잡한 환경 설정이나 명령어 입력 없이도 다양한 AI 모델을 한 번의 클릭으로 설치할 수 있다. 예를 들어, Comfyui 나 Flux 같은 AI 도구들을 손쉽게 설치할 수 있다. 다양한 AI 애플리케이션 제공 : Pinokio는 다양한 오픈 소스 AI 애플리케이션을 제공하는 허브 역할을 하며, Pinokio 브라우저 나 홈페이지에서 쉽게 찾아 설치할 수 있다. 브라우저 기반 인터페이스 : 모든 설치된 애플리케이션은 Pinokio 웹 브라우저에서 관리할 수 있어, 친숙한 인터페이스로 쉽게 사용이 가능하다. 독립적인 가상 컴퓨터 : Pinokio는 백엔드 작업을 자동으로 처리하여, 애플리케이션이 로컬에서 실행되는 동안 인터넷에 연결되어 있지 않아도 된다. 2. Pinokio 설치 구글에서 pinokio 를 검색하여 " pinokio.computer " 를 클릭 Download 클릭 다운로드 된 pinokio 압축 파일을 푼다. pinokio 설치파일을 실행하여 설치 설치과정은 복...

이 블로그 검색