Stable Diffusion을 개발한 AI 연구기업인 Stability AI가 기존의 이미지 생성 AI에서 성능을 대폭 강화한 Stable Diffusion XL (SDXL) 을 테스트 하고 있다고 합니다. Stability AI 웹서비스인 DreamStudio 에서도 Stable Diffusion의 베타버전 테스트가 가능하지만 Stability AI 가 만든 또다른 AI tool인 클립드롭(Clipdrop.co)에서도 이 SDXL 베타버전을 사용해 볼 수 있는데요. SDXL과 더불어 Clipdrop의 주요 기능을 하나하나 살펴 보면서 실제로 테스트 해보도록 하겠습니다.
Clipdrop은?
ClipDrop은 인공지능으로 구동되는 혁신적인 이미지 편집 도구 입니다. 배경 지우기, 특정 사물 삭제, 배경 추가하기, Stable diffusion XL을 통한 이미지 생성 기능을 제공합니다.
Stable Diffusion XL의 향상된 기능
기존 Stable Diffusion 에서 구도나 리얼리티가 향상된 Stable Diffusion XL의 향상된 기능은 다음과 같습니다.
- 더 나은 수준의 사실적 이미지 능력
- 더 나은 가독성을 제공하는 능력
- 이미지 구성 과 얼굴 생성
- 풍부한 비주얼과 놀랄만한 미학
- 간결한 프롬프트 사용을 통한 상세한 이미지 생성
ClipDrop의 주요기능
ClipDrop의 메인 화면입니다. 아래와 같이 “try for free” 버튼을 누르고 Account를 생성합니다.
이제 아래와 같은 기능을 사용할 수 있습니다.
| Stable Diffusion XL | 작은 프롬프트로 현실적인 이미지를 생성하고 이미지 내에 정확하게 텍스트를 추가 가능 |
| Uncrop | 사용자가 사진이나 이미지를 확대하고 사진에 나타나는 정보만으로 주변 공간을 생성함 |
| ReImagine XL | 이 도구는 이미지를 참조하여 매우 유사한 이미지를 생성하여 원본 이미지의 변형 생성 |
| Clean up | 사진에서 원하지 않는 요소를 삭제 |
| 배경제거 | 이미지의 배경을 자동으로 삭제 |
| Relight | 사진에 조명을 생성하여 사진의 구성을 변경 |
| UpScaler | 이미지의 해상도를 간단하게 높일 수 있다. |
| 배경 교체 | 프롬프트를 사용하여 이미지에 배경을 추가하여 구성을 생성 |
| 텍스트 제거 | 텍스트의 모든 흔적을 자동으로 제거 |
기능 테스트 해보기
Stable Diffusion XL
Stable Diffusion XL 버튼을 누르면 다음과 같은 페이지가 나옵니다. 심플한 프롬프트 만으로도 향상된 퀄리티의 이미지를 만들어 준다고 하니까 “A cat sitting on a chair”같은 단순한 프롬프트를 예시로 입력해 보겠습니다.
- Stable Diffusion XL 의 결과값 : 다리 부분은 아직 어색한 부분이 있긴 하지만 대체적으로 화면 구성이나 고양이의 사실적 묘사가 훌륭한거 같습니다.
- Stable Diffusion 홈페이지에서 결과값 : 나름 고양이의 사실적인 묘사가 표현되긴 했지만 “의자위에 앉아있는” 이라는 프롬프트 값을 제대로 구현하지 못한거 같기도 하고 배경처리도 좀 아쉬운거 같네요.
Uncrop
Uncrop 버튼을 선택하면 다음과 같은 화면이 나옵니다. 원래 이미지 사이즈를 사용자가 원하는 사이즈로 변경할때 원래 이미지 사이즈가 작을 경우 나머지 빈 공간을 기존 이미지를 바탕으로 자연스럽게 연결하여 생성해줍니다.
“Clik, paste or drop a file here to start”를 클릭해서 원하는 이미지를 첨부합니다.
아래 스크롤을 더 내리면 인물사진, 아트, 텍스쳐, 풍경 등의 예시를 확인 할 수 있습니다. 하지만 실제로 어느정도까지 퀄리티 있는 이미지를 구현 할 수 있는지 제가 임의로 다운받은 사진으로 테스트를 해보겠습니다. (홈페이지에서 제공하는 예시는 당연히 완벽할테니까요 흥)
사진을 첨부 하고 크기는 여백이 최대한 많은 Landscape 로 선택해줍니다. custom을 통해 원하는 사이즈로도 조정가능합니다.
완성된 이미지의 모습니다. 밑에 결과값이 조금씩 다른 옵션 4가지를 제공합니다. 생각보다 많이 자연스러워서 만족스럽네요.
Reimage XL
Stable diffusion에서 생성된 이미지를 베이스로 다른 결과값을 보여주는 기능입니다. 아까 “A cat sitting on a chair “이라는 프롬프트를 통해 생성된 이미지 중 하나를 넣어보았습니다.
음.. 이건 솔찍히 결과값이 만족스럽지 않네요. 밑에 다른 4가지 결과값 중에 위의 이미지만 고양이의 형태가 온전합니다. 하지만 의자의 모습도 배경도 뭉게져 있고 뒤틀려져있습니다.
이미지 생성 후에 점 세개를 클릭하면 배경 지우기, 특정 오브제 삭제 등의 메뉴를 바로 이용할 수 있는 건 편리해보입니다.
Clean up
이미지 안에 있는 특정 부분(사물, 사람, 글씨 등) 을 자연스럽게 지울 수 있는 기능입니다.
- 포토그래퍼, 크리에이티브 에이전시, 부동산, 이커머스, 텍스트나 로고 삭제 등에 응용할 수 있다고 하네요. (예시만 보면 거의 마술이나 다름없습니다)
바닷가에 미러볼이 있는 이미지를 선택하고 미러볼만 지우도록 하겠습니다.
- ‘Move’는 이미지 스케일을 키워줍니다. 이미지가 커지면 지울 부분을 좀더 섬세하게 선택할 수 있겠지요.
- ‘Select’는 지울수 있는 브러쉬의 크기를 조정할 수 있습니다. High Quaility는 유료 메뉴입니다.
브러쉬로 미러볼만 선택하면 위와같이 형광색으로 표시가 되는데요. ‘Clean’버튼을 눌렀는데 이상한 공모양의 형태가 나옵니다. 결과값이 너무 이상해서 실망하던 차에 몇 번 더 지우면 어떨까 싶어서 해봤더니 그제서야 원하는 결과값이 나오더라구요.
Clean up 메뉴를 실행 하실 때는 한번 지워보고 결과값이 안나올 때는 원하는 이미지가 나올때까지 계속 지워보는게 좋을거 같습니다.
배경제거
일명 누끼를 따주는 기능입니다. 복잡한 형태 (사람의 머리카락 등)도 깔끔하게 배경을 삭제해줍니다.
- Detail : 전경의 세부사항을 보존하면서 배경을 제거합니다.(ex 머리카락)
- Complex objects : 매우 복잡한 사물의 배경을 제거하는데 탁월합니다.
- Sharpest edges : 사물의 모서리를 섬세하게 유지하며 배경을 제거합니다.
- Focus only on the main object : 사물의 본연의 형태를 집중하여 배경을 제거합니다.
제가 넣은 오리지널 이미지입니다.
이렇게 스크롤을 왔다갔다 거리면 배경이 지워진 부분 과 안 지워진 부분을 비교해서 볼 수 있습니다.
배경이 삭제된 완성된 이미지입니다. 차 밑에 그림자도 지워졌다는게 상당히 마음에 드네요.
Relight
사진이나 그림에 원하는 크기와 색상의 조명효과를 추가 할 수 있는 기능입니다.
저는 근래에 제가 그린 에스파의 카리나 작품에 조명 효과를 넣어보겠습니다.
그림 밑에 Ambient (그림 자체의 밝기 조절), Light 1, 2, 3 (조명의 갯수, 갯수 조절 및 크기 색상 조절 가능), + New Light (새로운 조명추가) 메뉴가 있고 눌러보면서 그림에 적용되는 효과를 확인하며 조절이 가능합니다.
완성된 이미지입니다. 조명을 넣으니 기존 그림에 비해 좀더 입체적인 느낌이 납니다. (좀 무섭기도 하네요 ;;)
Upscaler
저화질의 이미지를 고화질로 변환해주는 기능입니다. 이미 선택되어있는 Smooth와 X2 메뉴 빼고는 모두 유료입니다.
아까 배경을 없앤 차 이미지가 화질이 너무 낮아서 이걸 좀 바꿔보겠습니다.
이미지 사이즈가 좀더 커지고 훨씬 선명한 화질로 바꼈습니다. 아주 완벽하진 않지만 원래 이미지 해상도가 너무 낮았었기 때문에 이 정도도 훌륭한 거 같습니다.
배경 교체
선택된 메인 오브제만 남기고 나머지 배경을 AI 프롬프트를 통해 새로 생성하여 변환하는 기능입니다.
아까 그 자동차 사진 자체가 이미 누끼가 따져있어서 시도해볼려고 했는데 PRO 버전이라 이용이 불가하더군요.
밑에 예시 이미지들이 있었는데 물론 아직 안써봐서 알수는 없지만 다소 어색한 부분이 없지 않아있었어요. (그 특유의 AI 느낌이 나는 배경들 ;;) 인물보다도 PRODUCT 배경 처리에 좀더 나은 결과값을 볼 수 있지 않을까 싶습니다.
텍스트 제거
마지막 기능인 이미지 속에 있는 ‘글씨’를 지워주는 기능입니다. Clean up이랑 뭐가 다른지 잘 모르겠는데 일단 적당한 사진으로 테스트를 해보도록 하겠습니다.
샤넬 넘버 파이브가 선명하게 쓰여진 향수 사진을 골라서 첨부해줍니다.
몇 초가 지나고 난 결과값입니다. 나름 글씨와 배경이 뚜렷이 구분되어있는 사진이었는데 글씨 밑 부분이 거뭇거뭇 하게 형태가 남아있네요.
다운로드 옆에 있는 점 세개를 클릭해서 Cleanup 기능을 선택해줍니다.
지우고 싶은 거뭇한 부분만 표시를 해줍니다.
깨끗하게 잘 지워졌습니다. 텍스트 제거 기능 하나만으로는 부족할 수 있으니 Cleanup 기능과 함께 쓰면 좀더 완벽한 결과물을 확인 할 수 있습니다.
ClipDrop 유료와 무료 버전의 차이
- Stable Diffusion XL, Uncrop, ReImagine XL과 같은 일부 도구는 무료로 제공됩니다.
- UpScaler와 Replace background와 같은 다른 도구는 유료 기능입니다.
- HD로 이미지를 다운로드하려면 유료 요금제가 필요합니다.
ClipDrop의 무료 버전에는 다음이 포함됩니다
- 워터마크가 있는 Stable Diffusion XL, 하루에 최대 400개의 이미지 제한
- 워터마크가 있는 Uncrop, 하루에 최대 100개의 이미지 제한
- 최대 해상도 1024×1024로 배경 제거
- 최대 해상도 1024×1024로 사진 정리
- 최대 해상도 1024×1024로 조명 조정
- 최대 해상도 2048×2048으로 이미지 업스케일러 x2
- 10개의 무료 클립을 제공하는 웹 편집기
- 최대 해상도 1024×1024로 텍스트 제거
- 무료 버전은 일부 기능에 워터마크가 표시되며, 처리할 수 있는 이미지의 일일 제한이 있습니다.
느낀점
어도비 파이어 플라이나 포토샵 제너레이터 기능이랑 비슷한 기능도 있고 유료와 무료의 사용 제한이 있긴하지만 손쉽게 배경이나 오브제를 제거하고 stable diffusion XL과 결합한 이미지를 편집할 수 있다는 점에서는 아주 훌륭한 AI tool 이지 않나 싶네요.
