Stable Diffusion이란 무엇입니까? 도구 사용 방법과 다른 이미지 생성 AI 3종과의 차이점

Stable-Diffusion이란

최근 몇 년 사이 이미지 생성 AI가 다양한 산업에 도입되면서 업무 효율이 향상되고 새로운 가치가 창출되고 있습니다. AI 기반 이미지 생성 기술은 눈에 띄는 발전을 이루었으며 그중에서도 가장 주목받는 이미지 생성 AI 중 하나로서 꾸준히 보급되며 디자이너와 일반 사용자들 사이에서 인기를 얻고 있습니다.

Stable Diffusion은 텍스트로부터 고품질 이미지를 자동 생성할 수 있는 이미지 생성형 AI입니다. Stable Diffusion은 잠재 확산 모델(latent diffusion model)이라는 기술을 활용하여 노이즈에서 이미지를 생성하기 때문에 완전히 새로운 이미지를 만들어낼 수 있습니다.

다만, Stable Diffusion은 고도화된 이미지 처리를 수행하기 때문에 자체적으로 도입하고자 하는 분들 중에는 사용 방법과 활용 가능한 애플리케이션이 무엇인지 궁금해하시는 분들이 많을 것입니다.

이 글에서는 HBLAB은 이미지를 생성할 수 있는 Stable Diffusion의 사용 방법과 기능을 자세히 소개하고 제공되는 사례 연구도 함께 살펴보겠습니다.

Stable Diffusion이란 무엇입니까? 

Stable Diffusion은 Stability AI가 개발한 AI 모델로, 방대한 이미지 데이터를 학습한 AI가 사용자가 입력한 텍스트를 바탕으로 고품질 이미지를 생성합니다. Stable Diffusion의 특징은 “잠재 확산 모델”이라 불리는 알고리즘을 사용한다는 점입니다.

사용자는 잠재 확산 모델이 사전 학습된 시스템을 이용할 수 있으므로 Google Colaboratory와 같은 환경에서 프로그램 코드를 작성하지 않아도 텍스트 입력만으로 다양한 이미지를 생성할 수 있습니다.

예를 들어 “해질녘 바닷가 풍경”이라는 프롬프트를 입력하면 AI가 그 이미지에 맞는 결과물을 만들어줍니다. Stable Diffusion으로 생성하고 싶은 이미지 데이터를 입력하면 짧은 시간 안에 원하는 것에 가까운 이미지가 생성됩니다.

이때 생성형 AI는 과거에 학습한 방대한 이미지 데이터를 바탕으로 형태와 색감을 보완하여 자연스러운 이미지를 실시간으로 만들어냅니다. 따라서 Stable Diffusion은 이미지 생성 시 더 정확하고 고품질의 결과물을 낼 가능성이 높으며 사용자가 머릿속에 그리는 이미지에 가까운 결과를 생성하는 데 활용할 수 있습니다.

Stable Diffusion 최신 버전 

Stable Diffusion은 매일 진화하며 다양한 버전이 출시되는 모델입니다. 최신 모델인 Stable Diffusion 3.5는 SD3를 개선한 버전으로 2024년 10월에 공개되었으며 커스터마이징과 생성 품질을 동시에 달성했습니다.

Stable Diffusion 3.5는 높은 수준의 커스터마이징이 가능하고 사용이 간편하여 특정 요구사항에 맞게 모델을 손쉽게 미세 조정할 수 있을 뿐만 아니라 커스터마이즈된 워크플로우를 기반으로 애플리케이션을 구축할 수도 있습니다.

Stable Diffusion 3.5의 가장 큰 특징은 텍스트와 이미지를 모두 처리하도록 설계된 완전히 새로운 구조인 Multimodal Diffusion Transformer(MMDiT)를 채택했다는 점입니다.

구체적으로는 이미지용과 텍스트용 두 개의 Transformer가 병렬로 동작하며 어텐션 단계에서 공통 정보를 공유합니다.

타사 이미지 생성형 AI와 차이점

구분 Stable Diffusion (ver. 3.5) MidJourney (V6 이상) DALL-E 3
개발사 Stability AI MidJourney, Inc OpenAI
생성 정확도 사용자 프롬프트에 따라 달라짐, 높은 커스터마이징 가능 명확한 스타일과 높은 퀄리티 프롬프트 해석력이 매우 뛰어남
이미지 품질 – 고품질 이미지 생성

– 노이즈 감소, 디테일 강화, 선명도 개선

– 선명한 디자인을 원할 때 추천

– 고품질 이미지 생성

– 고해상도 출력 지원

– 다양한 예술적 필터·효과 제공, 창의적 스타일링 가능

– 고품질 이미지 생성

– 입력 설명에 충실, 디테일·사실감 우수

– 사실적인 질감과 형태 표현

학습 모델 Latent Diffusion Model Latent Diffusion Models (MMDiT), 독자적 딥러닝 기술 Diffusion 모델 + OpenAI GPT-4 통합
이용 요금 무료 플랜 (오픈소스) 월 구독제

– Basic: $10/월

– Standard: $30/월

– Pro: $60/월

– Mega: $120/월

유료 토큰제 (ChatGPT Plus)

– 시간당 사용 제한 있음

– Plus: $20- Team: $25(연간)/$30(월간)

– Enterprise: 별도 문의

전문 분야 사실적인 그림, 손쉬운 커스터마이징 추상·판타지 아트, 독창적 스타일, 스토리 있는 컨셉 디자인과 일러스트 일상 장면, 캐릭터 생성, 복잡한 프롬프트 이해·표현
커스터마이징 / 조작성 매우 높음

– 오픈소스 파인튜닝 가능

– 확장 기능 풍부

– 다소 설정이 어려움

낮음- Discord에서 파라미터 조정만 가능 직관적이고 간단함

– 보통 수준

– OpenAI 제품과 간단히 연동

사용 환경 로컬 환경 / API Discord 전용 웹 기반 (ChatGPT 통합)
사용 목적 고품질 사실적 이미지 생성, 프로그래밍 목적 고품질 예술적 표현판타지, 아름다운 색감·구도직관적 조작 일상 장면, 캐릭터 생성, 복잡한 프롬프트 이해

Stable Diffusion을 사용하는 두 가지 방법

Stability AI

Stable Diffusion은 텍스트로부터 이미지를 생성하는 강력한 AI 모델인 잠재 확산 모델을 탑재한 시스템으로, 크게 두 가지 방식으로 사용할 수 있습니다. 이 모델은 오픈 소스 AI이기 때문에 웹 기반 환경에서 실행하거나 로컬 환경에서 독립적으로 실행할 수 있습니다.

다만, 일부 서비스(특히 DreamStudio)는 유료 서비스로, 이미지를 생성하려면 “크레딧 (Credit)”이 필요합니다. 로그인 시 일정 크레딧이 제공될 수 있으나 이후에는 추가 크레딧을 구매해야 합니다.

Stable Diffusion은 소프트웨어 설치나 복잡한 환경 설정이 필요하지 않습니다. 인터넷 연결과 웹 브라우저만 있으면 어디서든 바로 이미지를 생성할 수 있습니다.

DreamStudio 웹 버전으로 사용하기

  1. DreamStudio 웹사이트로 이동합니다(예: https://beta.dreamstudio.ai/).

먼저 Google 계정으로 서비스에 로그인합니다. Google 계정 또는 이메일 주소로 손쉽게 계정을 만들 수 있습니다. 홈 화면 오른쪽 상단의 “Login”을 클릭합니다. “DreamStudio”를 사용하려면 계정이 필요합니다. Google 계정, Discord 계정, 또는 이메일로 새 계정을 등록할 수 있습니다. 이번에는 Google 계정을 사용할 것이므로 “Continue with Google”을 클릭합니다.

  1. 생성하고 싶은 이미지의 스타일을 선택합니다.
  2. Generate를 클릭해 프롬프트를 실행합니다. 프롬프트를 실행한 후 다양한 디자인의 이미지가 생성되었습니다.
  3. 네거티브 프롬프트 입력

네거티브 프롬프트는 생성되는 이미지에 반영되길 원하지 않는 요소를 추가로 지시하는 기능입니다. 이 경우 사자의 꼬리를 추가하면서 “worst quality”, “low quality”, “normal quality”, “out of focus”를 입력합니다.

네거티브 프롬프트는 프롬프트의 양쪽 요소를 함께 입력함으로써 이미지 품질을 개선합니다. 보시다시피 DreamStudio는 소프트웨어 설치나 복잡한 환경 설정이 필요하지 않습니다. 인터넷과 웹 브라우저만 있으면 어디서든 즉시 이미지를 만들기 시작할 수 있습니다.

Stable Diffusion Online에서 프롬프트 사용하기

Stable Diffusion Online은 무료로 이미지를 생성할 수 있습니다. 이미지 생성형 AI를 사용해 보고 싶지만 우선 디자인 감만 파악하고 싶은 분들께 추천됩니다.

  1. 스타일을 선택합니다.
  2. 생성하고 싶은 이미지의 모습을 “텍스트 박스”에 프롬프트로 입력합니다.
  3. 프롬프트 입력

Stable Diffusion Online의 프롬프트를 사용하면 생성될 이미지의 내용과 스타일을 지정할 수 있습니다. 다만 프롬프트 입력에는 규칙이 있으며, 사용할 수 있는 문자는 영문자, 숫자, 반각 기호로 제한됩니다.

단어 길이는 최소 3자, 최대 500자이며, 단어들은 쉼표로 구분해야 합니다.

4. 스타일 선택

프롬프트를 모두 입력한 뒤, 생성하고 싶은 이미지의 스타일을 선택합니다. 이 경우 스타일은 “None”으로 선택하고 “Generate” 버튼을 클릭합니다.

5. 프롬프트 실행이 끝나면 완료

프롬프트가 잠시 실행된 후, 달리는 플라밍고 무리를 유화 스타일로 표현한 그림이 생성되었습니다. Stable Diffusion Online은 다른 서비스에 비해 기능이 단순한 것이 특징입니다.

고급 기능이나 세부 설정은 제공하지 않지만, 초보자도 쉽게 이미지 생성을 시작할 수 있습니다. Stable Diffusion Online은 기본적으로 무료로 사용할 수 있으나, 일정 수 이상의 이미지를 출력하면 제한이 걸리며 유료 요금제로 전환이 필요합니다.

Stable Diffusion을 제공하는 세 가지 웹 애플리케이션

Stable Diffusion은 오픈 소스 이미지 생성 AI 모델이기 때문에, 다양한 기업과 커뮤니티가 이 모델을 기반으로 한 서비스와 플랫폼을 제공하고 있습니다.

여기서는 브라우저에서 쉽게 Stable Diffusion을 사용할 수 있는 대표적인 세 가지 웹 애플리케이션을 자세히 설명합니다.

Hugging Face

Hugging space

Hugging Face는 2016년 미국에서 챗봇을 개발하던 Hugging Face, Inc.가 설립한 이미지 생성 AI 플랫폼입니다. Hugging Face는 자연어 처리 데이터셋을 공유하고 활용할 수 있는 오픈 소스 커뮤니티로, 다양한 AI 모델의 공개를 지원하도록 설계되어 있습니다.

사용자는 자신이 만든 설계를 코딩해 플랫폼에 제출할 수 있으며, 모델·데이터셋·애플리케이션 전반에 걸친 협업이 가능합니다. 드래그 앤 드롭 인터페이스를 통해 개발자는 빠르게 모델을 구축할 수 있습니다.

특히 Hugging Face의 Datasets 라이브러리는 다수의 공개 데이터셋을 표준 형식으로 손쉽게 내려받고 전처리·관리할 수 있게 해 주며, 텍스트 분류, 질의응답, 감성 분석 등 다양한 작업을 위한 사전 학습 모델에 신속하고 간편하게 접근할 수 있도록 합니다.

이는 데이터 준비에 필요한 시간과 노력을 크게 줄여 연구·개발 속도를 가속화합니다. 무료 플랜에서도 프롬프트에 상세한 지시를 추가하면 원하는 이미지에 더 근접한 결과를 얻을 수 있습니다.

Dream Studio

Dream studio

Dream Studio는 2022년에 이미지 생성 AI ‘Stable Diffusion’을 개발한 Stability AI가 운영하는 웹사이트로 Stable Diffusion을 온라인에서 무료로 체험할 수 있습니다. Dream Studio의 특징은 사용자가 생성하고 싶은 이미지의 특성을 텍스트 프롬프트로 입력해 이미지를 만들어 낼 수 있다는 점입니다.

프롬프트에 키워드를 포함하면 생성되는 이미지의 분위기와 디테일을 제어할 수 있습니다. 

애니메이션, 판타지 아트 등 다양한 프리셋 스타일이 제공되어 원하는 이미지에 맞는 스타일을 선택하는 것만으로도 손쉽게 다양한 표현을 만들 수 있습니다. 예를 들어 ‘하늘에 떠 있는 도시처럼 보이는, 고층 빌딩이 많은 미래 도시 풍경’을 입력하면 해당 특성에 맞는 이미지가 생성됩니다. Dream Studio는 간단한 UI로, 프롬프트와 네거티브 프롬프트를 순서대로 입력해 쉽게 이미지를 만들 수 있어 초보자에게도 추천됩니다.

또한 Dream Studio에서는 크레딧을 구매해 더 많은 이미지를 생성할 수 있습니다. 입력 금액과 관계없이 동일하게 100 크레딧이 지급됩니다.

처음 가입하면 25 크레딧이 무료로 제공되며 이미지 1장을 생성하는 데 0.23 크레딧이 소요됩니다. 하나의 프롬프트로 최대 10장의 이미지를 동시에 생성할 수 있으며, 10장을 생성하면 2.28 크레딧이 필요합니다.

Mage.space

mage.space

Mage.space는 Ollano가 운영하는 이미지 생성 AI 플랫폼으로, 사용자가 영어 단어 또는 문장을 프롬프트에 입력해 이미지를 생성할 수 있습니다. Mage의 가장 큰 특징은 계정을 만들지 않고도 무제한으로 이미지를 생성할 수 있다는 점입니다.

Mage.space에서는 영어로 간단히 프롬프트를 입력하기만 해도 원하는 이미지를 쉽게 만들 수 있습니다. 영어 문법을 크게 신경 쓰지 않고 쉼표로 구분한 영어 단어들을 나열하는 것만으로도 이미지를 생성할 수 있습니다.

Mage.space는 기본적으로 무료이지만 유료 결제를 통해 다양한 사전 학습 모델을 이용할 수 있습니다. 처음 시작할 수 있도록 체험 크레딧이 제공되며 유료 프리미엄 플랜에서는 더 많은 기능, 더 빠른 처리 속도, 강력한 GPU 접근이 가능합니다.

Mage는 커스텀 모델을 불러오는 기능을 제공해 특정 스타일이나 주제에 맞춘 이미지 생성을 지원합니다. 또한 이미지 프롬프트 작성 시 자신에게 맞는 스타일 선택, 세밀 조정을 위한 Refine 기능 등 고급 편집 도구도 포함되어 있습니다.

이러한 기능 덕분에 Mage는 크리에이티브 산업뿐 아니라 마케팅, 검출 등 다양한 용도에 적합합니다. 특히 고품질 이미지를 효율적으로 생성해 자신의 아이디어를 시각화하고 싶은 분들께 추천합니다.

Stable Diffusion에서 프롬프트 입력 팁

Stable Diffusion에서 프롬프트란 이미지를 생성하기 위해 AI에 입력해야 하는 특정 주제나 조건을 나타내는 문장 또는 키워드를 의미합니다. 프롬프트는 AI 도구와 상호작용하거나 CLI 같은 인터랙티브 시스템에서 사용자가 입력하는 지시를 가리킵니다.

생성되는 이미지는 프롬프트 내용에 따라 크게 달라지므로, Stable Diffusion을 잘 다루기 위해 매우 중요한 요소입니다.

Tip 1: 단어의 순서에 유의하세요. 

Stable Diffusion에서는 앞에 있는 단어일수록 우선순위가 높습니다. 단어의 순서를 바꾸면 우선순위가 달라지고 그에 따라 이미지도 달라집니다. 기본적인 프롬프트 구성은 다음 순서로 입력하는 경우가 많습니다.

  • 전체 이미지에 관한 요소(화질, 스타일 등)
  • 인물과 관련된 요소
  • 의상, 헤어스타일 등과 관련된 요소
  • 이미지의 구도에 관한 요소

위와 같은 순서로 입력하면 우선순위가 높은 이미지 요소가 더 잘 반영됩니다.

Tip 2: 단어 사이에 쉼표를 넣으세요.  

Stable Diffusion에서는 기본적으로 단어를 쉼표(,)와 공백으로 구분합니다. 이 두 문자를 제대로 사용하지 않으면 단어가 생성 결과에 반영되지 않을 수 있으므로 주의가 필요합니다.

또한 프롬프트의 앞부분에 가까운 키워드일수록 AI가 더 중요하게 취급하는 경향이 있습니다. 관련성이 낮은 키워드를 너무 많이 넣으면 AI가 무엇에 집중해야 할지 혼란스러워져 의도와 다른 이미지가 생성될 수 있습니다. 꼭 필요한 키워드에 집중하세요.

Tip 3: 단어(토큰) 수를 75 이하로 유지하세요. 

Stable Diffusion로 이미지를 생성할 때는 단어(정확히는 토큰) 수를 75 이하로 유지하는 것을 권장합니다. Stable Diffusion에서는 프롬프트를 토큰 단위로 계산합니다.

예) Beautiful woman, casual dress

위 프롬프트를 입력하면 “masterpiece”, “,”, “1”, “beautiful woman”, “,”, “casual”의 여섯 개가 토큰으로 계산됩니다. 단, “,”(쉼표)도 한 번씩 토큰으로 계산된다는 점에 유의하세요.

토큰 수를 75 이하로 제한하는 이유는, Stable Diffusion이 75토큰을 하나의 단위로 취급하기 때문입니다. 75개를 초과하는 프롬프트의 경우 1회차는 1–75토큰, 2회차는 76–150토큰, 3회차는 151–225토큰처럼 75개 묶음 단위로 지시가 전달됩니다.

만약 75번째와 76번째 토큰이 이어지는 형태라면 전달 타이밍이 달라져 예기치 않은 생성 결과가 나올 수 있습니다. 이를 방지하기 위해 초보자라면 프롬프트를 75토큰 이내로 제한하시길 권장합니다.

Tip 4: 네거티브 프롬프트를 입력하세요. 

Stable Diffusion에서 프롬프트 입력 팁으로 네거티브 프롬프트의 활용이 있습니다. 네거티브 프롬프트는 이미지 생성 시 제외하고 싶은 요소를 텍스트로 입력하는 것을 의미합니다.

이는 일반 프롬프트가 “원하는 것”을 지시하는 것과 달리, “제외할 것”에 초점을 맞춥니다. 재현하고 싶은 이미지를 만들 때, 프롬프트와 네거티브 프롬프트 어느 쪽이든 적절히 지시를 입력하면 정확도가 높아지고 고품질의 결과를 얻을 수 있습니다.

예를 들어 “easynegative”, “ng_art” 같은 모델 이름은 네거티브 프롬프트의 예시입니다. easynegative는 Stable Diffusion으로 이미지 품질을 높이거나, 인체 왜곡이나 부자연스러운 표정·구도를 줄이고 싶을 때 효과적입니다.

입력 이미지에서 AI가 생성하기 쉬운 부자연스러운 사지나 흐릿한 부분 등 노이즈를 필터링해 전체적인 품질을 개선합니다. 이를 통해 프롬프트와 무관한 배경 요소나 불필요한 객체가 포함되는 것을 방지할 수 있습니다.

이처럼 네거티브 프롬프트를 입력하면 세부 묘사에서 이질감 없이 고품질 이미지를 생성하는 데 도움이 됩니다.

비즈니스에서의 Stable Diffusion 활용 사례

Stable Diffusion은 개인은 물론 기업에서도 다양한 상황에서 활용되고 있으며 음료 제조사의 판촉용 이미지 제작이나 오리지널 로고 디자인 제작 등에도 사용됩니다.

실제로 제품 프로모션, 인건비 절감과 업무 효율화, 음료 제조사와 부동산 기업 등 매우 다양한 분야에 적용되어 왔습니다. 아래에서는 비즈니스 현장에서 Stable Diffusion이 활용되는 세 가지 사례를 자세히 소개합니다.

UNIQLO: 의류 디자인 지원 및 패션 디자인 아이디어 생성

UNIQLO는 패스트리테일링 그룹의 핵심 브랜드로, 합리적인 가격에 고품질 의류를 제공하는 패션 브랜드입니다. UNIQLO는 대화형 AI인 Stable Diffusion을 활용한 스마트폰 앱을 도입해, 고객의 선호와 날씨를 기반으로 제품을 추천하고 있습니다.

UNIQLO는 데이터와 AI를 활용해 소비자 니즈를 정확히 파악하고, 필요한 제품을 필요한 수량만 생산하여 낭비 없이 고객에게 전달하는 공급망을 구축함으로써 ‘정보 제조 소매업’으로의 진화를 목표로 하고 있습니다.

매장 내 디지털 사이니지와 태블릿을 통해 재고 및 코디 정보를 제공하고, 피팅룸에서는 AI가 트렌드 분석과 디자인 시뮬레이션을 포함한 스타일링을 지원합니다.

트렌드 분석은 최신 패션 트렌드 데이터와 과거 판매 데이터를 AI와 결합해, 시장 요구에 부합하는 디자인 아이디어를 신속하게 생성합니다. 예를 들어 “캐주얼 티셔츠, 여름, 해안 풍경, 젊은 층용”과 같은 프롬프트로부터 무수한 디자인 변형을 만들어내어 디자인 팀의 영감을 자극합니다.

또한 특정 디자인에 대해 다양한 색상, 패턴, 질감을 AI로 시뮬레이션함으로써 최적의 조합을 효율적으로 찾을 수 있습니다.

마무리 

본 글에서는 이미지를 생성할 수 있는 Stable Diffusion의 사용 방법과, 제공되는 애플리케이션의 특징을 자세히 소개했습니다. Stable Diffusion은 사용자가 입력한 텍스트와 이미지 데이터를 기반으로 고품질 이미지를 생성하는 이미지 생성 AI입니다.

Stable Diffusion의 강점은 고품질·고정확도의 이미지를 생성할 수 있다는 점이며 기본적으로 무료로 이용할 수 있다는 것도 특징입니다. Stable Diffusion은 학습된 AI 모델이 탑재된 이미지 생성 AI로, 사용자는 만들고 싶은 이미지를 영어 단어로 구분하여 입력하는 것만으로 다양한 이미지를 만들 수 있습니다.

HBLAB은 베트남에 본사를 둔 외주 개발 회사로, 한국을 비롯한 여러 기업과 협력하며 AI, 블록체인, AR/VR 등 최첨단 기술 개발을 지원해왔습니다. 베트남 본사 외에 서울에도 지사가 있으며 500건 이상의 개발 실적을 보유하고 있습니다. 이미지 생성 AI 관련 문의가 있으시면 언제든지 편하게 연락해 주세요.

베트남 인공지능 CTA

관련 게시물

Interview Archive

Your Growth, Our Commitment

HBLAB operates with a customer-centric approach,
focusing on continuous improvement to deliver the best solutions.

위로 스크롤