로컬에서 AI 이미지 생성하기, 이제 어렵지 않아요.
요즘 AI 이미지 생성 툴 중에서 가장 자유도 높고 커스터마이징이 쉬운 프로그램을 꼽자면, 단연 Stable Diffusion입니다. 클라우드 기반의 미드저니나 DALL·E와 달리, Stable Diffusion은 내 컴퓨터에서 실행할 수 있어 비용 부담도 없고 자유로운 확장이 가능하죠.
이 글에서는 스테이블 디퓨전 설치 방법부터 모델 적용, 한글 설정, LoRA 사용법까지 초보자도 쉽게 따라 할 수 있도록 정리해 봤습니다.
저도 처음 설치할 때 삽질(?)을 꽤 했던 기억이 나서, 그때 시행착오를 줄여드리고자 최대한 쉽게 써볼게요!
✅ 아래 목차를 통해 원하는 내용을 쉽게 찾을 수 있습니다.
📚 목차
- 🧠 Stable Diffusion이란?
- 💻 시스템 요구사항
- 🔧 설치 방법 안내 (2가지)
- Stability Matrix로 간편 설치
- Git & Python으로 수동 설치
- 📦 모델 다운로드 및 적용 방법
- 🧩 LoRA 모델 활용하기
- 🌐 한글 UI 설정 방법
- 🛠️ 문제 해결 & 팁
- 🙋 자주 묻는 질문 (FAQ)
- 📝 결론
- 📋 요약 정보
🧠 Stable Diffusion이란?
🔍 Stable Diffusion 공식 페이지 바로 가기
Stable Diffusion은 오픈소스로 공개된 AI 이미지 생성 모델로, 텍스트 프롬프트를 입력하면 그에 맞는 이미지를 생성해 주는 툴입니다.
특징
- 완전 무료
- 개인 PC에서 실행 가능
- 다양한 커스터마이징 (모델, LoRA, ControlNet 등)
- 사진처럼 리얼한 이미지부터 애니메이션 풍까지 표현 가능
제가 사용하는 Automatic1111 Web UI 버전 기준으로 설명드릴게요.
💻 시스템 요구사항
최소 사양
- Windows 10 / 11 (64bit)
- NVIDIA GPU (최소 6GB VRAM, 8GB 이상 추천)
- 저장공간 10GB 이상 여유
내 경험 팁
8GB VRAM이면 512x768 해상도 정도는 무난하게 생성 가능합니다. 다만 4K급 이미지나 복잡한 LoRA 조합을 하려면 12GB 이상이 안정적이에요.
🔧 설치 방법 안내 (2가지)
✅ 1. 간편 설치 - Stability Matrix
완전 초보 추천!
여러 가지 UI(Stable Diffusion Web UI, ComfyUI 등)를 한 번에 설치하고 관리할 수 있어요.
설치 방법
- Stability Matrix GitHub에서 다운로드
- 압축 해제 후 실행
- Portable 모드로 설치
- Packages 메뉴에서 원하는 UI 선택 후 설치
장점
- GUI 기반이라 클릭 몇 번이면 끝
- 업데이트도 자동
- ComfyUI, WebUI 통합 관리 가능
저도 요즘은 이걸로 빠르게 구성해서 테스트하고 있어요.
🛠 2. 수동 설치 - Python & Git
직접 컨트롤하고 싶거나, 확장 플러그인 활용을 원한다면 추천!
- Python 3.10.6 다운로드 및 설치
- 설치 시 "Add to PATH" 체크
- Git 설치
- 명령 프롬프트 열고 설치 폴더로 이동 후 다음 명령어 실행:
git clone https://github.com/AUTOMATIC1111/stable-diffusion-webui.gitwebui-user.bat실행하면 자동으로 필요한 파일들이 설치됩니다.
실행 URL: http://127.0.0.1:7860
📦 모델 다운로드 및 적용 방법
추천 사이트
- Civitai (가장 활발함)
- Hugging Face
- Modelshare.org
적용 방법
.safetensors또는.ckpt파일 다운로드stable-diffusion-webui/models/Stable-diffusion폴더에 넣기- Web UI 실행 → 상단 Checkpoint 드롭다운에서 선택
모델이 안 보인다면? 새로고침 버튼을 눌러주세요!
내가 주로 쓰는 추천 모델
- RealisticVision: 인물 사진형 이미지에 최적
- MeinaMix: 애니풍 일러스트에 특화
- Deliberate: 균형 잡힌 그림체 표현
🧩 LoRA 모델 활용하기
LoRA란?
기본 모델에 특정 스타일이나 요소를 더해주는 경량화된 모델입니다.
예: 특정 연예인 스타일, 옷 종류, 포즈 등
적용 방법
.safetensors확장자의 LoRA 파일 다운로드models/Lora폴더에 저장- 프롬프트에 다음 형식으로 입력:
<lora:파일명:가중치>예: <lora:koreanDollLikeness:0.7>
팁
가중치(0.6~0.8)를 조절해서 표현 강도를 조정할 수 있어요. 너무 높이면 왜곡되기도 합니다.
🌐 한글 UI 설정 방법
설치 방법
- Web UI 실행 → 'Extensions' 탭
- 'Install from URL' 클릭 후 주소 입력:
https://github.com/36DB/stable-diffusion-webui-localization-ko_KR- 설치 후 Settings > User Interface >
ko_KR선택 → 저장 → UI 재시작
🛠️ 문제 해결 & 팁
| 문제 | 해결 방법 |
| 모델이 안 보여요 | 폴더 경로 확인 + 새로고침 |
| 실행 오류 | Python 3.10.6 + Git 버전 확인 |
| 속도가 너무 느려요 | 해상도 낮추기, 모델 변경, VRAM 줄이기 |
| 결과물이 이상해요 | 프롬프트 정리 + 네거티브 프롬프트 추가 |
🙋 자주 묻는 질문 (FAQ)
Q1. NVIDIA 그래픽카드가 필수인가요?
A1. 아니요. CPU 모드나 AMD GPU도 가능하지만 속도가 매우 느리거나 지원이 불완전할 수 있어요. NVIDIA 8GB 이상 권장입니다.
Q2. 모바일에서도 가능한가요?
A2. 직접 설치는 어렵지만, [DrawThings] 같은 앱을 통해 iOS에서도 일부 기능은 활용 가능합니다.
Q3. 무료인가요?
A3. Stable Diffusion 자체는 완전 무료입니다. 다만 고성능 GPU를 사용하려면 장비 비용은 감수해야 해요.
Q4. AI 이미지 상업적으로 써도 되나요?
A4. 대부분 모델은 CC0(상업적 사용 가능)이지만, 모델마다 라이선스를 확인하는 게 중요해요. 특히 유명 인물 기반 LoRA는 사용 주의!
📝 결론
Stable Diffusion은 진입장벽이 낮으면서도 활용도는 매우 높은 AI 이미지 생성 툴입니다.
처음 설치는 다소 복잡하게 느껴질 수 있지만, 한 번 설정만 해두면 다양한 스타일의 이미지를 내 맘대로 생성할 수 있다는 점에서 정말 강력하죠.
저는 웹디자인과 콘텐츠 제작 시 썸네일, 캐릭터 드래프트, 아이디어 스케치 등에 자주 활용하고 있습니다. 특히 LoRA와 ControlNet을 조합하면 전문 일러스트 못지않은 결과물도 가능하다는 점에서 큰 만족감을 주고 있어요.
📋 요약 정보
| 항목 | 내용 |
| 실행 방식 | 로컬 설치 (인터넷 없이 작동) |
| 설치 툴 | Automatic1111 Web UI / ComfyUI |
| 권장 GPU | NVIDIA 8GB VRAM 이상 |
| 모델 형식 | .safetensors (권장), .ckpt |
| 설치 소요 시간 | 약 15~30분 |
| 추가 기능 | LoRA, ControlNet, 한글 UI, 확장 플러그인 등 |
| 추천 사이트 | civitai.com, huggingface.co |
| 한글화 가능 여부 | 가능 (확장 설치) |
Stable Diffusion에 대해 더 궁금한 내용이 있다면 댓글이나 메시지로 남겨주세요.
모델 추천 리스트나 프롬프트 예시집도 원하시면 따로 공유해 드릴게요!
‼️ 함께 보면 유용한 글
🎥 OBS 스튜디오로 화면 녹화 및 실시간 스트리밍 방법