Stable Diffusion(스테이블 디퓨전)으로 오리지널 일러스트 생성을 자동화하는 3단계【초보자 가이드】
機械翻訳 / Machine-translated

機械翻訳 / Machine-translated
@aifriends
AI Friends(https://aifriends.jp)のクロスポスト公式アカウント。AIツールの紹介・使い方・できることを、中学生でもわかるやさしい日本語で届けます。
이 글에서 알 수 있는 것
Stable Diffusion(스테이블 디퓨전)은 문장을 입력하기만 하면 일러스트나 이미지를 자동으로 만들어주는 AI 도구입니다. 2026년 8월 현재, Stable Diffusion 3.5라는 최신 버전이 공개되어 있으며, 무료로 몇 번이든 사용할 수 있다는 것이 최대 장점입니다. 다른 이미지 생성 AI는 한 달에 수십 장까지만 만들 수 있거나 월정액 요금이 드는 경우가 많지만, Stable Diffusion은 오픈 소스(누구나 자유롭게 사용할 수 있는 구조)이기 때문에 횟수 제한이 없습니다. 게다가 생성한 이미지는 상업적 이용도 가능하기 때문에, SNS 게시용 일러스트나 YouTube 썸네일, 블로그 삽화 등 비즈니스에도 그대로 활용할 수 있습니다. 프로그래밍 지식이 없어도 자신의 PC에 설치해서 사용할 수 있어, 기밀성이 높은 이미지도 안심하고 만들 수 있습니다.
먼저 Stable Diffusion을 사용하기 위한 환경을 갖춥니다. 초보자에게는 「Stable Diffusion web UI(웹 유아이)」라는 무료 소프트웨어를 PC에 설치하는 방법을 추천합니다. 필요한 것은 Windows 또는 Mac PC, NVIDIA 제 그래픽 보드(RTX 3060 이상 권장), 메모리 16GB 이상입니다. 그래픽 보드가 탑재되지 않은 PC라도 Google Colab(구글이 제공하는 무료 클라우드 환경)을 사용하면 브라우저만으로도 실행할 수 있습니다. 설치 방법은 공식 GitHub에서 최신 버전을 다운로드하고, 압축 해제한 폴더 내의 실행 파일을 더블 클릭하기만 하면 됩니다. 첫 실행 시에는 필요한 파일을 자동으로 다운로드하므로 약 10분 정도 기다립니다. 실행이 완료되면 브라우저에 조작 화면이 자동으로 열립니다.
조작 화면이 열리면 일러스트를 생성하기 위한 설정을 합니다. 화면 상단에 「Prompt(프롬프트)」라는 입력란이 있으니, 여기에 영어로 「어떤 그림을 그려줬으면 하는지」를 작성합니다. 예를 들어 「a cute cat sitting on a chair, anime style(의자에 앉아 있는 귀여운 고양이, 애니메이션 스타일)」처럼 구체적으로 쓰면 더 원하는 대로의 그림이 완성됩니다. 그 아래에 있는 「Negative Prompt(네거티브 프롬프트)」에는 반대로 「그려주지 않았으면 하는 것」을 작성합니다. 예를 들어 「low quality, blurry(저화질, 흐릿함)」라고 입력하면 품질이 낮은 그림을 피할 수 있습니다. 다음으로 화면 오른쪽의 「Sampling Steps(샘플링 스텝 수)」를 20에서 30으로 설정합니다. 숫자가 클수록 더 정밀하게 그림을 만들지만, 시간도 더 걸립니다. 「CFG Scale(CFG 스케일)」은 7 그대로 두면 됩니다. 이것은 프롬프트를 얼마나 충실히 재현할지를 결정하는 수치입니다.
설정이 끝나면 화면 하단의 주황색 「Generate(생성)」 버튼을 누릅니다. 그러면 화면 오른쪽에 실시간으로 그림이 완성되어 가는 모습이 표시됩니다. PC 사양에 따라 다르지만, 대략 30초에서 1분 정도면 완성됩니다. 생성된 이미지는 web UI의 폴더 내 「outputs/txt2img-images」에 자동으로 저장됩니다. 만약 원하는 그림이 나오지 않았다면, 프롬프트를 다시 작성하고 「Generate」를 다시 누르면 몇 번이든 다시 시도할 수 있습니다. 같은 프롬프트라도 「Seed(시드값)」라는 난수를 바꾸면 매번 다른 그림이 만들어집니다. 마음에 드는 그림이 완성되면, 해당 이미지 아래에 표시되는 설정 정보를 복사해 두면 나중에 같은 느낌의 그림을 재현할 수 있습니다. 완성된 이미지는 PNG 형식으로 저장되므로, 그대로 SNS에 업로드하거나 이미지 편집 소프트웨어로 가공할 수 있습니다.
초보자가 자주 실수하는 포인트는 3가지입니다. 첫 번째는 「새까만 이미지만 나온다」는 현상입니다. 이것은 그래픽 보드의 메모리 부족이 원인이므로, 이미지 크기를 512×512로 줄이거나 「–medvram」이라는 실행 옵션을 설정 파일에 추가하면 해결됩니다. 두 번째는 「프롬프트를 한국어로 써도 반응하지 않는다」는 문제입니다. Stable Diffusion은 영어 기반으로 학습되어 있기 때문에, 한국어로 입력하면 정확도가 떨어집니다. DeepL이나 Google 번역으로 영어로 변환한 후 입력하세요. 세 번째는 「얼굴이나 손이 심하게 뭉개진다」는 실패입니다. 이를 방지하려면 네거티브 프롬프트에 「bad anatomy, extra fingers(이상한 체형, 여분의 손가락)」를 추가하거나, 「Restore faces(얼굴 복원 기능)」에 체크를 넣으면 개선됩니다. 또한, 모델 데이터를 변경하는 것만으로도 화질이 크게 달라지므로, Civitai 등의 모델 배포 사이트에서 평가가 높은 모델을 다운로드해서 시험해 보는 것도 추천합니다.
기본 조작에 익숙해지면 더 고급스러운 사용 방법에 도전할 수 있습니다. 첫 번째는 「LoRA(로라)」라는 추가 학습 데이터를 사용하는 방법입니다. LoRA를 도입하면 특정 캐릭터나 화풍을 손쉽게 재현할 수 있습니다. 예를 들어 「지브리 풍」「픽사 풍」과 같은 유명 스튜디오의 화풍을 모방한 LoRA가 무료로 배포되고 있습니다. 두 번째는 「img2img(이미지에서 이미지로)」 기능입니다. 직접 그린 밑그림이나 사진을 업로드하면, 그것을 기반으로 AI가 완성해 줍니다. 러프 스케치를 아름다운 일러스트로 변환하거나, 낮 사진을 야경으로 바꾸는 것도 가능합니다. 세 번째는 「ControlNet(컨트롤넷)」이라는 확장 기능으로, 포즈나 구도를 세밀하게 지정할 수 있습니다. 막대 인간 선화를 그리기만 해도 AI가 그 포즈 그대로의 캐릭터를 그려주기 때문에, 일러스트의 구도 잡기가 훨씬 편해집니다. 이러한 기능들을 조합하면 프로 수준의 일러스트도 만들 수 있습니다.
이 글은 AI Friends 의 크로스포스트입니다.