LoRA 사용법 A to Z – 스타일 입히는 AI 이미지 생성 가이드

Stable Diffusion으로 그림을 만들다 보면, 어느 순간 그림이 다 비슷비슷하게 나온다는 느낌을 받을 수 있어요. 바로 그럴 때 필요한 기능이 LoRA(Low-Rank Adaptation)입니다. LoRA는 캐릭터 스타일, 의상, 분위기, 작화 스타일 등을 AI에게 학습시켜, 기존 모델에 부담 없이 적용할 수 있게 해주는 기술이에요. 이번 글에서는 LoRA의 개념부터 설치, 사용법, 프롬프트 적용 방식, 추천 모델까지 처음부터 끝까지 A to Z로 정리해 드립니다.

LoRA란 무엇인가요? – AI 그림에 스타일을 더하는 방법

LoRA의 개념 이해

LoRA는 기존 모델에 비해 용량이 작고 빠르게 적용 가능한 추가 학습 모듈입니다. 완전한 모델(. ckpt)을 새로 만드는 게 아니라, 원래 모델을 유지한 채 일부만 조정해서 작품 스타일이나 특정 캐릭터의 특성을 쉽게 적용할 수 있어요.

LoRA의 장점

• 용량이 작아 로딩 속도가 빠름 (보통 수 MB~수십 MB)
• 기존 모델과 호환됨 (v1.5, SDXL용 구분 필요)
• 캐릭터, 의상, 배경 스타일 등 선택적 적용 가능

한 마디로, LoRA는 “내 스타일을 AI 그림에 입히는 도구”입니다.

LoRA 설치 방법 – 어디서 다운로드하고 어디에 넣을까?

파일 다운로드 위치

가장 널리 쓰이는 LoRA 공유 사이트는 Civitai입니다. 여기서 원하는 캐릭터, 스타일, 작가풍 LoRA를 검색하고 다운로드할 수 있어요.

폴더 경로 안내

다운로드한 LoRA 파일(. safetensors 또는. pt)은 아래 경로에 넣어야 WebUI에서 인식됩니다.

stable-diffusion-webui/models/Lora/

여기 넣은 뒤 WebUI를 재시작하면 자동으로 적용됩니다.

WebUI에서 LoRA 사용하는 방법

LoRA 활성화 위치

txt2 img 또는 img2 img 탭 하단에 있는 “Lora” 패널에서 사용하고 싶은 LoRA를 클릭하면, 프롬프트 창에 자동으로 <lora:파일명:1> 형식으로 추가됩니다.

가중치 조절

뒤 숫자 :1은 적용 강도를 의미합니다. :0.6 ~ :0.8 정도가 자연스럽고 추천되는 기본값이며, :1.0 이상은 표현이 강해지지만 왜곡될 가능성도 있습니다.

프롬프트에 LoRA 적용하기 – 문장 속에서 호출하는 법

기본 사용법

프롬프트에 아래와 같이 직접 입력해도 적용됩니다.

<lora:character_style_lora:0.7>, 1girl, red dress, fantasy background, masterpiece

여러 LoRA 혼용하기

두 개 이상의 LoRA도 함께 사용할 수 있습니다.

<lora:characterA:0.6> <lora:backgroundStyle:0.8>

단, 동시에 너무 많은 LoRA를 넣으면 서로 충돌하거나 품질이 떨어질 수 있으니 2~3개 이내를 추천합니다.

Civitai에서 인기 있는 LoRA 모델 추천

캐릭터 기반

• Marin Kitagawa LoRA – ‘그 비스크돌’ 애니 작화 스타일
• 2B Style LoRA – 니어 오토마타풍 SF 캐릭터

스타일/작가풍 기반

• Makoto Shinkai LoRA – 빛과 배경 강조 스타일
• Ghibli Style LoRA – 감성 배경화 + 부드러운 색감

모든 LoRA는 Civitai LoRA 태그 검색에서 확인 가능합니다.

LoRA 사용 시 주의할 점 – 품질 저하와 충돌 방지

모델 버전에 맞춰야 한다

LoRA는 학습된 모델 버전에 따라 호환됩니다.

• v1.5 모델 기반 LoRA는 v1.5 기반 base model에만
• SDXL용 LoRA는 SDXL 모델에서만 작동

잘못된 버전에 적용하면 작동이 안 되거나 결과물이 이상해질 수 있어요.

LoRA를 너무 많이 쓰면 충돌 가능

캐릭터 2명 이상 + 스타일 + 의상 LoRA까지 동시에 쓰면 품질이 떨어질 수 있어요. :0.5 ~ 0.8 정도로 낮춰가며 테스트하는 걸 추천합니다.

FAQ

LoRA는 어디서 다운로드하는 게 좋나요?

가장 대표적인 사이트는 civitai.com입니다. 다양한 필터와 태그 검색이 가능해요.

LoRA 여러 개를 한 번에 적용해도 되나요?

가능하지만 2~3개 이하로 제한하는 게 좋습니다. 너무 많으면 모델이 혼란스러워져 품질이 저하됩니다.

LoRA는 프롬프트 없이도 적용되나요?

아니요. 반드시 프롬프트에 <lora:파일명:가중치> 형태로 입력하거나, LoRA 메뉴에서 클릭해 추가해야 반영됩니다.

LoRA 사용 요약

LoRA 핵심 정리

• LoRA는 AI 이미지에 스타일을 입히는 경량 모듈
• WebUI에서 models/Lora 폴더에 파일 저장
• 프롬프트에 직접 호출하거나 메뉴에서 클릭해 적용
• Civitai에서 인기 LoRA 모델 검색 가능
• 동시 사용은 2~3개 이내, 강도는 0.6~0.8 추천

추천글

Stable Diffusion 처음 설치하는 법 – WebUI부터 실행까지 따라하기

Stable Diffusion 처음 설치하는 법 – WebUI부터 실행까지 따라하기

ControlNet으로 원하는 포즈 그대로 그림 그리기 – 모듈별 사용법 정리

ControlNet으로 원하는 포즈 그대로 그림 그리기 – 모듈별 사용법 정리