본문 바로가기

A LIGHTHOUSE KEEPER'S LOG READING THE PATTERNS OF THE WORLD

AI 스튜디오 대표 이미지 01 / AI STUDIOAI 스튜디오도구가 막히면 등대지기가 먼저 부딪혀 봅니다. 그림·글·자동화, 그리고 돌아가는 길까지 AI Lab 대표 이미지 02 / AI LABAI LabAI 직원들과 회사를 굴리며 실제로 겪은 일을 한 편씩 꺼냅니다 라보의 이세계 여행 대표 이미지 03 / LABO'S ISEKAI라보의 이세계 여행등대지기 라보가 문 너머 다른 세계로 떠나는 툰 연재
VIVA STORY LAB

같이 여행해요.

AI 스튜디오

로라로 인체가 자꾸 틀어질 때, 몸부터 가르치면 돼요?

by Labo 2026. 11. 7.

로라로 인체가 자꾸 틀어질 땐 옷 데이터와 인체 데이터를 나눠 몸부터 따로 학습시켜 보세요. 등대지기 라보입니다. 오늘은 로라로 인체가 자꾸 틀어질 때 몸부터 따로 가르친 이야기, 그러니까 옷 입은 그림체 데이터와 몸의 구조만 보이는 인체 데이터를 나눠서 학습시킨 제 기록을 이야기할게요. 해 보고 나서 제 생각엔 옷보다 몸이 먼저였어요. 지난번 끝에 "몸만 따로요"라고 했더니, 손님이 문을 열자마자 그 말부터 꺼냈거든요.

로라로 인체가 자꾸 틀어질 때 몸부터 가르치면 돼요, LoRA body anatomy training separate dataset, 로라 인체 학습 데이터 따로, 인체 드로잉처럼 가르치기

옷을 잠깐 내려놓고, 몸의 뼈대부터 다시 보는 날이에요.

"로라로 인체가 자꾸 틀어지면, 몸만 따로 가르친다고요?"

손님: 라보 씨, 지난번에 몸만 따로 가르쳤다고 하셨잖아요. 그게 무슨 뜻이에요? 로라를 하나 더 만든다는 거예요?

라보: 먼저 왜 그랬는지부터요. 지난 편에서 55장 로라가 클로즈업은 됐는데 전신은 두 번 다 실패했죠. 여러 옷을 입은 같은 여자가 한 사람으로 안 보였고, 인체도 잘 안 나왔어요.

손님: 그리고 라보 씨 짐작은 옷이 너무 다양해서 몸을 못 배운 것 같다는 거였고요.

라보: 맞아요. 그래서 반대로 해 봤어요. 옷을 다 빼고 몸의 구조만 보이는 그림으로 따로 가르쳤어요. 미술 시간 인체 드로잉처럼요.

손님: 아, 미술 시간에 목각 인형 세워 놓고 그리는 그거요?

라보: 네, 그 느낌이에요. 그림 배울 때도 옷 주름부터 그리지 않잖아요. 머리, 목, 어깨, 팔, 허리, 다리가 어떻게 이어지는지 먼저 보고, 옷은 그 위에 입히죠. 그 순서를 AI한테도 해 본 거예요.

"몸 그림은 어떤 걸 넣어요?"

손님: 그럼 몸 그림은 어떤 걸 골라요?

라보: 기준은 하나였어요. 옷에 가리지 않고 몸의 구조가 보이는 그림. 옷 입은 그림을 넣으면 또 옷을 같이 배우니까, 이 묶음에선 옷을 뺐어요.

손님: 지난번에 말한 "가르칠 것 하나만 보이는 그림"이랑 같은 얘기네요.

라보: 그거예요. 첫 로라 때부터 계속 나오는 말이에요. 그림체를 가르칠 묶음에는 그림체가, 몸을 가르칠 묶음에는 몸이 보이게요. 한 장에 이것저것 다 들어 있으면 AI가 뭘 배울지 몰라요.

wooden mannequin pose reference, 목각 인형 마네킹 예시, 몸의 구조만 보이는 인체 드로잉 참고

몸의 구조만 보이는 그림이 어떤 느낌인지 보여 주는 목각 인형 예시예요. 실제 학습 그림이 아니에요.

라보: 고르는 기준은 같아요. 블로그에는 제가 실제로 넣은 그림을 보여 드릴 수 없어서, 이렇게 목각 인형이나 마네킹 예시로만 보여 드려요.

"그림체 그림이랑 몸 그림은 몇 장씩이에요?"

라보: 숫자로 보면 이래요.

  • 옷 입은 그림체 데이터: 50장
  • 인체 데이터: 79장
  • 둘 다 반복 7
  • 베이스 모델: wai Illustrious (v170)

손님: 몸 그림이 더 많네요?

라보: 네, 몸 쪽이 79장으로 더 많아요. 그림체 쪽은 옷 입은 그림 50장이고요. 둘을 한 묶음에 섞지 않고 따로 뒀어요.

손님: 반복 7은요? 저번에 반복 5라고 하지 않으셨어요?

라보: 잘 기억하네요. 그림 고르는 편에서 학습 폴더 이름 앞에 붙는 숫자가 반복 수라고 했죠. 예시 폴더로 보면 C:\lora_example\5_lbtoon01에서 앞의 5가 "그림 한 장을 한 에폭에 다섯 번 본다"는 뜻이었어요. 55장 로라 때는 반복 5였고, 이번엔 두 묶음 다 7로 맞췄어요.

two LoRA training datasets style and anatomy, 그림체 데이터 50장과 인체 데이터 79장, 반복 7, wai Illustrious 베이스 모델

옷 입은 그림체 묶음과 인체 묶음을 나눠 놓은 개념도예요. 둘 다 반복 7, 베이스는 같은 모델이에요.

"알베도로 하다가 왜 wai로 바꿨어요?"

손님: 잠깐만요. 베이스 모델이 wai예요? 런팟에서 알베도 받으셨다면서요.

라보: 맞아요. 처음엔 알베도(AlbedoBase XL)로 학습했어요. 그러다 인체와 선화 쪽 때문에 wai Illustrious로 넘어왔어요. 둘 다 SDXL 계열이에요. 그 얘기를 길게 하기보다, 이때 같이 정한 규칙 하나가 더 중요해요.

손님: 규칙이요?

라보: 학습한 베이스 모델로 생성한다. wai로 학습한 로라는 wai에 걸어서 뽑아요. 알베도에 걸지 않아요.

손님: 둘 다 SDXL이면 아무 데나 걸어도 되는 거 아니에요? 파일 모양은 똑같잖아요.

라보: 걸리긴 걸려요. 그런데 로라는 혼자 그림을 그리는 파일이 아니에요. 베이스 모델 위에 얹혀서, 그 모델이 원래 그리던 것에서 얼마나 바꿀지를 배운 파일이에요. 그러니까 wai 위에서 배운 "이만큼 바꿔라"를 알베도 위에 얹으면, 출발점이 달라서 같은 결과가 안 나와요.

손님: 아, 같은 화장법이라도 얼굴이 다르면 다르게 보이는 거랑 비슷하네요.

라보: 좋은 비유예요. 그러니까 로라 파일을 받거나 만들면, 어떤 베이스로 학습했는지 같이 적어 두면 나중에 헷갈리지 않아요.

generate with the same base model used for LoRA training, 학습한 베이스 모델로 생성, wai로 학습한 로라는 wai에, 알베도에 걸지 않기

wai로 배운 로라는 wai에 걸고, 알베도 쪽 길은 막아 둔 규칙 그림이에요.

"그럼 옷보다 몸이 먼저예요?"

손님: 그래서요, 몸만 따로 가르치니까 어땠어요?

라보: 잘 나오고 있어요. 옷 입은 그림체 50장, 인체 79장을 따로 두고, wai에 학습해서 wai로 뽑는 방식이요.

손님: 와, 드디어 됐다는 말이 나왔네요.

라보: 네. 그동안 생각과 전혀 다른 그림, 전신 두 번 실패만 이야기했으니까요. 해 보고 나서 남은 건 이거예요. 제 생각엔 옷보다 몸이 먼저예요. 인체 드로잉처럼 구조부터 가르치면 옷은 그 위에 입혀져요. 그리고 학습한 모델로 생성해야 해요.

손님: 그럼 이제 끝이에요?

라보: 끝은 아니에요. 그림을 나누고 나니까 그다음에 신경 쓸 게 또 생겼어요. 그림마다 붙이는 설명 글이요. 캡션이요. 그림을 아무리 잘 골라도, AI는 그 그림에 붙은 글을 같이 읽고 배우거든요. 다음엔 그 캡션을 Claude, GPT, Grok 셋에게 맡겨 본 이야기를 할게요.

손님: AI 셋이요? 그럼 셋이 다 똑같이 써 줘요?

라보: 그게 아니라서 다음 편이 있는 거예요.

자주 묻는 질문

Q. 로라에 인체를 따로 가르칠 수 있어요?
저는 옷을 다 빼고 몸의 구조만 보이는 그림으로 따로 가르쳤어요. 미술 시간 인체 드로잉처럼요. 지금 잘 나오고 있어요.

Q. 그림체 그림과 인체 그림은 몇 장씩 넣었어요?
옷 입은 그림체 데이터 50장, 인체 데이터 79장이에요. 둘 다 반복 7, 베이스는 wai Illustrious(v170)였어요.

Q. wai로 학습한 로라를 알베도에 걸어도 돼요?
저는 걸지 않아요. 규칙은 "학습한 베이스 모델로 생성한다"예요. 로라는 학습한 베이스 위에서 배운 차이라서, 다른 베이스에 얹으면 같은 결과가 안 나와요.

Q. 학습 폴더 이름 앞 숫자는 뭐예요?
반복 수예요. 5_lbtoon01이면 그림 한 장을 한 에폭에 다섯 번 봐요. 이번엔 두 묶음 다 7이었어요.

공식 주소
Kohya_ss 공식 깃허브 (오픈소스, 무료)
ComfyUI 공식 깃허브 (오픈소스, 무료)
Hugging Face (베이스 모델 받는 곳)
Claude (Anthropic)
ChatGPT (OpenAI)
Grok (xAI)
※ 깃허브는 코드를 공개해 두는 사이트라 실행 전에 안에 뭐가 들었는지 누구나 볼 수 있어요.

이 편에서 작가가 한 일
옷 입은 그림체 그림 50장과, 옷을 빼고 몸의 구조만 보이는 그림 79장을 따로 나눠 골랐어요.
인체와 선화 때문에 베이스를 알베도에서 wai Illustrious로 바꾸고, 학습한 베이스 모델로 생성한다는 규칙을 지켰어요.
AI에게 맡긴 일
두 묶음을 반복 7로 wai Illustrious(v170) 위에서 학습했어요.
그 로라를 wai에 걸어 그림을 뽑았어요.

시리즈 · AI 웹툰 그리려면
1편 AI 웹툰 그리려면 어떻게 해야할까
2편 스테이블 디퓨전이 뭐예요?
3편 SD1.5, SDXL, FLUX는 뭐가 달라요?
4편 세이프텐서는 왜 이름이 그래요?
5편 AI 그림은 왜 엔비디아예요?
6편 kohya 코야
7편 그림은 몇 장 준비해야 할까?
8편 kohya 학습과 LoRA
9편 그림체 잘 나오나요?
10편 1스텝에 52초, 왜 이렇게 느린거지
11편 런팟은 어떻게 써요?
12편 로라 학습에 좋은 그림을 다 넣었는데 왜 엉뚱한 그림이 나와요?
13편 내 그림, AI 그림 사이트에 올려도 괜찮아요?
14편 스웜 대신 ComfyUI, 포터블로 어떻게 깔아요?
15편 ComfyUI 노드, 기본 워크플로는 어떻게 이어요?
16편 ComfyUI 워크플로 JSON 파일이 왜 안 열려요?
17편 로라 에폭 4랑 6 그림이 왜 똑같아요?
18편 ComfyUI 그림 크기, 매번 손으로 넣어요?
19편 로라 학습, 같은 캐릭터가 왜 다른 사람처럼 나와요?
20편 (이 글) 로라로 인체가 자꾸 틀어질 때, 몸부터 가르치면 돼요?
21편 (다음) 로라 캡션, AI한테 맡겨도 돼요?
22편 ControlNet 스케치를 넣으면 AI 그림체가 달라져요?
23편 AI 채색했더니 왜 그림이 납작해져요?
24편 AI 웹툰 얼굴, FaceDetailer로도 왜 아직 안 돼요?

작성 기준: 2026년 10월, 라보의 실제 기록. 장 수와 반복 수, 베이스 모델 버전(wai Illustrious v170)은 제가 학습할 때 기준이에요. 프로그램 화면과 모델 버전은 바뀔 수 있어요.

등대 일지. 등대는 불빛보다 먼저 돌로 쌓는다. 제 생각엔 그림도 옷보다 몸이 먼저다. 그리고 불은 돌을 쌓은 그 자리에서 켠다.