동적 이미지 생성 ,(eum 몬스터)

이주원·2025년 5월 15일

컴퓨터언어

목록 보기
34/50

eum 캐릭터 이미지들을 준비합니다.


diffusers 모델을 설치합니다.

이미지를 생성해주는 모델입니다.


  • Stable Diffusion은 텍스트를 입력받아 이미지를 생성하는 AI 모델

  • DreamBooth는 AI가 특정 대상(사람, 물건 등)을 더 잘 기억하고 생성하게 만드는 방법

  • LoRA는 가벼운 방식으로 기존 AI 모델을 튜닝하는 기법

  • Stable Diffusion 모델을 LoRA(Low-Rank Adaptation) 방식으로 DreamBooth 훈련을 수행

  • LoRA 기반 DreamBooth 훈련을 통해, 주어진 이미지(INSTANCE_DIR)를 바탕으로 특정 인물이나 객체(sks person)를 Stable Diffusion 모델(runwayml/stable-diffusion-v1-5)에 맞춤형으로 학습

  • 여기서 LoRA는 외형을 학습하기위함 입니다.


  • LoRA를 적용시킨다음에 에니메이션을 생성했습니다.
  • 여기서 LoRA는 움직임을 표현하기 위함입니다.
  • pipe(...)는 실제 텍스트 프롬프트 → 애니메이션 생성 작업을 수행합니다.
  • "A cute sks person is walking with a smiling face." 이 문장을 기반으로 이미지를 생성합니다.
  • sks person → DreamBooth로 훈련한 너의 캐릭터
  • is walking → Motion LoRA에서 걷기 모션을 적용

이미지가 너무 변질됬어요 성능이 별로인건가?
아니면 데이터셋이 부족해서그랬는지...

끝.

profile
뭐가될지 모름

0개의 댓글