스테이블 디퓨전에서 텍스트에서 이미지 생성(txt2img)과 이미지 변환(img2img)의 차이점

1. 텍스트에서 이미지 생성(txt2img)

• 설명: 텍스트 프롬프트를 입력하면 AI가 완전히 새로운 이미지를 생성하는 방식입니다.
• 입력: 텍스트 프롬프트 + 랜덤 시드
• 출력: 입력된 텍스트를 기반으로 생성된 완전히 새로운 이미지
• 특징:
  • 처음부터 랜덤 노이즈에서 이미지를 생성
  • 창의적이고 자유로운 이미지 생성 가능
  • 프롬프트에 따라 세밀한 컨트롤 가능
• 사용 예시:
  • "A futuristic city at sunset with flying cars" (미래 도시를 창조적으로 생성)
  •  
   

프롬프트 : A futuristic city at sunset with flying cars

2. 이미지 변환(img2img)

• 설명: 기존 이미지를 기반으로 프롬프트에 맞게 변형하여 새로운 이미지를 생성하는 방식입니다.
• 입력: 기존 이미지 + 텍스트 프롬프트 + 노이즈 정도(denoising strength)
• 출력: 원본 이미지의 형태를 어느 정도 유지하면서도, 프롬프트에 따라 변형된 이미지
• 특징:
  • 원본 이미지를 활용하여 스타일 변환이나 특정 요소 추가 가능
  • denoising strength 값을 조정하여 변화 정도를 설정 가능 (높을수록 원본에서 멀어짐)
  • 이미지의 구조를 유지하면서도 분위기, 스타일, 색감 등을 조정 가능

denoising strength = 0.3	denoising strength = 0.4	denoising strength = 0.5
denoising strength = 0.6	denoising strength = 0.7	denoising strength = 0.8
denoising strength = 0.9

• 사용 예시:
  • 흑백 이미지를 컬러로 변환
  • 실사 이미지를 애니메이션 스타일로 변환
  • 러프한 스케치를 세밀한 그림으로 변환

비교 요약

 

기능	txt2img	img2img
입력	텍스트 프롬프트	이미지 + 텍스트 프롬프트
생성 방식	랜덤 노이즈에서 새 이미지 생성	기존 이미지에서 변형
원본 이미지 유지	없음	부분적으로 유지 가능
활용	창작, 새로운 이미지 생성	스타일 변경, 리터칭, 디테일 강화

따라서,

• 창의적인 새로운 이미지를 만들고 싶다면 → txt2img
• 기존 이미지에서 변형하거나 스타일을 변경하고 싶다면 → img2img