Stable Diffusion 2.1 발표 및 변경점

한국 기준시간으로 2022년 12월 8일 00:00에 공식적으로 Stable Diffusion 2.1이 발표 되었습니다.

자세한 변경점을 돌려보기 전에 Stable Diffusion 2.1 발표에 따른 변경점을 간단히 확인해 보고자 합니다.

 

1. 좀 더 완화된 성인용 필터
512x512 및 768x768 해상도 모두에 대한 Stable Diffusion 2.1 텍스트-이미지 모델의 업데이트로, Stable Diffusion 2.0때 지나치게 제한적이었던 성인 컨텐츠에 대해 상대적으로 좀 더 완화된 필터링을 걸칩니다. (이것때문에 1.5와 1.4를 선호하는 분들도 계셨죠)

2. 건축, 인테리어, 조경 등의 품질 향상
사람 등을 대상으로 하는 데이터셋에서는 정책이 수시로 바뀌는 반면, 이러한 정책에 영향을 받지 않는 배경, 건축물, 인테리어, 조경 등에서 좀 더 높은 수준의 결과물을 보여줌

3. 향상된 해부학적 구조와 손 모양 지원
Stable Diffusion 2.1에서는 1.4, 1.5, 2.0때 가장 많은 문제가 되었던 인체 해부학적으로 맞지 않은 결과물 및 좀처럼 나아지지 않던 손 모양에 대한 결과물의 수준을 대폭 향상시켰습니다. (괜찮은 데이터셋과 결합했을 때 향상의 정도를 확인해 봐야할 듯 합니다)

4. 일부 부정적인 프롬프트도 지원
Stable Diffusion 2.1에서는 긍정적인 표현으로만 사용가능하던 프롬프트 외에 제한적이지만 부정적인 프롬프트도 사용 가능하게 되었습니다. 

5. xformers가 설치되지 않은 경우 전체 정밀도(full precision)로 전환
fp16을 강제 활성화하려면 ATTN_PRECISION=fp16 python <thescript.py>처럼 사용해야 함
(이 부분은 Apple Silicon M1, M2에 영향을 주는 지점인데, 실제적으로 성능에 어떤 영향을 미치는지는 확인해 봐야할 거 같습니다. 기본적으로 CoreML 지원의 Apple Silicon 모델에서는 fp16을 사용하는 것으로 기억하고 있기 때문입니다)