어쩌다가 text-to-image 생성 AI 찾아보다가 스테이블 디퓨전 오픈소스로 M1 Macbook Pro에서도 돌릴수 있다길래 직접 설치해서 돌려봤습니다. 어제 Huggingface의 diffuser로 Quickstart로 Python notebook에서 실행하는데 성공했는데, 퀄러티가 처참하더군요. 이미지가 나오긴 나오는데 그냥 대충 프롬프트 비슷한 게 나온다… 수준이었고, 이게 그냥 기본 맥북프로로는 쉽게 안되나 보다 싶었습니다.

그러다가 좀더 검색해서 찾아보니 코딩할 필요없이 설치해서 쉽게 쓸수 있는 Web 형태의 UI 툴이 있고, 사람들이 만든 모델 공유하는 곳도 있고 해서 이것저것 찾아서 테스트 해보니 꽤 그럴 듯 하게 나오네요. 원하는 결과를 뽑아주는 모델(checkpoint) + LoRA를 잘 찾는게 핵심인 거 같습니다. 모델의 제약인지 원하는대로 자유자재로 나오지는 않네요. 의도하지 않았는데 후방짤도 자기가 스스로 만들어 내기도 하구요. 

오픈소스 형태다보니 뭐든 가능하고, 차마 클릭해 볼수 없는 XXX rate 급의 하드코어 모델도... 나옵니다. 제가 쓴 모델도 이거 만들어 올린 사람이 어떤 데이터 가지고 한건지 알수가 없고,  문제의 소지가 있을 수도 있지 않나 싶어요.