/Face-Landmark-ControlNet

Proof of concept for control landmarks in diffusion models!

Primary LanguagePythonApache License 2.0Apache-2.0

Test

  • Prompt : portrait girl, disney style
Input Landmarks Results
img.png img_1.png img_2.png
img_3.png img_4.png img_6.png
img_7.png img_8.png img_10.png

결론

  1. pretrained 모델로 사용하기엔 무리가 있다.
  2. 가지고 있는 데이터로 controlnet이나 dreambooth를 finetuning 하는 방향으로 재설정 해야겠다.