/ProTraining-ControlNet

论文复现课题《基于ControlNet引导的动漫线稿上色》

Primary LanguagePython

基于 ControlNet 引导的动漫线稿上色

课题任务

  • 理解动漫上色任务和该论文动机
  • 以该文章为基础，在相关工作中找 6 篇文章以上，理解文章内容，总结并提出自己关于上色任务的见解
  • 理解ControlNet论文方法（有参考代码），并复现

每周内容

Week02

（实际上对后续工作作用不大hhh）

  • 前置知识了解
  • 有引导上色、无引导上色
  • 4 种基于不同类型的上色
  • Canny 边缘检测
  • HED 边缘检测
  • ControlNet 初步认识
  • 后续课题研究计划

Week04

  • 图像评价指标
  • Sobel 算子计算图像梯度
  • Stable Diffusion
  • ControlNet 原理

Week05

  • Conditioning
  • Attention 机制
  • CLIP
  • Text-to-Image
  • Auto-Encoder
  • Diffusion Model

Week06

  • Attention 机制
  • Fine-Tuning

Week07

  • DragGAN & Diffusion Model
  • 代码逻辑结构
  • 训练实验

Week08

  • 总结

学习笔记

知识点笔记.md