SlavaElizarov/deep_learning

deep learning

Введение

• План лекции
• Слайды: pdf
• Домашнее задание
• Практика
• Дополнительная литература

Линейные модели

• План лекции
• Слайды: pdf
• Домашнее задание
• Практика
• Дополнительная литература

Обучение нейронных сетей

• План лекции
• Слайды: pdf
• Домашнее задание
• Практика
• Дополнительная литература

Функции активации, инициализация параметров

• План лекции
• Слайды: pdf
• Домашнее задание
• Практика
• Дополнительная литература
  • Understanding the difficulty of training deep feedforward neural networks
  • Delving Deep into Rectifiers: Surpassing Human-Level Performance on ImageNet Classification
  • Dropout: A Simple Way to Prevent Neural Networks from Overfitting

Введение в сверточные сети

• План лекции
• Слайды: pdf
• Домашнее задание
• Практика
• Дополнительная литература

Интерпретация, adversarial examples

• План лекции
• Слайды: pdf
• Домашнее задание:
  • Домашнее задание 3
• Практика:
  • Определение значимых зон
  • Визуализация внутреннего состояния
  • Adversarial examples
• Дополнительная литература:
  • Большая обзорная статья на distill.pub
  • Deep Inside Convolutional Networks: Visualising Image Classification Models and Saliency Maps
  • VisualBackProp: efficient visualization of CNNs
  • SmoothGrad: removing noise by adding noise
  • Пакет Keras-vis, реализующий большинство современных методов визуализации