DukeZHB/finch

Deep NLP Examples in TensorFlow 1

---

Contents

• NLP
  • Word Embedding（词向量）
  • Text Classification（文本分类）
  • Text Generation（文本生成）
  • Text Matching（文本匹配）
  • Sequence Labelling（序列标记）
  • Sequence to Sequence（序列到序列）
  • Question Answering（问题回答）
  • Knowledge Graph（知识图谱）
  • TensorFlow
  • Spark
• Speech
• Vision
• Reinforcement Learning

---

Requirements

• Python 3 and Jupyter Notebook are required

  (CPU User) $ pip3 install tensorflow sklearn scipy bunch tqdm wget
  
  (GPU User) $ pip3 install tensorflow-gpu sklearn scipy bunch tqdm wget
  

---

Word Embedding（词向量）

• Skip-Gram     Notebook

• CBOW     Notebook

Text Classification（文本分类）

• TF-IDF + LR     Notebook

• Text-CNN     Notebook

  • Word + Char Embedding     Notebook

  • Gated CNN     Notebook

  • ConvLSTM     Notebook

• Bi-RNN     Notebook

• Attention-Pooling     Notebook

• FastText     Notebook

Text Generation（文本生成）

• Language Model（语言模型）

  • RNN + Beam-Search     Notebook

  • Dilated-Conv + Beam-Search     Notebook

  • Self-Attention + Beam-Search     Notebook

  • Character Aware     Notebook

Text Matching（文本匹配）

• User-Item Matching     Folder

• Question Matching     Folder

Sequence Labelling（序列标记）

• POS Tagging（词性识别）

  • Bi-RNN + CRF     Notebook

• Chinese Segmentation（中文分词）

  • Bi-RNN + CRF     Notebook

Sequence to Sequence（序列到序列）

• Learning to Sort（机器排序）

  • Seq2Seq + Attention + Beam-Search     Notebook

  • Pointer Network     Notebook

  • Transformer     Notebook

• Learning to Dialog（机器对话）

  • Transformer     Notebook

• VAE (Variational Autoencoder)

  • Recurrent VAE     Notebook

    • Variational Inference via tf.distributions     Notebook

  • "Toward Controlled Generation of Text" (ICML 2017)     Folder

• Data Argumentation（数据增强）

  • Back Translation     Notebook

Question Answering（问题回答）

• Memory Network（记忆网络）

  • End-to-End Memory Network     Notebook

  • Dynamic Memory Network     Notebook

Knowledge Graph（知识图谱）

• Knowledge Representation（知识表示）

  • RDF + SPARQL     Notebook (WN18)

• Link Prediction (链路预测)

  • DistMult (1-1 Scoring)     Notebook (WN18)

  • DistMult (1-N Scoring)     Notebook (WN18)

  • ConvE (1-N Scoring)     Notebook (WN18)

TensorFlow

• Loading Data (导入数据)

  • TFRecord: Fixed Length     Notebook

  • TFRecord: Padded Batch     Notebook

• Project Template（项目模版）

  • TF Estimator Template     Folder

  • TF Dataset Template     Folder

Spark

• Text Classification     Notebook

• Topic Modelling     Notebook

Speech（语音)

• Bi-RNN + CTC     Notebook

Computer Vision（计算机视觉)

• DCGAN     Notebook

Reinforcement Learning（强化学习)

• Policy Gradient     Notebook