NLP & KnowledgeGraph


本仓库包含NLP和KG的一些课程以及项目练习代码。

一、更新记录

[2023/05/17]:重新整理一下仓库文件, 修改readme文件,时间比较久远有些项目代码出处已经遗忘了,后面慢慢更新。

[2023/05/19]:新增2个NLP Project:文本摘要和T5-finetune。

[2023/05/28]:新增Python RPC demo,用于模型服务部署。

[2023/06/01]:新增text_classifier_pytorch,基于pytorch的文本分类框架。

[2023/07/01]:新增LLM微调框架,支持baichuan、LLAMA等。

二、仓库结构

.
├── KG_demo:构建KG的demo
│   ├── README.md
│   ├── base_html.txt
│   ├── crawler.py
│   ├── createKG.py
│   ├── data
│   ├── data_down
│   └── test.py
├── NLP_Project:一些NLP项目
│   ├── SPACES:长文本摘要、长对话摘要
│   ├── mT5:T5 finetune框架
│   ├── PhraseMining:短语挖掘pipeline
│   ├── RPC_demo:rpc模型部署demo
│   ├── text_classifier_pytorch:文本分类框架
├── LLM:大模型相关项目
├── NLP_Contest:NLP contest部分测试代码
├── NLP_Task:一些NLP任务demo
├── Project_demo:一些项目demo
├── PyTorch:随手练习
├── README.md
├── TensorFlow:随手练习
├── TextPreprocessing:文本处理代码
├── Train
├── lesson:一些课程简单例子
├── model_demo
└── temp