/How-to-use-Transformers

Transformers 库快速入门教程

Primary LanguagePythonApache License 2.0Apache-2.0

title

Transformers 是由 Hugging Face 开发的一个 NLP 包,支持加载目前绝大部分的预训练模型。随着 BERT、GPT 等大规模语言模型的兴起,越来越多的公司和研究者采用 Transformers 库来构建 NLP 应用。

该项目为《Transformers 库快速入门》系列教程的代码仓库,按照以下方式组织代码:

  • data:存储使用到的数据集;
  • src:存储所有的任务 Demo,每个任务一个文件夹,可以下载下来单独使用。

该教程暂未包含 LLaMa 等大规模语言模型 (LLM) 的使用方法。我最近也正在系统地学习,之后会把 LLM 内容添加进来,敬请期待。

Transformers 库快速入门

Demo 一览