视频链接 | 在线体验 | 部署文档| 更新日志 | 常见问题
本项目提供基于HuggingFace社区和ModelScope魔搭社区的在线体验, 欢迎尝试和反馈!
受langchain-ChatGLM启发, 利用LangChain和ChatGLM-6B系列模型制作的Webui, 提供基于本地知识的大模型应用.
目前支持上传 txt、docx、md、pdf等文本格式文件, 提供包括ChatGLM-6B系列、Belle系列等模型文件以及GanymedeNil/text2vec-large-chinese、nghuyong/ernie-3.0-base-zh、nghuyong/ernie-3.0-nano-zh等Embedding模型.
HuggingFace效果
ModelScope效果
提供ModelScope版本和HuggingFace版本.
需要Python>=3.8.1
若存在网络问题可点击以下链接快速下载:
| large language model | Embedding model |
|---|---|
| ChatGLM-6B | text2vec-large-chinese |
| ChatGLM-6B-int8 | ernie-3.0-base-zh |
| ChatGLM-6B-int4 | ernie-3.0-nano-zh |
| ChatGLM-6B-int4-qe | ernie-3.0-xbase-zh |
| Vicuna-7b-1.1 | simbert-base-chinese |
| BELLE-LLaMA-7B-2M | |
| BELLE-LLaMA-13B-2M | |
| Minimax |
详情请见: 更新日志
项目处于初期阶段, 有很多可以做的地方和优化的空间, 欢迎感兴趣的社区大佬们一起加入!
- ChatGLM-6B: ChatGLM-6B: 开源双语对话语言模型
- LangChain: Building applications with LLMs through composability
- langchain-ChatGLM: 基于本地知识的 ChatGLM 应用实现
- langchain-ChatGLM提供的基础框架
- 魔搭ModelScope提供展示空间
- OpenI启智社区提供调试算力
- langchain-serve提供十分简易的Serving方式
- @online2311进行多卡测试、增加外部访问支持、增加ChatGLM-6b-local 本地模型读取路径、修复text2vec 无法加载的错误、增加 Dockerfile、增加Docker 使用说明
