开发一个OpenAI/GPT应用

[guanhui07]

如何快速开发一个OpenAI/GPT应用

一个国内开发者的OpenAI/GPT的笔记
最近都在问，于是写个文档。本文希望用尽可能少的内容，讲清楚开发一个OpenAI/GPT应用必然用到的知识。

目录

• ChatGPT && OpenAI 的关系
• OpenAI API 接口能做什么
• chat completions 接口如何使用？
• chat completions 接口如何计费？
• chat completions 接口能做什么 ①
• chat completions 接口能做什么 ②
• 如何解决国内用户无法注册OpenAI账号、无法访问OpenAI接口的问题？
  • 注册OpenAI
  • 访问OpenAI API
  • 通过第三方接口访问

ChatGPT && OpenAI 的关系

ChatGPT 是 OpenAI 推出的应用，使用的是最新的模型；而 OpenAI 开放接口的模型是 gpt-3.5-turbo ，这个模型比 ChatGPT 应用要笨。但 ChatGPT 用的最新模型没有接口，只能通过无头浏览器等方式来使用（不稳定）。

OpenAI API 接口能做什么

能做的事情很多，可以查看官方文档，但这个文档**网络目前无法访问。

具体来讲，OpenAI 所有的可用的接口都在里边，包括语音识别和图片生成。但真正智能的其实只有 gpt-3.5-turbo，因此刚开始不用看其他内容。

目前大家看到的绝大部分GPT类应用都是由 gpt-3.5-turbo 模型的 chat completions 对话补全接口实现的。

chat completions 接口如何使用？

可以通过很多方式来使用，比如使用官方SDK，第三方项目，但其实只需要一个HTTP请求就可以。以下是官方文档给出的例子：

curl https://api.openai.com/v1/chat/completions \
  -H 'Content-Type: application/json' \
  -H 'Authorization: Bearer YOUR_API_KEY' \
  -d '{
  "model": "gpt-3.5-turbo",
  "messages": [{"role": "user", "content": "Hello!"}]
}'

从里边可以看到，需要的信息有：

① 请求地址： https://api.openai.com/v1/chat/completions 这个地址目前在国内大部分地区已经无法访问了，后边会讲解决办法

② 最常用的接口参数包括：

1. model: 必填，建议使用 gpt-3.5-turbo，便宜。计费后边会讲。
2. messages: AI 进行提问的问题或信息。
3. max_tokens: 选填，指定生成回答的最大长度。
4. stream: 选填，是否按流的方式发送内容。

其中 message的格式为：{"role","content"}。一般用 user 发送用户问题；system 发送给模型提示信息。

例如：

[
  {"role": "system", "content": "You are a helpful assistant that translates English to French."},
  {"role": "user", "content": "Translate the following English text to French: {text}"}
]

知道了这些基本就可以跑通GPT流程了，其他role可以稍后优化时来做。

Stream 参数

这里单独说一下 stream 参数，当它设置为 true 时，API 会以 SSE（ Server Side Event ）方式返回内容。

SSE 本质上还是 HTTP 协议，只不过它是一个长链接，先输出一个 header("Content-Type: text/event-stream") ， 然后持续不断地输出内容直到完成。如果不是做实时聊天，建议直接false掉。

其他参数

接口的其他参数可以看官方文档，访问不了的同学可以看我做的截图。

Chat completions 接口如何计费？

chat completions 接口按 token 计费，有一个专门的算法来计算 token。输入和输出全部都会计入到 token 里边，在 chat completions 接口的 usage 里边会有具体消耗的 token 数。

如果你要自己计算，可以用这个在线表单，程序计算可以看看这两个项目：

1. https://github.com/dqbd/tiktokenizer
2. https://github.com/openai/tiktoken

除了 gpt-3.5-turbo 模型的 chat completions 接口，还有 text-davinci-003 模型的 text completions 接口可以用，但是价格更贵，效果更差 🤣

你可以在 https://openai.com/pricing 查询到价格，以下是3月中旬的定价

Model	Usage
gpt-3.5-turbo (ChatGPT)	$0.002 / 1K tokens
Davinci (InstructGPT)	$0.0200 / 1K tokens
Ada (InstructGPT)	$0.0004 / 1K tokens
Babbage (InstructGPT)	$0.0005 / 1K tokens
Curie (InstructGPT)	$0.0020 / 1K tokens

chat completions 接口能做什么 ①

虽然 chat completions 看起来像是一个聊天接口，但接口设计上并没有为聊天优化，因为这个接口是记不住上下文的。

为了让对话具有连续性，我们每次请求需要带上上次的聊天记录。你可以使用这个第三方库，它可以自动帮你发送聊天记录（通过指定对话的parentMessageId）实现：

1. https://github.com/transitive-bullshit/chatgpt-api

在加上对话记录后，chat completions 接口就可以制作一个看起来有智能的聊天应用了。

如果你要在国内运营聊天机器人之类的话，请记得将内容通过文本内容审核接口进行审核，否则很可能导致被封。

chat completions 接口能做什么 ②

其实除了对话，GPT有很强的内容总结归纳能力，另外由于它能理解内容结构，同时本身又是语言模型，因此对结构化翻译很擅长。

比如，我经常用它翻译JSON和Markdown，大部分情况下效果很好。在自用体验很好的情况下，我们可以将其制作为应用。

应用开发非常简单

如何解决国内用户无法注册OpenAI账号、无法访问OpenAI接口的问题？

两个思路，一个是绕道海外去注册，通过代理使用服务；另一个是直接使用第三方代理API服务。前者可以暂时解决当前的问题；后者更方便省心。

注册OpenAI

1. 准备一个海外的网络
2. 准备一个海外手机号来接收验证短信，可以用海外虚拟号码

注册完成后，进入API页面 创建Key，然后就可以使用了。

这个方案目前可行，是因为OpenAI给每个新用户提供了18美金的免费额度。但是一旦不再提供，就会面临充值的问题。目前OpenAI不接受**信用卡，因此还必须准备一个海外信用卡。也就是说，要长久稳定的使用，必须有海外信用卡。

以前有财付通的海外虚拟信用卡，后来服务下线了。最近看了下，很多500RMB起，还只支持电商网站，感觉不太靠谱 🤣

访问OpenAI API

3月3日开始，国内大部分网络不再能直接访问 OpenAI 接口。

因此你需要架设代理来访问OpenAI 接口。你可以将整个服务器代理到海外网络，或者只是简单的通过 Cloudflare 或者 腾讯云函数来部署API代理。

相对来说，我觉得腾讯云香港可能稳定点，教程可以看这里

需要注意的是，部分API代理不支持SSE，因此不能实时返回内容。当然，有同学说腾讯云的 ApiGateway 直接就能代理，但我测试了下没成功。

通过第三方接口访问

如果你搞不定海外手机号和信用卡，或者自己不想架设代理，那么可以考虑用像API2D这样的第三方代理API。

主要的优点：

1. 基本兼容原有接口，只需要改下 API endpoint 和 Key
2. 支持国内卡充值，开发者可以让用户自己自行购买点数并创建Forward Key
3. 接口国内直接可以访问，无需架设代理
4. 推荐可以获得点数，这里是我的推荐链接

缺点：

1. 不支持 stream 参数，因此只能一次性返回内容
2. 不支持微信充值，价格比官方略高