1. yavin数字人的定义,是一个基于大模型大脑在虚拟世界中活动,能自由使用虚拟和现实世界“工具”的数字体。
2. 能够读取外界语料,进行自我学习,实现个性的自我对话和规划能力。因此这里定义了输入,输出:
输入:外界语料包括手动导入,爬虫获取,甚至通过直播、网页、XR和小程序等,对外沟通进行获取。
输出:具有个性的对话能力和工具调用能力,能在各种虚拟场景出现和使用其能力,如XR,直播,网页等。
2. 工具定义:
- 先完成纯文本链路的对话,简单的前端界面+高扩展、完成基本能力覆盖的后端:
- 前端能力:基本对话框,文件上传(聊天记录),token记录。工具和工作流编排模式?
- 后端能力:流式带function能力的agent对话。