[此工程是一个完整的UE数字字人开源工程,可以配合Fay数字人控制器,实现各种应用场景:虚拟主播、现场推销货、商品导购、语音助理、远程语音助理、数字人互动、数字人面试官及心理测评、贾维斯、Her](https://github.com/TheRamU/Fay)
1、如何进行抖音直播
2、如何进行B站直播
3、如何进行人机交互
1、UE4.27 男模陈升
UE版本:4.27,唇型:固定动画 ,驱动接口:接收音频文件路径、接收情绪值
2、UE5.03 Girl_night
UE版本:5.0.3,唇型:Metahuman SDK ,驱动接口:接收文本、接收情绪值
3、UE5.03 本地唇形Girl_lip
UE版本:5.0.3,唇型:视音素动画 ,驱动接口:接收音频文件路径、接音音频视音素序列、接收情绪值
4、UE5.03 8月版
UE版本:5.0.3,唇型:视音素动画 ,驱动接口:接收音频文件路径、接音音频视音素序列、接收情绪值、接收控制台日志、接收用户问题文本、回复说话完成状态
5、9月版
UE版本:5.0.3,唇型:视音素BS ,驱动接口:接收音频文件路径、接音音频视音素序列、接收情绪值、接收控制台日志、接收用户问题文本、回复说话完成状态,改进:新模型、使用唇形BS
工程下载地址:https://pan.baidu.com/s/10ASvGYQMpSrZV8OtXCmDdw?pwd=plz1
唇型BS说明:https://www.bilibili.com/video/BV1G94y1V75W
6、10月版
UE版本:5.0.3,唇型:优化视音素 ,驱动接口:接收音频文件路径、接音音频视音素序列、接收情绪值、接收控制台日志、接收用户问题文本、回复说话完成状态,
改进:全新模型、提供VR运行包(视频)、优化唇形、改进web socket 状态显示逻辑、降低性能资源消耗。
工程下载地址:链接:https://pan.baidu.com/s/1Fal4ZvL-pL5g_bdsWJIcaw?pwd=4bz8
VR运行包下载地址(含普通运行包):https://pan.baidu.com/s/1m7a-METJFaFmwyRKwDeTRQ?pwd=ztmh