/AI-Vtuber

AI Vtuber是一个由 【ChatterBot/ChatGPT/claude/langchain(本地/llm)/chatglm/text-generation-webui/闻达/文心一言】 驱动的虚拟主播【Live2D/UE/xuniren】,可以在 【Bilibili/抖音/快手/微信视频号/斗鱼/YouTube/twitch】 直播中与观众实时互动 或 直接在本地进行聊天。它使用文本转语音技术【edge-tts/VITS/elevenlabs/bark/VALL-E-X/睿声】生成回答并可以选择【so-vits-svc/DDSP-SVC】变声;通过特定指令协同SD进行画图。

Primary LanguageJavaScriptGNU General Public License v3.0GPL-3.0

✨ Luna AI ✨

GitHub stars GitHub issues GitHub forks python

Luna AI 是一款结合了最先进技术的虚拟AI主播。它的核心是一系列高效的人工智能模型,包括 ChatterBot、GPT、Claude、langchain、chatglm、text-generation-webui、讯飞星火、智谱AI、谷歌Bard、文心一言、通义星尘、千帆大模型 和 Gemini。这些模型既可以在本地运行,也可以通过云端服务提供支持。

Luna AI 的外观由 Live2D、Vtube Studio、xuniren 和 UE5 结合 Audio2Face 技术打造,为用户提供了一个生动、互动的虚拟形象。这使得 Luna AI 能够在各大直播平台,如 Bilibili、抖音、快手、微信视频号、斗鱼、YouTube 和 Twitch,进行实时互动直播。当然,它也可以在本地环境中与您进行个性化对话。

为了使交流更加自然,Luna AI 使用了先进的自然语言处理技术,结合文本转语音系统,如 Edge-TTS、VITS-Fast、elevenlabs、bark-gui、VALL-E-X、睿声AI、genshinvoice.top 和 tts.ai-lab.top。这不仅让它能够生成流畅的回答,还可以通过 so-vits-svc 和 DDSP-SVC 实现声音的变化,以适应不同的场景和角色。

此外,Luna AI 还能够通过特定指令与 Stable Diffusion 协作,展示画作。用户还可以自定义文案,让 Luna AI 循环播放,以满足不同场合的需求。

本项目完全免费,如有发现一模一样的套壳售卖程序,皆为盗版,请及时止损

▶︎ 视频教程合集 | 📄 在线文档 | 🍉 GitHub | 🍓 Gitee

思维导图

FOSSA Status

🀅开发&项目相关

简易流程图

image FOSSA Status

image

License

FOSSA Status 

⭐️Star 经历

Star History Chart

🤝贡献

🎉鸣谢

感谢以下开发者对该项目做出的贡献:

💸投资方

image

合作伙伴

智来星球:m.zlxqai.com ———— 提供GPT、AI绘图服务

青椒云:qingjiaocloud.com ———— AIGC 高性能云桌面

睿声AI:reecho.ai ———— 瞬时创建 超级拟真的 人工智能克隆语音

🙌赞助