idootop/mi-gpt

是否能支持火山云tts websocket 模式的 豆包低层用的他

Closed this issue · 12 comments

感谢反馈,豆包底层确实用的是他们自家的这个火山引擎的TTS服务(不过用的是内部定制的模型),实际上我已经接入了的,只不过没开放出来。后面版本更新有时间的话,我会考虑添加更多的大语言模型和 TTS 服务提供商的支持。

对火山TTS的支持,近期几个版本会优先添加支持。

演示视频中的熊二等音色,在火山TTS里就有的。

请问作者,豆包TTS接入的教程或资料是否有呢。
目前我沿着火山引擎的文档在配置,不知路线是否正确。

TTS_DOUBAO=https://openspeech.bytedance.com/api/v1/tts
#SPEAKERS_DOUBAO=豆包 TTS 音色列表接口

https://www.volcengine.com/docs/6561/79820

@idootop

现在还没这个功能呢,下几个版本才会支持火山引擎的TTS。那个是豆包TTS的配置(即演示视频中用到的音色),不对外开放。

此功能将会在下一版本(v4.0.0)添加支持,敬请期待。

此功能将会在下一版本(v4.0.0)添加支持,敬请期待。

牛逼,期待。
有没有自己折腾的换语音方向可以指点一二。@idootop

此功能将会在下一版本(v4.0.0)添加支持,敬请期待。

希望能支持gpt-sovits

目前支持访问的大模型 是不是只有 openai? 看描述中也支持 通义千问 和 豆包,想问问怎么配置呢?

可以网上搜下oneapi,可以把豆包等模型的接口转换成OpenAI的格式,然后替换下baseURL就好了。

有没有自己折腾的换语音方向可以指点一二。@idootop

我猜你是想用自己的克隆音色之类的本地TTS服务?

下个版本会给一个TTS接口的调用规范,你可以按照这个规范开发自己的TTS后端接口,接入任意的TTS服务。

MiGPT v4.0.0 版本已发布,使用第三方 TTS 教程:https://github.com/idootop/mi-gpt/blob/main/docs/tts.md