RapidAI/RapidASR

👀目前想做但未做的任务整理,想贡献的小伙伴可来这里认领呦!

SWHL opened this issue · 8 comments

SWHL commented

⚠️ 注意

  • 以下均为独立仓库,如需贡献,注意去对应仓库下哈
  • RaidASR | RapidPunc | RapidVAD 这三个仓库在FunASR下均已有onnxruntime推理实现,可参考link,做整理与抽取,解耦合。

RapidASR

该部分主要是整理FunASR中对应的功能

  • RapidASR与FunASR中代码与效果对齐,需要再次验证,包括中英文混合音频
  • RapidASR增加流式推理能力
  • 整理热词模型

RapidPunc

RapidVAD


RapidTTS

RapidTP-Aligns(时间戳预测)

😉😉😉

想要认领尝试的小伙伴,直接在下面回复认领哪个即可。
不要有任何压力,我们社区很轻松愉快的。

我python会一些 ,不会c
大佬看看有什么我能做的相对简单的任务

SWHL commented

我python会一些 ,不会c 大佬看看有什么我能做的相对简单的任务

上面列的任务都是python的,基本就是从FunASR中复现,然后将模型推理部分改为onnxruntime推理即可。

RapidPunc ,那我认领这个吧。
意思是,从funasr中导出Punc的onnx模型,然后实现onnxruntime推理就可以是吗?

SWHL commented

RapidPunc ,那我认领这个吧。 意思是,从funasr中导出Punc的onnx模型,然后实现onnxruntime推理就可以是吗?

  • 好的
  • 是的,FunASR中对应的python推理代码 用这个link
  • C++版就是由这个写来的

我这边已经集成Punc 。
再看下顺便把vad也做了,vad的模型效果比Silero VAD效果好吗?
funasr的vad我之前试了下,可能是没调参数的原因,切出来的感觉会少一部分内容。

SWHL commented

我这边已经集成Punc 。 再看下顺便把vad也做了,vad的模型效果比Silero VAD效果好吗? funasr的vad我之前试了下,可能是没调参数的原因,切出来的感觉会少一部分内容。

  • 👍
  • vad的我这里没测过,还真不知道哪个更好一些呢
    funasr的可以优先尝试魔搭右侧的demo,查看效果,一般用默认参数,效果就不错

第一次提交PR ,还看了好一会怎么提交,哈哈,代码写的不好见谅,本职工作不写代码的哈,希望多多学习学习。

SWHL commented

第一次提交PR ,还看了好一会怎么提交,哈哈,代码写的不好见谅,本职工作不写代码的哈,希望多多学习学习。

收到,很棒了,待我试试