训练初期显存异常大
TinaChen95 opened this issue · 2 comments
TinaChen95 commented
发现刚开始训练的时候，显存变化剧烈，且容易爆显存；过了一段时间之后，显存降下去且显存利用率比较低。
有大佬观察到这个现象吗？这是为什么呢？
suzhenghang commented
是因为音频时长不等吧。如果你的音频都是同等时长应该不会
Isshang commented
发现刚开始训练的时候，显存变化剧烈，且容易爆显存；过了一段时间之后，显存降下去且显存利用率比较低。 有大佬观察到这个现象吗？这是为什么呢？
佬，麻烦可以用一下你的训练log吗？条件限制训练不了，但是需要需要一些log图。可以的话，麻烦iisshang@163.com