训练初期显存异常大
Opened this issue · 2 comments
TinaChen95 commented
发现刚开始训练的时候,显存变化剧烈,且容易爆显存;过了一段时间之后,显存降下去且显存利用率比较低。
有大佬观察到这个现象吗?这是为什么呢?
suzhenghang commented
是因为音频时长不等吧。如果你的音频都是同等时长应该不会
Isshang commented
发现刚开始训练的时候,显存变化剧烈,且容易爆显存;过了一段时间之后,显存降下去且显存利用率比较低。 有大佬观察到这个现象吗?这是为什么呢?
佬,麻烦可以用一下你的训练log吗?条件限制训练不了,但是需要需要一些log图。可以的话,麻烦iisshang@163.com