yeerwen/MedCoSS

请问下训练过程中的参数量大概是怎样的？

puppy2000 opened this issue · 2 comments

puppy2000 commented
请问下训练过程中的参数量大概是怎样的？
yeerwen commented

我们用的ViT/B作为预训练的backbone，采用MAE作为pretext task。参数量大概在100M+，具体不记得了。

puppy2000 commented

好的谢谢您