test script

Question

test script

Closed this issue 7 months ago · 4 comments

如图，我下载了https://drive.google.com/file/d/1A1wqTT_FD6FXzqCj9LNStxT425ZfYpnE/view这里的预训练权重来对Synapse数据集上进行测试，但是性能非常差。而且也是直接运行test.py文件。是否是代码未及时更新？

Answer 1 · 2024-04-03T15:04:03.000Z

如图，我下载了[https://drive.google.com/file/d/1A1wqTT_FD6FXzqCj9LNStxT425ZfYpnE/view这里的预训练权重来对Synapse数据集上进行测试，但是性能非常差。而且也是直接运行test.py文件。是否是代码未及时更新？]

CUDA_VISIBLE_DEVICES="0" python test.py --is_savenii --lora_ckpt 220_epoch_299.pth --vit_name='vit_b' --ckpt=checkpoints/sam_vit_b_01ec64.pth --stage=3 --img_size=512
你的test script是什么，是否使用--lora_ckpt和--ckpt

Answer 2 · 2024-04-04T02:25:43.000Z

虽然不是命令行形式，但是修改了相应文件的args参数，并直接运行

Answer 3 · 2024-04-04T04:33:58.000Z

找到原因了，是我使用了另一个项目中下载的数据集。但仅仅只是初等变换，模型性能就下降如此之大，其泛化性能值得深思？https://drive.google.com/file/d/18XGakRzcZ3_BZKeF_CUljIZj3edc3Ah9/view?usp=drive_link

Answer 4 · 2024-04-07T12:49:09.000Z

很乐意讨论，但是这样的output是不合理的，根据这样的output讨论泛化性能没什么意义