phiphiphi31/SBT

Mlp_mixer_Head

Opened this issue · 1 comments

ElliottZhen commented

你好~
非常棒的工作！
有几个问题想请教一下：

  1. 关于Mlp_mixer_Head，我在experiment配置文件中发现spatial_mixer的长度为1024，但是送入跟踪头的搜索区域特征应该是16*16，也就是256，这会造成spatial_mixer维度不匹配？
  2. Mlp_mixer_Head中的spatial和channel 的层数均为3，在这三层线性层中是否采用相同的维度，还是说有先升维在降维？
    非常感谢您，期待您的回复。
    @phiphiphi31
phiphiphi31 commented

mix mlp head 那个需要根据 hw 的size设计，不然会维度不匹配
没有升维度减维度，就是转置了几下，可以参考论文[Correlation-Embedded Transformer Tracking: A Single-Branch Framework] 更详细一点