Mathilde Caron,Facebook 人工智能研究,Inria。
Hugo Touvron,索邦大学 Facebook 人工智能研究中心。
Ishan Misra,Facebook 人工智能研究中心。
Herve Jegou,Facebook 人工智能研究中心。
Piotr Bojanowski,Facebook 人工智能研究中心。
除了使自监督方法适应这种架构特别有效这一事实之外,我们还进行了以下观察:首先,自监督 ViT 特征包含有关图像语义分割的明确信息,而这些信息在监督 ViT 和卷积网络中都没有那么清晰地显现出来。
来源:HackerNoon




