attentions专题

Revitalizing CNN Attentions via Transformers in Self-Supervised Visual Representation Learning

利用 Transfomer 来提升 CNN 注意力的自监督表征学习 NeurIPS 2021 论文:https://arxiv.org/pdf/2110.05340v1.pdf code:https://github.com/chongjiange/care 摘要 对自监督视觉表示学习(SSL)的研究改进了编码器主干来区分没有标签的训练样本。虽然通过SSL的CNN编码器实现了与通过监督学