凯明大神 moco v3

文章链接在这:https://arxiv.org/abs/2104.02057

针对训练过程中的不稳定性从batch_size、lr、优化做了分析,关注最后面的figure8

凯明大神 moco v3_第1张图片

4.2 提出了a trick来提升稳定性

凯明大神 moco v3_第2张图片

凯明大神 moco v3_第3张图片

凯明大神 moco v3_第4张图片

凯明大神 moco v3_第5张图片

凯明大神 moco v3_第6张图片

你可能感兴趣的:(图像处理,自然语言处理,深度学习)