原文:『論文筆記』MoCo:Momentum Contrast for Unsupervised Visual Representation Learning

我認為MoCo這篇最創新的地方,就是解決了一個非常重要但以前又沒有思路的工程問題,就是怎么節省內存節省時間搞到大量的negative sample。之前的memory bank雖然機智,但是必須存下來整個數據集,空間開銷O N ,所以處理不了Instagram級別的數據,這個問題困擾我很久而且我沒找到有效策略,我試過跟MoCo一樣用一個queue,也是存過去m個batch的sample,這個其實 ...

2021-05-16 21:00 0 960 推薦指數:

查看詳情

 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM