Self-supervised Visual Feature Learning with Deep Neural Networks: A Survey

預訓練模型 提供一個好的初始點 避免過擬合 深度學習的標註成本很高,尤其是涉及視頻時 爲避免耗時且昂貴的數據標註工作，提出了許多自我監督的方法，以在不使用任何人工註釋的情況下從大規模的未標記圖像或視頻中學習視覺特徵。 爲了從未標記的數據中學習視覺特徵，一種流行的解決方案是爲網絡提出各種需要解決的pretext tasks，同時可以通過學習借記任務的目標功能來訓練網絡，並通過此過程學習特徵。各種 已

>>阅读原文<<