機器學習筆記8——大規模機器學習(Large scale machine learning)

概要:大規模機器學習用於處理大數據集 一、隨機梯度下降法 1.1 產生 由於梯度下降法(批量梯度下降法,每次都需要考慮所有的樣本)在計算規模很大的數據時比較慢,所以產生了隨機梯度下降法 1.2 定義 首先隨機打亂所有數,這是數據預處理的過程 (本次迭代只需要計算一個樣本) 二、Mini-batch梯度下降 2.1 定義 介於梯度下降法和隨機梯度下降法之間,每次使用b個樣本,b這裏就是一個稱爲min
相關文章
相關標籤/搜索