深度學習系列三（DNN的pretraining-RBM）

DNN的pretraining-RBM

      DNN是高度非線性函數，采用BP算法訓練網絡的存在一個問題，非常容易陷入局部極值點。Restricted Boltzmann machine(RBM)提供了一種無監督的訓練方式可以對DNN進行pretraining。也有一些其他的方法（如autoencoder）可以用來預訓練，這里只介紹RBM。最近太忙，有時間再更新。