原文:Deep learning:五(regularized线性回归练习)

前言: 本节主要是练习regularization项的使用原则。因为在机器学习的一些模型中,如果模型的参数太多,而训练样本又太少的话,这样训练出来的模型很容易产生过拟合现象。因此在模型的损失函数中,需要对模型的参数进行 惩罚 ,这样的话这些参数就不会太大,而越小的参数说明模型越简单,越简单的模型则越不容易产生过拟合现象。本文参考的资料参考网页:http: openclassroom.stanfo ...

2013-03-17 15:15 6 16014 推荐指数:

查看详情

Deep learning:六(regularized logistic回归练习)

  前言:   在上一讲Deep learning:五(regularized线性回归练习)中已经介绍了regularization项在线性回归问题中的应用,这节主要是练习regularization项在logistic回归中的应用,并使用牛顿法来求解模型的参数。参考的网页资料为:http ...

Mon Mar 18 04:04:00 CST 2013 5 14709
Deep learning:四(logistic regression练习)

  前言:   本节来练习下logistic regression相关内容,参考的资料为网页:http://openclassroom.stanford.edu/MainFolder/DocumentPage.php?course=DeepLearning&doc ...

Sun Mar 17 05:59:00 CST 2013 12 29183
Deep learning:二(linear regression练习)

  前言   本文是多元线性回归练习,这里练习的是最简单的二元线性回归,参考斯坦福大学的教学网http://openclassroom.stanford.edu/MainFolder/DocumentPage.php?course=DeepLearning&doc ...

Sat Mar 16 00:20:00 CST 2013 25 37188
Deep learning:九(Sparse Autoencoder练习)

  前言:   现在来进入sparse autoencoder的一个实例练习,参考Ng的网页教程:Exercise:Sparse Autoencoder。这个例子所要实现的内容大概如下:从给定的很多张自然图片中截取出大小为8*8的小patches图片共10000张,现在需要用sparse ...

Wed Mar 20 18:58:00 CST 2013 103 51508
Deep learning:三(Multivariance Linear Regression练习)

  前言:   本文主要是来练习多变量线性回归问题(其实本文也就3个变量),参考资料见网页:http://openclassroom.stanford.edu/MainFolder/DocumentPage.php?course=DeepLearning&doc=exercises ...

Sat Mar 16 04:55:00 CST 2013 19 22049
Deep learning:二十四(stacked autoencoder练习)

  前言:   本次是练习2个隐含层的网络的训练方法,每个网络层都是用的sparse autoencoder思想,利用两个隐含层的网络来提取出输入数据的特征。本次实验验要完成的任务是对MINST进行手写数字识别,实验内容及步骤参考网页教程Exercise: Implement deep ...

Wed Apr 10 06:05:00 CST 2013 77 30073
Deep learning:十四(Softmax Regression练习)

  前言:   这篇文章主要是用来练习softmax regression在多分类器中的应用,关于该部分的理论知识已经在前面的博文中Deep learning:十三(Softmax Regression)有所介绍。本次的实验内容是参考网页:http ...

Sun Mar 24 04:17:00 CST 2013 74 27172
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM