Reference：ADADELTA: An Adaptive Learning Rate Method 超参数 超参数（Hyper-Parameter)是困扰神经网络训练的问题之一，因为这些参数不可通过常规方法学习获得。 神经网络经典五大超参数: 学习率(Leraning Rate)、权 ...

目录 前言 1.adagrad 2.动量（Momentum） 3.RMSProp 4.Adam 附1 基于梯度的优化算法前后关系 附二 Gra ...

Tensorflow 自适应学习速率 在模型的初期的时候，往往设置为较大的学习速率比较好，因为距离极值点比较远，较大的学习速率可以快速靠近极值点；而，后期，由于已经靠近极值点，模型快收敛了，此时，采用较小的学习速率较好，较大的学习速率，容易导致在真实极值点附近来回波动，就是无法抵达极值点 ...

论文题目：《Transfer Adaptation Learning: A Decade Survey》 论文作者：Lei Zhang 论文链接：http://cn.arxiv.org/pdf/1 ...

领域适应学习(domain adaptation） 问题来源：在经典的机器学习中，我们往往假设训练集和测试集分布一致，但是在实际的问题中，测试环境往往与训练的数据有较大的差异，出现过拟合问题：在训练集上训练结构较好，但是在测试集上的效果不好，因此出现了迁移学习技术。 分布不一致的理解 ...

为什么学习距离度量？ 在机器学习中，对高维数据进行降维的主要目的是希望找到一个合适的低维空间，在此空间中进行学习能比原始空间性能更好．事实上，每个空间对应了在样本属性上定义的一个距离度量，而寻找合适的空间，实质上就是在寻找一个合适的距离度量．那么，为何不直接尝试“ 学习” 出一个合适的距离度量 ...

屏幕大小 1、不同的layout Android手机屏幕大小不一，有480x320，640x360，800x480.怎样才能让App自动适应不同的屏幕呢？ 其实很简单，只需要在 res目录下创建不同的layout文件夹，比如：layout-640x360 ...

android 图片大小适配，如何在不同屏幕上适配图片，如何设置可以自适应不同分辨率？ Android为了适应不同的分辨率,需要将不同的图片放到不同的drawable目录下,分辨率的匹配规则如下:drawable-mdpi 320 * 480drawable-hdpi 480 ...