花费 9 ms
详解梯度爆炸和梯度消失

那么为什么会出现梯度消失的现象呢?因为通常神经网络所用的激活函数是sigmoid函数,这个函数有个特点,就是能将负无穷到正无穷的数映射到0和1之间,并且对这个函数求导的结果是f′(x)=f(x)(1− ...

Tue Jan 02 23:06:00 CST 2018 1 14051
深度学习之seq2seq模型以及Attention机制

RNN,LSTM,seq2seq等模型广泛用于自然语言处理以及回归预测,本期详解seq2seq模型以及attention机制的原理以及在回归预测方向的运用。 1. seq2seq模型介绍   se ...

Wed Nov 15 02:49:00 CST 2017 0 8972
神经网络入门回顾(感知器、多层感知器)

神经网络属于“联结主义”,和统计机器学习的理论基础区别还是很不一样。 以我自己的理解,统计机器学习的理论基于统计学,理论厚度足够强,让人有足够的安全感;而神经网络的理论更侧重于代数,表征能力特别强, ...

Fri Jul 26 02:57:00 CST 2019 0 2176
Tensorflow简单实践系列(一):安装和运行

TensorFlow 是谷歌开发的机器学习框架。 安装 TensorFlow 直接使用 pip 安装即可,添加豆瓣镜像可以加快速度: 如果有 GPU 可以充分利用,安装: ...

Sat Jul 06 19:40:00 CST 2019 0 1286
Tensorflow简单实践系列(二):张量

在上一节中,我们安装 TensorFlow 并运行了最简单的应用,这节我们熟悉 TensorFlow 中的张量。 张量是 TensorFlow 的核心数据类型。数学里面也有张量的概念,但是 Tens ...

Mon Jul 08 02:27:00 CST 2019 0 796

 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM