原文:吴恩达《深度学习》-课后测验-第五门课 序列模型(Sequence Models)-Week 2: Natural Language Processing and Word Embeddings (第二周测验:自然语言处理与词嵌入)

Week Quiz: Natural Language Processing and Word Embeddings 第二周测验:自然语言处理与词嵌入 .Suppose you learn a word embedding for a vocabulary of words. Then the embedding vectors should be dimensional, so as to ca ...

2020-02-05 11:45 0 741 推荐指数:

查看详情

深度学习第五(2)自然语言处理嵌入

2.1词汇表征 (1)使用one-hot方法表示词汇有两个主要的缺点,以10000个为例,每个单词需要用10000维来表示,而且只有一个数是零,其他维度都是1,造成表示非常冗余,存储量大;第二每个单词表示的向量相乘都为零(正交),导致没能够表示是词汇之间的联系,比如oriange和apple ...

Mon Jul 23 03:22:00 CST 2018 2 1340
深度学习第五(3)序列模型和注意力机制

3.1序列结构的各种序列 (1)seq2seq:如机器翻译,从法文翻译成英文,将会是下面这样的结构,包括编码网络和解码网络。 (2)image to sequence:比如给一幅图像添加描述,如下图中的“一只猫站在椅子上”。同样包括编码网络和解码网络。 3.2选择最可能的句子 ...

Wed Jul 25 06:14:00 CST 2018 1 888
深度学习第五(1)循环序列模型(RNN)

1.1为什么选择序列模型 (1)序列模型广泛应用于语音识别,音乐生成,情感分析,DNA序列分析,机器翻译,视频行为识别,命名实体识别等众多领域。 (2)上面那些问题可以看成使用(x,y)作为训练集的监督学习,但是输入与输出的对应关系有非常多的组合,比如一对一,多对多,一对多 ...

Sun Jul 22 00:02:00 CST 2018 0 1457
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM