原文:吳恩達《深度學習》-課后測驗-第五門課 序列模型(Sequence Models)-Week 2: Natural Language Processing and Word Embeddings (第二周測驗:自然語言處理與詞嵌入)

Week Quiz: Natural Language Processing and Word Embeddings 第二周測驗:自然語言處理與詞嵌入 .Suppose you learn a word embedding for a vocabulary of words. Then the embedding vectors should be dimensional, so as to ca ...

2020-02-05 11:45 0 741 推薦指數:

查看詳情

深度學習第五(2)自然語言處理嵌入

2.1詞匯表征 (1)使用one-hot方法表示詞匯有兩個主要的缺點,以10000個為例,每個單詞需要用10000維來表示,而且只有一個數是零,其他維度都是1,造成表示非常冗余,存儲量大;第二每個單詞表示的向量相乘都為零(正交),導致沒能夠表示是詞匯之間的聯系,比如oriange和apple ...

Mon Jul 23 03:22:00 CST 2018 2 1340
深度學習第五(3)序列模型和注意力機制

3.1序列結構的各種序列 (1)seq2seq:如機器翻譯,從法文翻譯成英文,將會是下面這樣的結構,包括編碼網絡和解碼網絡。 (2)image to sequence:比如給一幅圖像添加描述,如下圖中的“一只貓站在椅子上”。同樣包括編碼網絡和解碼網絡。 3.2選擇最可能的句子 ...

Wed Jul 25 06:14:00 CST 2018 1 888
深度學習第五(1)循環序列模型(RNN)

1.1為什么選擇序列模型 (1)序列模型廣泛應用於語音識別,音樂生成,情感分析,DNA序列分析,機器翻譯,視頻行為識別,命名實體識別等眾多領域。 (2)上面那些問題可以看成使用(x,y)作為訓練集的監督學習,但是輸入與輸出的對應關系有非常多的組合,比如一對一,多對多,一對多 ...

Sun Jul 22 00:02:00 CST 2018 0 1457
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM