李宏毅機器學習2020筆記（五）RNN、LSTM
一、問題提出 slot filling（槽填充）：智慧客服、智慧訂票系統中往往需要自動將詞匯與slot對應。 把詞匯用向量表示。 多加一個other維度，不在詞典中就歸 ...
原文：李宏毅機器學習2020筆記（三）深度學習
一 深度學習 簡介 不同的連接方法 全連接前饋網絡 gt sigmoid gt . 相當於一個函數，輸入一個向量，輸出一個向量。如果w和b未知，神經網絡就是一個比較大的function set。 全連接 前饋。輸入層只有data，輸出層是最后一層，中間都稱為隱藏層。 現在基於神經網絡的方法都是深度學習的方法。 常常用矩陣運算來表示神經網絡的運算。 一連串的向量乘以矩陣再加上向量，寫成這樣的好處是可 ...
2020-06-19 23:05 0 603 推薦指數：
相關推薦
李宏毅機器學習2020筆記（一）Introduction&Regression
一、Course Introduction 1、機器學習就是自動找函式 Regression: output is a scalar. Classification：yes or no Binary classification：RNN作業 Multi-class ...
李宏毅《機器學習 深度學習》簡要筆記（一）
P1 一、線性回歸中的模型選擇 上圖所示： 五個模型，一個比一個復雜，其中所包含的function就越多，這樣就有更大幾率找到一個合適的參數集來更好的擬合訓練集。所以，隨着模型的復雜度提 ...
（1）李宏毅深度學習-----機器學習簡介
一、機器學習簡介 是什么？ 機器學習：給模型（函數）輸入數據，輸出結果。 機器學習分類： 1）監督學習：即給定輸入和輸出以及輸出，學習函數。 2）半監督學習：數據不夠，有一部分數據有輸入和輸出，但有一部分沒有輸出。 3）無監督學習：只有輸入沒有輸出。 4）遷移學習：可以有label ...
【筆記】機器學習 - 李宏毅 -- ELMO、BERT、GPT
1.背景知識 one-hot -> word class -> word embedding 不過傳統的word embedding解決不了多義詞的問題。 2. ELMO ...
【筆記】機器學習 - 李宏毅 -- Transformer
1.RNN和CNN的局限性 RNN是seq2seq的模型，RNN不易平行化，如果是單向的話，要輸出\(b^3\)，需要先看完\(a^1, a^2, a^3\)。如果是雙向的話，可以看完整個句子。 ...
李宏毅機器學習筆記（）GNN
一、introduction How do we utilize the structures and relationship to help our ...