HAN 模型
最開始看這個模型是看的這個解釋:
RNN+Attention(HAN) 文本分類 閱讀筆記 - 今天做作業沒的文章 - 知乎
https://zhuanlan.zhihu.com/p/42121435
Hierarchical Attention Networks for Document Classification 閱讀筆記 - 濱城之戀的文章 - 知乎
https://zhuanlan.zhihu.com/p/26892711
然后看了一下關於GRU不同門的介紹 https://blog.csdn.net/wangyangzhizhou/article/details/77332582
重置門 更新門
然后看了一下pytorch的實現 https://github.com/EdGENetworks/attention-networks-for-classification
這個實現寫的很好