1. 前言 自然語言處理(NLP)是機器學習，人工智能中的一個重要領域。文本表達是 NLP中的基礎技術，文本分類則是 NLP 的重要應用。fasttext是facebook開源的一個詞向量與文本分類 ...

1. 文本相似度計算-文本向量化 2. 文本相似度計算-距離的度量 3. 文本相似度計算-DSSM算法 4. 文本相似度計算-CNN-DSSM算法 1.前言 在自然語言處理過程中，經常會涉及 ...

1. 語言模型 2. Attention Is All You Need（Transformer）算法原理解析 3. ELMo算法原理解析 4. OpenAI GPT算法原理解析 5. BER ...

一、N-gram介紹 　　n元語法（英語：N-gram）指文本中連續出現的n個語詞。n元語法模型是基於(n - 1)階馬爾可夫鏈的一種概率語言模型，通過n個語詞出現的概率來推斷語句的結構。這一模型被 ...

本文來自：http://mysqlserverteam.com/innodb%E5%85%A8%E6%96%87%E7%B4%A2%E5%BC%95%EF%BC%9An-gram-parser/ I ...

假設有一段文本："I have a cat, his name is Huzihu. Huzihu is really cute and friendly. We are good friends." ...

定義 什么是語言模型，通俗的講就是從語法上判斷一句話是否通順。即判斷如下的概率成立： \[p(\text{今天是周末})>p(\text{周末是今天}) \] 鏈式法則(chain ...