最牛語義匹配算法_速圍觀!


現在大家天天都在說人工智能~ 智能的第一步就是——理解用戶意思。

全文檢索算是理解用戶意思嗎?——不完全是。原因是:全文檢索只能做字面的匹配,如果用戶輸入不准確,則並不能找到答案。

那么都有什么辦法來理解用戶意思呢?

珺姐不才,只聽過組里算法同學給普及的word mover’s distance算法,聽起來還是挺高大上的有木有?

The WMD distance measures the dissimilarity between two text documents as the minimum amount of distance that the embedded words of one document need to “travel” to reach the embedded words of another document. 原來句子和句子之間的意思理解是通過travel distance來衡量的。瞬間覺得word還能游動起來有木有!

這比全文檢索強大在哪里呢?

請看下面的這張圖,“奧巴馬”和“總統”這兩個詞在字面上相差甚遠,但是他們的詞向量的空間距離卻是很接近的。如果使用全文檢索,這完全是兩個不同的詞。

image

大家也來談談自己知曉的牛逼的語義匹配的算法吧?一起開眼界!學起來!

原文鏈接


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM