58同城作為中國最大的分類信息網站,向用戶提供找房子、找工作、二手車和黃頁等多種生活信息。在這樣的場景下,推薦系統能夠幫助用戶發現對自己有價值的信息,提升用戶體驗,本文將介紹58同城智能推薦系統的技術演進和實踐。 58同城智能推薦系統大約誕生於2014年(C++實現),該套 ...
前言: 上個月公司的同事提議組內做幾次關於數據挖掘的技術串講交流下學習和工作經驗,本着提攜新人的考慮,建議博主也講點什么。開始時博主想簡單講一講推薦算法的協同過濾算法。后來考慮到其實串講不僅僅是和其他人交流分享,也是對自己已有知識的鞏固。想一想還是加點挑戰,談談推薦系統吧 。為什么選推薦系統呢,原因有三個: .人們在網絡中經常接觸推薦,講起來例子多,人們不陌生 .原理比較簡單,不需要學習者有高超的 ...
2017-06-16 20:03 0 1410 推薦指數:
58同城作為中國最大的分類信息網站,向用戶提供找房子、找工作、二手車和黃頁等多種生活信息。在這樣的場景下,推薦系統能夠幫助用戶發現對自己有價值的信息,提升用戶體驗,本文將介紹58同城智能推薦系統的技術演進和實踐。 58同城智能推薦系統大約誕生於2014年(C++實現),該套 ...
推薦系統 1.緣起 糖豆作為國內最大的廣場舞平台,全網的MAU已經超過4000萬,每月PGC和UCG生產的視頻個數已經超過15萬個,每月用戶觀看的視頻也超過100萬個。然而之前糖豆APP首頁主要還是依賴內容編輯手工推薦來發現內容,每天的推薦量也是幾十個而已。明顯可見千人一面的內容分發效率比較 ...
前面幾章介紹了各種各樣的數據和基於這些數據的推薦算法。在實際系統中,前面幾章提到的數據大都存在,因此如何設計一個真實的推薦系統處理不同的數據,根據不同的數據設計算法,並將這些算法融合到一個系統當中是本章討論的主要問題。本章將首先介紹推薦系統的外圍架構,然后介紹推薦系統的架構,並對架構中每個模塊 ...
1. 推薦系統的作用和意義 在這個時代,無論信息消費者還是信息生產者都面臨巨大的挑戰。 信息消費者:在大量信息中找到自己感興趣的信息很困難。 信息生產者:將自己生產的信息讓廣大消費者關注很困難。 推薦系統將用戶與信息聯系起來。 1.1 用戶 ...
等相似計算算法中的哈利波特問題,相似性計算在推薦系統的召回起到非常重要的作用,而熱門物品和用戶天然有優勢 ...
第四部分-推薦系統-項目介紹 行業背景: 快速:Apache Spark以內存計算為核心 通用 :一站式解決各個問題,ADHOC SQL查詢,流計算,數據挖掘,圖計算 完整的生態圈 只要掌握Spark,就能夠為大多數的企業的大數據應用場景提供明顯的加速 項目背景介紹: 項目架構 ...
第四部分-推薦系統-模型訓練 本模塊基於第3節 數據加工得到的訓練集和測試集數據 做模型訓練,最后得到一系列的模型,進而做 預測。 訓練多個模型,取其中最好,即取RMSE(均方根誤差)值最小的模型 說明幾點 1.ALS 算法不需要自己實現,Spark MLlib 已經實現好了 ...
推薦概念 信息過濾系統 解決 信息過載 用戶需求不明確的問題 利用一定的規則將物品排序 展示給需求不明確的用戶 推薦 搜索區別 推薦個性化較強,用戶被動的接受,希望能夠提供持續的服務 搜索個性化弱,用戶主動搜索,快速滿足用戶的需求 ...