億級規模的Elasticsearch優化實戰
Elasticsearch 的基本信息大致如圖所示，這里就不具體介紹了。 本次分享主要包含兩個方面的實戰經驗：索引性能和查詢性能。 一. 索引性能（Index Performance） ...
原文：我是如何用單機實現億級規模題庫去重的？
背景 最近工作中遇到了一個問題：如何對大規模題庫去重 公司經過多年的積累，有着近億道題目的題庫，但是由於題目來源不一導致題庫中有很多重復的題目，這些重復的題目在檢索時，除了增加搜索引擎的計算量外，並不會提高准確率。此外由於題目過多，搜索引擎往往采取了截斷策略，只對一部分題目進行計算，這導致了某些正確的題目反而得不到計算，拍搜准確率甚至不增反降。所以對於一個搜索引擎來說，雖然初期增加題目數量往往可以 ...
2018-02-09 18:10 19 6616 推薦指數：
相關推薦
億級規模的Elasticsearch優化實戰
本次分享主要包含兩個方面的實戰經驗：索引性能和查詢性能。 一. 索引性能（Index Performance） 首先要考慮的是，索引性能是否有必要 ...
億級規模的Elasticsearch優化實戰
億級規模的Elasticsearch優化實戰 Elasticsearch 的基本信息大致如圖所示，這里就不具體介紹了。 本次分享主要包含兩個方面的實戰經驗：索引性能和查詢性能。 一. 索引性能（Index Performance） 首先要考慮的是，索引性能 ...
億級 Web 系統搭建：單機到分布式集群
本文內容 Web 負載均衡 HTTP 重定向 反向代理 IP 負載均衡 DNS 負載均衡 Web 系統緩存機制的建立和優化 ...
億級Web系統搭建——單機到分布式集群
當一個Web系統從日訪問量10萬逐步增長到1000萬，甚至超過1億的過程中，Web系統承受的壓力會越來越大，在這個過程中，我們會遇到很多的問題。為了解決這些性能壓力帶來問題，我們需要在Web系統架構層面搭建多個層次的緩存機制。在不同的壓力階段，我們會遇到不同的問題，通過搭建不同的服務和架構來解決 ...
億級流量實驗平台設計與實現
大家好，我是雨樂。今天給大家分享一款億級流量實驗平台。 在互聯網行業，要上線一個策略(CTR預估、CVR預估等)，或者一個功能，如果貿然全量上線，那么如果新策略效果不佳，可能會造成不小的損失，要么丟失用戶，要么損失收入。 那么怎樣才能避免此問題發生呢？這就引入了實驗平台，通過對流量打標簽，然后分 ...
Flink+Hologres億級用戶實時UV精確去重最佳實踐
簡介： Flink+Hologres億級用戶實時UV精確去重最佳實踐 UV、PV計算，因為業務需求不同，通常會分為兩種場景： 離線計算場景：以T+1為主，計算歷史數據 ...
巧用 Bitmap 實現億級海量數據統計
，我們面臨的用戶數量以及訪問量都是巨大的，比如百萬、千萬級別的用戶數量，或者千萬級別、甚至億級別的訪問信息。 ...