淘寶萬億級海量交易訂單存儲在哪？
01淘寶交易訂單系統介紹 天貓和淘寶每天發生的實物和虛擬商品的交易達到億級別。考慮到一次成功交易的整個鏈路，會涉及到會員信息驗證，商品庫信息查詢，訂單創建，庫存扣減，優惠扣減，訂單支付，物流信息更新，確認支付等。 鏈路中的每一環都涉及到數據庫中記錄的創建和狀態的更新，一次成功的交易可能對 ...
原文：萬億級KV存儲架構與實踐
一 KV 存儲發展歷程 我們第一代的分布式 KV 存儲如下圖左側的架構所示，相信很多公司都經歷過這個階段。在客戶端內做一致性哈希，在后端部署很多的 Memcached 實例，這樣就實現了最基本的 KV 存儲分布式設計。但這樣的設計存在很明顯的問題：比如在宕機摘除節點時，會丟數據，緩存空間不夠需要擴容，一致性哈希也會丟失一些數據等等，這樣會給業務開發帶來的很多困擾。 隨着 Redis 項目的成熟，我 ...
2020-07-05 11:14 0 1906 推薦指數：
相關推薦
【HBase調優】Hbase萬億級存儲性能優化總結
背景：HBase主集群在生產環境已穩定運行有1年半時間，最大的單表region數已達7200多個，每天新增入庫量就有百億條，對HBase的認識經歷了懵懂到熟的過程。為了應對業務數據的壓力，HBase入 ...
KV存儲系統
現在的KV存儲系統都是分布式的，首先介紹Zookeeper——針對大型分布式系統的高可靠的協調系統。 開發分布式系統是件很困難的事情，其中的困難主要體現在分布式系統的“部分失敗”。“部分失敗”是指信息在網絡的兩個節點之間傳送時候，如果網絡出了故障，發送者無法知道接收者是否收到了這個信息，而且這種 ...
Kafka萬億級消息實戰
一、Kafka應用 本文主要總結當Kafka集群流量達到 萬億級記錄/天或者十萬億級記錄/天 甚至更高后，我們需要具備哪些能力才能保障集群高可用、高可靠、高性能、高吞吐、安全的運行。 這里總結內容主要針對Kafka2.1.1版本，包括集群版本升級、數據遷移、流量限制、監控告警、負載均衡、集群 ...
萬億級日志與行為數據存儲查詢技術剖析（續）——Tindex是改造的lucene和druid
五、Tindex 數果智能根據開源的方案自研了一套數據存儲的解決方案，該方案的索引層通過改造Lucene實現，數據查詢和索引寫入框架通過擴展Druid實現。既保證了數據的實時性和指標自由定義的問題，又能滿足大數據量秒級查詢的需求，系統架構如下圖，基本實現了文章開頭提出的幾個目標。 (點擊放大 ...
騰訊劉金明：騰訊雲 EB 級對象存儲架構深度剖析及實踐
發展。 騰訊雲存儲業務中心副總監-劉金明，在雲+未來峰會上做了主題為《騰訊雲 EB 級對象存儲架構深度剖析及實踐 ...
字節跳動自研強一致在線 KV &表格存儲實踐 - 上篇
存儲系統在能夠保證數據強一致的同時，也具有良好的擴展性。在數據模型上，有些數據比如關系，KV 模型足夠用 ...