一、美團點評實時計算演進 美團點評實時計算演進歷程 在 2016 年,美團點評就已經基於 Storm 實時計算引擎實現了初步的平台化。2017 年初,我們引入了 Spark Streaming 用於特定場景的支持,主要是在數據同步場景方面的嘗試。在 2017 年底,美團點評實時計算平台引入 ...
前置倉發展歷程梳理前置倉的最初概念是電商為提高配送時效在更接近消費者的地理范圍內建立的小 型倉庫,而如今在新零售的賦能下,前置倉成為生鮮電商企業的 掌中寶 ,為滿足 消費者的物流時效需要以及個性化需求提供可能。回顧前置倉的發展歷程如下:萌芽摸索期 年 :隨着氣溫高,配送慢等問題, 年夏季生鮮電商行業痛點集中爆發,另外B C模式下冷鏈費用過高。為了更好地解決這些問題,生鮮電商企業首次提出前置倉模式 ...
2021-10-08 09:49 0 775 推薦指數:
一、美團點評實時計算演進 美團點評實時計算演進歷程 在 2016 年,美團點評就已經基於 Storm 實時計算引擎實現了初步的平台化。2017 年初,我們引入了 Spark Streaming 用於特定場景的支持,主要是在數據同步場景方面的嘗試。在 2017 年底,美團點評實時計算平台引入 ...
Java生鮮電商平台-團購模塊設計與架構 說明:任何一個電商系統中,對於促銷這塊是必不可少的,畢竟這塊是最吸引用戶的,用戶也是最愛的模塊之一,理由很簡單,便宜。 我的經驗是無論是大的餐飲點還是小的餐飲店,優惠與折扣永遠是說福他們進入平台的最好的手段之一。(大企業叫做 ...
一、前言 數倉建模的成熟度在金融領域,尤其是銀行、保險和證券行業得益於傳統數據倉庫服務廠商的推動,具有非常好的最佳實踐,但是在互聯網領域卻從未形成真正的標准和規范。本文基於汽車電商零售領域的實踐總結和沉淀而來,作為隨筆,發布與此,共享給大家。 二、工作流程 數倉模型設計的工作流程,基於場景 ...
1.實時數倉概述 1.1實時數倉產生背景 傳統的OLTP數據庫: 面向事務處理、面向業務、進行增刪改查、反映最新狀態 數據倉庫: 面向主題、集成、相對穩定、反應歷史變化 1.2離線數倉架構 1.3實時數倉架構 1.3.1實時數倉的Lambda架構 1.3.2實時數倉 ...
作為一個數據人,是不是經常被各種名詞圍繞,是不是對其中很多概念認知模糊。有些詞雖然只有一字之差,但是它們意思完全不同,今天我們就來了解下數倉建設及數據分析時常見的一些概念含義及它們之間的關系。 本文結構如下圖所示: 一、數倉中常見概念解析 1. 實體 ...
引言 近些年,企業對數據服務實時化服務需求日益增多。本文整理了常見實時數據組件的性能特點和適用場景,介紹了美團如何通過 Flink 引擎構建實時數據倉庫,從而提供高效、穩健的實時數據服務。此前我們美團技術博客發布過一篇文章《流計算框架 Flink 與 Storm 的性能對比》,對 Flink ...
引言 近些年,企業對數據服務實時化服務的需求日益增多。本文整理了常見實時數據組件的性能特點和適用場景,介紹了美團如何通過 Flink 引擎構建實時數據倉庫,從而提供高效、穩健的實時數據服務。此前我們美團技術博客發布過一篇文章《流計算框架 Flink 與 Storm 的性能對比》,對 Flink ...
實時數倉以端到端低延遲、SQL標准化、快速響應變化、數據統一為目標。美團外賣數據智能組總結的最佳實踐是:一個通用的實時生產平台跟一個通用交互式實時分析引擎相互配合,同時滿足實時和准實時業務場景。兩者合理分工,互相補充,形成易開發、易維護且效率高的流水線,兼顧開發效率與生產成本,以較好的投入產出 ...