簡介: 本文將會講述共享充電寶開創企業來電科技如何基於Flink+Hologres構建統一數據服務加速的實時數倉 作者:陳健新,來電科技數據倉庫開發工程師,目前專注於負責來電科技大數據平台離線和實時架構 ...
簡介:本文將會講述共享充電寶開創企業來電科技如何基於 Flink Hologres 構建統一數據服務加速的實時數倉 作者:陳健新,來電科技數據倉庫開發工程師,目前專注於負責來電科技大數據平台離線和實時架構的整合。 深圳來電科技有限公司 以下簡稱 來電科技 是共享充電寶行業開創企業,主要業務覆蓋充電寶自助租賃 定制商場導航機開發 廣告展示設備及廣告傳播等服務。來電科技擁有業內立體化產品線,大中小機櫃 ...
2021-06-17 10:14 0 157 推薦指數:
簡介: 本文將會講述共享充電寶開創企業來電科技如何基於Flink+Hologres構建統一數據服務加速的實時數倉 作者:陳健新,來電科技數據倉庫開發工程師,目前專注於負責來電科技大數據平台離線和實時架構 ...
簡介: 介紹了順豐科技數倉的架構,趟過的一些問題、使用 Hudi 來優化整個 job 狀態的實踐細節,以及未來的一些規划。 本文作者為劉傑,介紹了順豐科技數倉的架構,趟過的一些問題、使用 Hudi 來優化整個 job 狀態的實踐細節,以及未來的一些規划。主要內容為: 數倉架構 ...
簡介: 《實時數倉入門訓練營》由阿里雲研究員王峰、阿里雲資深技術專家金曉軍、阿里雲高級產品專家劉一鳴等實時計算 Flink 版和 Hologres 的多名技術/產品一線專家齊上陣,合力搭建此次訓練營的課程體系,精心打磨課程內容,直擊當下同學們所遇到的痛點問題。由淺入深全方位解析實時數倉 ...
一、普通實時計算和實時數倉的比較 普通實時計算優先考慮時效性,從數據采集經過計算直接得到結果,時效性更好,但是中間結果沒有沉淀下來,當面臨大量實時計算的時候,計算的復用性差,開發成本大大提高; 實時數倉是基於數倉理論對數據分層,提高數據的復用率; 二、實時數倉分層 ods ...
Flink實時數倉(一)架構設計 1、架構設計 2、數據同步方案 ...
目錄: 一. 實時計算初期 二. 實時數倉建設 三. Lambda架構的實時數倉 四. Kappa架構的實時數倉 五. 流批結合的實時數倉 實時計算初期 雖然實時計算在最近幾年才火起來,但是在早期也有部分公司有實時計算的需求,但是數據量比較少,所以在實時方面形成不了完整的體系,基本所 ...
的kappa架構 1.3.3實時數倉的OLAP變體 2.基於Flink實現典型的ETL場景 2.1 ...