原文:Flink+Clickhouse實時數倉在廣投集團的最佳實踐

一 業務背景 由於歷史原因,大型集團企業往往多個帳套系統共存,包括國內知名ERP廠商浪潮 用友 金蝶 速達所提供的財務系統,集團財務共享中心的財務人員在核對財務憑證數據時經常需要跨多個系統查詢且每個系統使用方式不一,同時因為系統累計數據龐大,制單和查詢操作經常出現卡頓,工作效率非常低。 數據中台天然就是為了解決數據孤島和數據口徑不一致問題應運而生的,總的來說就是要將原本存在各帳套系統的數據實時接入 ...

2021-09-21 23:40 0 241 推薦指數:

查看詳情

微信 ClickHouse 實時數最佳實踐

作者:微信WeOLAP團隊&騰訊雲數據倉庫 Clickhouse 團隊 微信作為一款國民級應用,已經覆蓋了社交、支付、出行等人們生活的方方面面。海量多樣化的業務形態,對數據分析提出了新的挑戰。為了滿足業務數據分析的需求,微信 WeOLAP 團隊聯手騰訊雲,共建千台規模、數據 PB ...

Mon Nov 29 05:02:00 CST 2021 0 120
美團點評基於 Flink實時數建設實踐

引言 近些年,企業對數據服務實時化服務需求日益增多。本文整理了常見實時數據組件的性能特點和適用場景,介紹了美團如何通過 Flink 引擎構建實時數據倉庫,從而提供高效、穩健的實時數據服務。此前我們美團技術博客發布過一篇文章《流計算框架 Flink 與 Storm 的性能對比》,對 Flink ...

Mon Sep 27 23:15:00 CST 2021 0 118
美團點評基於 Flink實時數建設實踐

引言 近些年,企業對數據服務實時化服務的需求日益增多。本文整理了常見實時數據組件的性能特點和適用場景,介紹了美團如何通過 Flink 引擎構建實時數據倉庫,從而提供高效、穩健的實時數據服務。此前我們美團技術博客發布過一篇文章《流計算框架 Flink 與 Storm 的性能對比》,對 Flink ...

Fri Oct 19 18:45:00 CST 2018 2 16971
美團點評基於 Flink實時數平台實踐

一、美團點評實時計算演進 美團點評實時計算演進歷程 在 2016 年,美團點評就已經基於 Storm 實時計算引擎實現了初步的平台化。2017 年初,我們引入了 Spark Streaming 用於特定場景的支持,主要是在數據同步場景方面的嘗試。在 2017 年底,美團點評實時計算平台引入 ...

Mon Jan 06 22:35:00 CST 2020 1 2736
快手基於 Flink 構建實時數場景化實踐

簡介: 一文了解快手基於 Flink 構建的實時數架構,以及一些難題的解決方案。 本文整理自快手數據技術專家李天朔在 5 月 22 日北京站 Flink Meetup 分享的議題《快手基於 Flink 構建實時數場景化實踐》,內容包括: 快手實時計算場景 ...

Fri Aug 27 22:24:00 CST 2021 0 177
順豐科技 Hudi on Flink 實時數實踐

​簡介: 介紹了順豐科技數的架構,趟過的一些問題、使用 Hudi 來優化整個 job 狀態的實踐細節,以及未來的一些規划。 本文作者為劉傑,介紹了順豐科技數的架構,趟過的一些問題、使用 Hudi 來優化整個 job 狀態的實踐細節,以及未來的一些規划。主要內容為: 數架構 ...

Tue Oct 12 18:47:00 CST 2021 0 113
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM