原文:順豐科技 Hudi on Flink 實時數倉實踐

簡介:介紹了順豐科技數倉的架構,趟過的一些問題 使用 Hudi 來優化整個 job 狀態的實踐細節,以及未來的一些規划。 本文作者為劉傑,介紹了順豐科技數倉的架構,趟過的一些問題 使用 Hudi 來優化整個 job 狀態的實踐細節,以及未來的一些規划。主要內容為: 數倉架構 Hudi 代碼躺過的坑 狀態優化 未來規划 順豐科技早在 年引入 Hudi ,當時是基於 Spark 批處理, 年對數據的 ...

2021-10-12 10:47 0 113 推薦指數:

查看詳情

來電科技:基於 Flink + Hologres 的實時數演進之路

簡介: 本文將會講述共享充電寶開創企業來電科技如何基於 Flink + Hologres 構建統一數據服務加速的實時數 作者:陳健新,來電科技數據倉庫開發工程師,目前專注於負責來電科技大數據平台離線和實時架構的整合。 深圳來電科技有限公司(以下簡稱 “來電科技”)是共享充電寶行業開創 ...

Thu Jun 17 18:14:00 CST 2021 0 157
來電科技:基於Flink+Hologres的實時數演進之路

簡介: 本文將會講述共享充電寶開創企業來電科技如何基於Flink+Hologres構建統一數據服務加速的實時數 作者:陳健新,來電科技數據倉庫開發工程師,目前專注於負責來電科技大數據平台離線和實時架構 ...

Fri Jun 04 19:45:00 CST 2021 0 173
美團點評基於 Flink實時數建設實踐

引言 近些年,企業對數據服務實時化服務需求日益增多。本文整理了常見實時數據組件的性能特點和適用場景,介紹了美團如何通過 Flink 引擎構建實時數據倉庫,從而提供高效、穩健的實時數據服務。此前我們美團技術博客發布過一篇文章《流計算框架 Flink 與 Storm 的性能對比》,對 Flink ...

Mon Sep 27 23:15:00 CST 2021 0 118
美團點評基於 Flink實時數建設實踐

引言 近些年,企業對數據服務實時化服務的需求日益增多。本文整理了常見實時數據組件的性能特點和適用場景,介紹了美團如何通過 Flink 引擎構建實時數據倉庫,從而提供高效、穩健的實時數據服務。此前我們美團技術博客發布過一篇文章《流計算框架 Flink 與 Storm 的性能對比》,對 Flink ...

Fri Oct 19 18:45:00 CST 2018 2 16971
快手基於 Flink 構建實時數場景化實踐

簡介: 一文了解快手基於 Flink 構建的實時數架構,以及一些難題的解決方案。 本文整理自快手數據技術專家李天朔在 5 月 22 日北京站 Flink Meetup 分享的議題《快手基於 Flink 構建實時數場景化實踐》,內容包括: 快手實時計算場景 ...

Fri Aug 27 22:24:00 CST 2021 0 177
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM