原文:最佳實踐:Pulsar 為批流處理提供融合存儲

非常榮幸有機會和大家分享一下 Apache Pulsar 怎樣為批流處理提供融合的存儲。希望今天的分享對做大數據處理的同學能有幫助和啟發。 這次分享,主要分為四個部分: 介紹與其他消息系統相比, Apache Pulsar 的獨特優勢 分析批流處理中的存儲需求 講述 Apache Pulsar 如何完美匹配批流處理中的存儲需求 介紹怎樣使用 Apache Pulsar 提供批流融合的存儲 Apac ...

2020-09-02 23:51 0 788 推薦指數:

查看詳情

Flink 和 Pulsar融合

簡介: 如何通過 Apache Pulsar 原生的存儲計算分離的架構提供融合的基礎,以及 Apache Pulsar 如何與 Flink 結合,實現一體的計算。 簡介:StreamNative 聯合創始人翟佳在本次演講中介紹了下一代雲原生消息平台 Apache ...

Thu May 27 17:48:00 CST 2021 0 192
統一批處理處理——Flink一體實現原理

實現批處理的技術許許多多,從各種關系型數據庫的sql處理,到大數據領域的MapReduce,Hive,Spark等等。這些都是處理有限數據的經典方式。而Flink專注的是無限流處理,那么他是怎么做到批處理的呢? 無限流處理:輸入數據沒有盡頭;數據處理從當前或者過去的某一個時間 點開 ...

Fri Sep 06 18:34:00 CST 2019 0 3265
Pulsar部署和實踐(一)

前言 本地Docker部署Pulsar消息代理實現消息發布和消息訂閱 介紹 相關概念,后面有時間再花時間整理下。 實踐步驟 1.使用dokcer本地部署pulsar docker run -it \ -p 6650:6650 \ -p 8080 ...

Sat May 15 05:52:00 CST 2021 0 1850
MySQL 中存儲時間的最佳實踐

平時開發中經常需要記錄時間,比如用於記錄某條記錄的創建時間以及修改時間。在數據庫中存儲時間的方式有很多種,比如 MySQL 本身就提供了日期類型,比如 DATETIME,TIMESTAMEP 等,我們也可以直接存儲時間戳為 INT 類型,也有人直接將時間存儲為字符串類型。 那么到底哪種存儲時間 ...

Thu Jul 01 18:34:00 CST 2021 0 642
Linux故障處理最佳實踐

引言 業務中斷了! 老板咆哮,主管抓狂,而你就是那個要去處理故障、恢復業務的不幸的人。 你將會怎么做?泡一杯咖啡准備通宵苦戰?此時,或許你的心底也充滿無奈: Linux服務器上部署的業務出現中斷時,為快速處理問題、消除故障,避免以上苦逼的劇情發生,我們可以做哪些准備 ...

Sun Mar 04 04:57:00 CST 2012 2 3776
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM