最近因為疫情的原因，偷了好長時間的懶，現在終於開始繼續看Flink 的SQL 了 ———————————————— 電腦上的Flink 項目早就升級到了 1.10了，最近還在看官網新的文檔，趁着周末，體驗一下新版本的SQL API（踩一下坑）。 直接從之前的 雲邪大佬的Flink ...

Flink的kafka connector文檔 https://ci.apache.org/projects/flink/flink-docs-release-1.12/zh/dev/connectors/kafka.html Flink寫入kafka時候需要實現序列化和反序列化 ...

flink讀寫mysql總是出問題，記錄一下 先是pom文件： ...

iceberg 0.11 發布的時候稍微嘗試了一下，發現實際並沒有說的那么厲害，很多功能其實還在開發中(比如： upsert) 貼段之前寫的 flink sql： 注： 貌似沒有 hive catalog，只能放在 hadoop 上面，不支持 upsert iceberg master ...

在消息RabbitMQ時,我們關心的一個問題是手動ack還是自動ack,如果是自動ack就怕出現丟消息的情況 Flink以RabbitMQ作為Source,是怎么保證消息唯一性的呢,是怎么保證ack的. 首先引入依賴包 <dependency> ...

https://www.cnblogs.com/huxi2b/p/7456936.html ...

經常遇到這樣的場景,13點-14點的時候flink程序發生了故障,或者集群崩潰,導致實時程序掛掉1小時,程序恢復的時候想把程序倒回13點或者更前,重新消費kafka中的數據. 下面的代碼就是根據指定時間戳(也可以換算成時間)開始消費數據,支持到這樣就靈活了,可以在啟動命令中加個參數,然后再 ...

啟動kafka和flink 1、進入zookeeper的bin目錄下啟動zookeeper 2、進入kafka的bin目錄下啟動kafka 3、進入flink的bin目錄下啟動flink kafka啟動生產者 kafka主題為sensor ...