最近因为疫情的原因，偷了好长时间的懒，现在终于开始继续看Flink 的SQL 了 ———————————————— 电脑上的Flink 项目早就升级到了 1.10了，最近还在看官网新的文档，趁着周末，体验一下新版本的SQL API（踩一下坑）。 直接从之前的 云邪大佬的Flink ...

Flink的kafka connector文档 https://ci.apache.org/projects/flink/flink-docs-release-1.12/zh/dev/connectors/kafka.html Flink写入kafka时候需要实现序列化和反序列化 ...

flink读写mysql总是出问题，记录一下 先是pom文件： ...

iceberg 0.11 发布的时候稍微尝试了一下，发现实际并没有说的那么厉害，很多功能其实还在开发中(比如： upsert) 贴段之前写的 flink sql： 注： 貌似没有 hive catalog，只能放在 hadoop 上面，不支持 upsert iceberg master ...

在消息RabbitMQ时,我们关心的一个问题是手动ack还是自动ack,如果是自动ack就怕出现丢消息的情况 Flink以RabbitMQ作为Source,是怎么保证消息唯一性的呢,是怎么保证ack的. 首先引入依赖包 <dependency> ...

https://www.cnblogs.com/huxi2b/p/7456936.html ...

经常遇到这样的场景,13点-14点的时候flink程序发生了故障,或者集群崩溃,导致实时程序挂掉1小时,程序恢复的时候想把程序倒回13点或者更前,重新消费kafka中的数据. 下面的代码就是根据指定时间戳(也可以换算成时间)开始消费数据,支持到这样就灵活了,可以在启动命令中加个参数,然后再 ...

启动kafka和flink 1、进入zookeeper的bin目录下启动zookeeper 2、进入kafka的bin目录下启动kafka 3、进入flink的bin目录下启动flink kafka启动生产者 kafka主题为sensor ...