Flink的流处理--KeyBy
逻辑上将一个流分成不相交的分区，每个分区包含相同键的元素。在内部，这是通过散列分区来实现的 ...
相关推荐
Keyby算子（flink）
flink的keyby算子作用是把相同key的数据发送到一个分区（即一个subtask里面去），采用的是哈希分区方法。 用法多样，主要整理了下图中的四种用法。 第一种是 key(Interger) 用法，传入一个整数，这个整数对应的是元组中的元素顺序是第几个，（注：可以是多个key,不一定 ...
Flink 基本算子map、keyBy、sum、reduce
核心代码： object TransformTest { def main(args: Array[String]): Unit = { val env = StreamExec ...
Flink延时监控
什么是延时监控？延时监控，简单理解监控算子到算子的延迟时间。记录算子间或者源流入到算子时间，监控系统健康以及调节。 流式计算中处理延迟是一个非常重要的监控metric flink中通过开启配置 metrics.latency.interval 来开启latency后就可以 ...
Apache Flink 零基础入门（七）Flink中keyBy三种方式指定key
来源于 https://blog.csdn.net/vincent_duan/article/details/100880838 keyBy 如何指定key不管是stream还是batch处理，都有一个keyBy(stream)和groupBy(batch)操作。那么该如何指定key ...
RocketMQ源码 — 九、 RocketMQ延时消息
上一节消息重试里面提到了重试的消息可以被延时消费，其实除此之外，用户发送的消息也可以指定延时时间（更准确的说是延时等级），然后在指定延时时间之后投递消息，然后被consumer消费。阿里云的ons还支持定时消息，而且延时消息是直接指定延时时间，其实阿里云的延时消息也是定时消息的另一种表述方式，都是 ...
flink源码阅读（概览）
clone官方1.6.2版本flink，成功编译。（一般PC还真跑不动，我是用服务器编译的） 编译完后，略微修改了一下启动脚本后，成功跑起来。 sh bin/start-cluster.sh 红色部分是我改过的地方： vim start-cluster.sh bin=`dirname ...
flink checkpoint 源码分析 （二）
转发请注明原创地址http://www.cnblogs.com/dongxiao-yang/p/8260370.html flink checkpoint 源码分析 （一）一文主要讲述了在JobManager端定时生成TriggerCheckpoint的代码部分，本文继续研究 ...