1.前言 　　之前几篇文章都是围绕Rocksdb状态后端引申出来的一系列问题，本文主要介绍一下Rocksdb作为状态后端的一些技术细节，以及Flink的状态抽象是如何设计的，为开发一个新的状态后端做指导。 　　本文基于Flink 1.8.2，目前Flink版本处于一种快速变化的过程，所以可能不 ...

Flink架构、原理与部署测试 Apache Flink是一个面向分布式数据流处理和批量数据处理的开源计算平台，它能够基于同一个Flink运行时，提供支持流处理和批处理两种类型应用的功能。 现有的开源计算方案，会把流处理和批处理作为两种不同的应用类型，因为它们所提供的SLA ...

Flink on Yarn 的两种模式 Yarn Session：启动一个长期运行的 Yarn 程序，这个 Yarn 程序在不同的 container 上启动 Job Manager 和 Task Manager，实现了 Flink 集群功能，然后每个 Flink app 都提交 ...

一. Flink的引入 这几年大数据的飞速发展，出现了很多热门的开源社区，其中著名的有 Hadoop、Storm，以及后来的 Spark，他们都有着各自专注的应用场景。Spark 掀开了内存计算的先河，也以内存为赌注，赢得了内存计算的飞速发展。Spark 的火热或多或少的掩盖 ...

Flink 剖析 1.概述 　　在如今数据爆炸的时代，企业的数据量与日俱增，大数据产品层出不穷。今天给大家分享一款产品—— Apache Flink，目前，已是 Apache 顶级项目之一。那么，接下来，笔者为大家介绍Flink 的相关内容。 2.内容 2.1 What's ...

CheckpointBarrierHandler 这个接口用于react从input channel过来的checkpoint barrier，这里可以通过不同的实现来，决定是简单的track ...

自己编译flink的环境：Linux、git、maven、jdk8以上。 获取flink源代码：git clone https://github.com/apache/flink.git 　　克隆flink项目到本地，下载会等一会。 　　 　　下载完成之后： 　　 进入对应 ...

1、准备 准备集群 Zookeeper集群 Hadoop集群 准备flink jar包 官网地址：https://flink.apache.org/downloads.html flink-1.8之后没有集成hadoop，需要下载对应的hadoop jar包 1.8之前 ...