原文:Flink Program Guide (9) -- StateBackend : Fault Tolerance(Basic API Concepts -- For Java)

State Backends 本文翻译自文档Streaming Guide Fault Tolerance StateBackend 使用Data Stream API编写的程序通常以多种形式维护状态: 窗口将收集element或在它被触发后聚合element Transformation方法可能会使用key value状态接口来存储值 Transformation方法也可能会实现Checkpoi ...

2016-08-19 00:05 0 1656 推荐指数:

查看详情

容错(Fault-tolerance)

Spark Streaming的容错包括了三个地方的容错: 1、Executor失败容错:Executor的失败会重新启动一个新的Executor,这个是Spark自身的特性。如果Rece ...

Mon Sep 09 04:35:00 CST 2019 0 743
Flink DataSet API Programming Guide

https://ci.apache.org/projects/flink/flink-docs-release-0.10/apis/programming_guide.html Example Program 编程的风格和spark很类似, ExecutionEnvironment ...

Fri Jan 29 21:50:00 CST 2016 0 2586
Flink DataStream API Programming Guide

Example Program The following program is a complete, working example of streaming window word count application, that counts the words coming from ...

Tue Apr 26 20:07:00 CST 2016 6 4957
Flink StateBackend 状态后端

一、概述 保存机制 StateBackend ,默认情况下,State 会保存在 TaskManager 的内存中,CheckPoint 会存储在 JobManager 的内存中。 State 和 CheckPoint 的存储位置取决于 StateBackend 的配置。 Flink 一共 ...

Tue Jun 09 19:24:00 CST 2020 0 1447
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM