原文:Flink Program Guide (9) -- StateBackend : Fault Tolerance(Basic API Concepts -- For Java)

State Backends 本文翻譯自文檔Streaming Guide Fault Tolerance StateBackend 使用Data Stream API編寫的程序通常以多種形式維護狀態: 窗口將收集element或在它被觸發后聚合element Transformation方法可能會使用key value狀態接口來存儲值 Transformation方法也可能會實現Checkpoi ...

2016-08-19 00:05 0 1656 推薦指數:

查看詳情

容錯(Fault-tolerance)

Spark Streaming的容錯包括了三個地方的容錯: 1、Executor失敗容錯:Executor的失敗會重新啟動一個新的Executor,這個是Spark自身的特性。如果Rece ...

Mon Sep 09 04:35:00 CST 2019 0 743
Flink DataSet API Programming Guide

https://ci.apache.org/projects/flink/flink-docs-release-0.10/apis/programming_guide.html Example Program 編程的風格和spark很類似, ExecutionEnvironment ...

Fri Jan 29 21:50:00 CST 2016 0 2586
Flink DataStream API Programming Guide

Example Program The following program is a complete, working example of streaming window word count application, that counts the words coming from ...

Tue Apr 26 20:07:00 CST 2016 6 4957
Flink StateBackend 狀態后端

一、概述 保存機制 StateBackend ,默認情況下,State 會保存在 TaskManager 的內存中,CheckPoint 會存儲在 JobManager 的內存中。 State 和 CheckPoint 的存儲位置取決於 StateBackend 的配置。 Flink 一共 ...

Tue Jun 09 19:24:00 CST 2020 0 1447
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM