大数据基础---Flink开发环境搭建
一、安装 Scala 插件 Flink 分别提供了基于 Java 语言和 Scala 语言的 API ，如果想要使用 Scala 语言来开发 Flink 程序，可以通过在 IDEA 中安装 Scala 插件来提供语法提示，代码高亮等功能。打开 IDEA , 依次点击 File => ...
原文：大数据开发-Flink-1.13新特性
介绍 大概 月，Flink . 就发布了，参加 了Flink . 的Meetup，收获还是挺多，从大的方面讲就是FlingSql的改进和优化，资源调度管理方面的优化，以及流批一体Flink在运行时与DataStream API的优化，另外就是State backend 模块的优化，本篇文章既是当时做的笔记，又是在后续查阅官网等做的补充, Flink 的一个主要目标取得了重要进展，即让流处理应用的使 ...
2021-05-22 23:40 0 1323 推荐指数：
相关推荐
大数据开发-Flink-窗口全解析
Flink窗口背景 Flink认为Batch是Streaming的一个特例，因此Flink底层引擎是一个流式引擎，在上面实现了流处理和批处理。而Window就是从Streaming到Batch的桥梁。通俗讲，Window是用来对一个无限的流设置一个有限的集合，从而在有界的数据集上进行操作的一种 ...
《大数据实时计算引擎 Flink 实战与性能优化》新专栏
基于 Flink 1.9 讲解的专栏，涉及入门、概念、原理、实战、性能调优、系统案例的讲解。 专栏介绍 扫码下面专栏二维码可以订阅该专栏 首发地址：http://www.54tianzhisheng.cn/2019/11/15/flink-in-action/ 专栏地址：https ...
【大数据】flink 1.10.1 安装
目录 1.环境 2.下载软件 2.1 下载flink 2.2 集成 hadoop 3.standalone 集群模式配置多台机器 3.1 配置 masters 3.2 配置 slaves 3.4 配置 ...
六：大数据架构 - Flink + AI
Flink 在AI 中的价值其实和大数据Lambda架构中流批统一这两个概念有关系，Flink为大数据实时化带来的价值也将同样使AI受益 大数据的发展过程 从Google奠基性的“三架马车” 论文发表后的很长一段时间内，大数据的发展主线上都只有批计算的身影。后来随着大家认识到数据 ...
大数据技术之_04_Hadoop学习_02_HDFS_DataNode(面试开发重点)+HDFS 2.X新特性
第6章 DataNode（面试开发重点）6.1 DataNode工作机制6.2 数据完整性6.3 掉线时限参数设置6.4 服役新数据节点6.5 退役旧数据节点6.5.1 添加白名单6.5.2 黑名单退役6.6 Datanode多目录配置第7章 HDFS 2.X新特性7.1 集群间数据拷贝 ...
大数据基础---Flink学习总括
第一节 初识 Flink 在数据激增的时代，催生出了一批计算框架。最早期比较流行的有MapReduce，然后有Spark，直到现在越来越多的公司采用Flink处理。Flink相对前两个框架真正做到了高吞吐，低延迟，高性能。 1. Flink 是什么？ 1) Flink 的发展历史 ...
大数据IDEA调试flink程序
Flink在IDEA中开发是一件比较困难的事情，网上没有参考资料，就算就业说的太过笼统，不知道是会了不说还是不会瞎说，为了解决flink这个问题，本人特别做了一遍开发的简单说明。主要考虑两个问题，1、语言环境的搭建。2、flink代码编译通过并运行 获取更多大数据视频资料请加QQ群 ...