花费 11 ms
Flink(一)Flink的入门简介

一. Flink的引入 这几年大数据的飞速发展,出现了很多热门的开源社区,其中著名的有 Hadoop、Storm,以及后来的 Spark,他们都有着各自专注的应用场景。Spark 掀 ...

2018-10-09 03:09 1 63920
Flink架构及其工作原理

目录 System Architecture Data Transfer in Flink Event Time Processing State Manageme ...

2018-12-15 22:19 4 28112
Flink(三)Flink开发IDEA环境搭建与测试

一.IDEA开发环境 1.pom文件设置 2.flink开发流程 Flink具有特殊类DataSet并DataStream在程序中表示数据。您可以将它们视为可以包含重复项的不可变数 ...

2018-10-21 22:47 4 26313
Spark streaming消费Kafka的正确姿势

前言 在游戏项目中,需要对每天千万级的游戏评论信息进行词频统计,在生产者一端,我们将数据按照每天的拉取时间存入了Kafka当中,而在消费者一端,我们利用了spark streaming从ka ...

2019-04-25 06:54 0 14019
Kafka与Flink集成

Apache Flink是新一代的分布式流式数据处理框架,它统一的处理引擎既可以处理批数据(batch data)也可以处理流式数据(streaming data)。在实际场景中,Flink利用Apa ...

2017-07-24 03:52 15 28259
美团点评基于 Flink 的实时数仓建设实践

引言 近些年,企业对数据服务实时化服务的需求日益增多。本文整理了常见实时数据组件的性能特点和适用场景,介绍了美团如何通过 Flink 引擎构建实时数据仓库,从而提供高效、稳健的实时数据服务。此前我们 ...

2018-10-19 18:45 2 16971
Flink-Kafka-Connector Flink结合Kafka实战

戳更多文章: 1-Flink入门 2-本地环境搭建&构建第一个Flink应用 3-DataSet API 4-DataSteam API 5-集群部署 6-分布式缓存 7-重启策 ...

2019-04-28 03:47 0 11421

 
粤ICP备18138465号  © 2018-2024 CODEPRJ.COM