原文:袋鼠云:基于Flink构建实时计算平台的总体架构和关键技术点

数栈是云原生 站式数据中台PaaS,我们在github和gitee上有一个有趣的开源项目:FlinkX,FlinkX是一个基于Flink的批流统一的数据同步工具,既可以采集静态的数据,也可以采集实时变化的数据,是全域 异构 批流一体的数据同步引擎。大家喜欢的话请给我们点个star star star github开源项目:https: github.com DTStack flinkx gitee ...

2021-07-16 16:14 0 470 推荐指数:

查看详情

实时计算 Flink总体介绍

简介: 实时计算 Flink 版(Alibaba Cloud Realtime Compute for Apache Flink,Powered by Ververica)是阿里基于 Apache Flink 构建的企业级、高性能实时大数据处理系统,由 Apache Flink 创始团队官方出品 ...

Fri Jun 04 18:39:00 CST 2021 0 298
Flink系列八】构建实时计算平台——动态加载UDF

前言 本文首发自https://www.cnblogs.com/slankka/ 转载请注明出处。 本文的主要内容是介绍如何动态加载Flink作业的UDF。 Classloader 加载UDF一定是classLoader做的,而作业启动的过程中,App ClassLoader的具体实现类 ...

Tue May 11 01:06:00 CST 2021 0 1519
Flink系列零】构建实时计算平台——FlinkSQL 作业菜鸟笔记

前言 因为最近的需求是做FlinkSQL平台,需要在实时计算平台上集成FlinkSQL功能,但目前刚刚有了研究成果,所以有了这篇笔记。 第一步:编写一个流 这里使用python编写的一个流,比Java简洁。 需要注意的是 pip install kakfa-python,不能是 pip ...

Mon May 10 19:56:00 CST 2021 0 267
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM