原文:Flink 在又拍云日志批处理中的实践

日前,由又拍云举办的大数据与 AI 技术实践 Open Talk 杭州站沙龙在杭州西溪科创园顺利举办。本次活动邀请了有赞 个推 方得智能 又拍云等公司核心技术开发者,现场分享各自领域的大数据技术经验和心得。以下内容整理自又拍云资深开发工程师张召现场分享: 张召,资深开发工程师,目前负责又拍云 CDN 的刷新预热 日志处理和运维平台开发。熟悉 OpenResty,在 Web 开发领域经验颇丰,目前热 ...

2021-02-03 15:58 1 344 推荐指数:

查看详情

flink批处理的source以及sink介绍

一、flink批处理中常见的source   flink批处理中常见的source主要有两大类:       1.基于本地集合的source(Collection-based-source)        2.基于文件的source(File-based-source ...

Tue May 21 03:39:00 CST 2019 0 2580
Flink SQL 批处理

AdPojo{channel='朋友圈', subject='英语', refer='H5', reg='100', ord='100', pv='100', uv='100'} ...

Thu Sep 26 02:04:00 CST 2019 0 827
flink入门到实战(6)flink批处理从0到1

一、DataSet API之Data Sources(消费者之数据源) 介绍: flink提供了大量的已经实现好的source方法,你也可以自定义source 通过实现sourceFunction接口来自定义无并行度的source, 或者你也可以通过实现 ...

Fri May 08 07:17:00 CST 2020 0 744
flink初体验-批处理与流处理

一、环境准备 本机环境:jdk11、scala2.12、maven3.6 新建一个maven项目,pom如下 项目结构如下 1、添加scala源文件,新建一个scala的文件夹, ...

Mon Oct 19 22:36:00 CST 2020 0 575
【实战分享】又 OpenResty / Nginx 服务优化实践

2018 年 11 月 17 日,由 OpenResty 主办的 OpenResty Con 2018 在杭州举行。本次 OpenResty Con 的主题涉及 OpenResty 的新开源特性、业界最佳实践、性能优化、Trace、 API 网关等方面。 又受邀参加 OpenResty ...

Tue Nov 27 19:35:00 CST 2018 0 648
Flink: 一次失败的批处理经历

-----------更新说明---------- 突然就想水一篇博客,刚好说明一下这段时间基本没有更新的问题。 简单介绍下我的职业生涯,大家有留意的话,可以在博客园上看到,我的博客是从20 ...

Thu Jun 25 15:25:00 CST 2020 0 1323
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM