flink批處理中的source以及sink介紹
一、flink在批處理中常見的source flink在批處理中常見的source主要有兩大類: 1.基於本地集合的source（Collection-based-source） 2.基於文件的source（File-based-source ...
原文：Flink 在又拍雲日志批處理中的實踐
日前，由又拍雲舉辦的大數據與 AI 技術實踐 Open Talk 杭州站沙龍在杭州西溪科創園順利舉辦。本次活動邀請了有贊 個推 方得智能 又拍雲等公司核心技術開發者，現場分享各自領域的大數據技術經驗和心得。以下內容整理自又拍雲資深開發工程師張召現場分享： 張召，資深開發工程師，目前負責又拍雲 CDN 的刷新預熱 日志處理和運維平台開發。熟悉 OpenResty，在 Web 開發領域經驗頗豐，目前熱 ...
2021-02-03 15:58 1 344 推薦指數：
相關推薦
Flink SQL 批處理
AdPojo{channel='朋友圈', subject='英語', refer='H5', reg='100', ord='100', pv='100', uv='100'} ...
Flink批處理讀寫Hive
...
flink入門到實戰（6）flink批處理從0到1
一、DataSet API之Data Sources（消費者之數據源） 介紹： flink提供了大量的已經實現好的source方法，你也可以自定義source 通過實現sourceFunction接口來自定義無並行度的source， 或者你也可以通過實現 ...
flink初體驗-批處理與流處理
一、環境准備 本機環境：jdk11、scala2.12、maven3.6 新建一個maven項目，pom如下 項目結構如下 1、添加scala源文件，新建一個scala的文件夾， ...
【實戰分享】又拍雲 OpenResty / Nginx 服務優化實踐
2018 年 11 月 17 日，由 OpenResty 主辦的 OpenResty Con 2018 在杭州舉行。本次 OpenResty Con 的主題涉及 OpenResty 的新開源特性、業界最佳實踐、性能優化、Trace、 API 網關等方面。 又拍雲受邀參加 OpenResty ...
Flink批處理讀取Hive寫入MySql
把hive 表stu77 的數據寫入 mysql 表test_stu 中. 中間可以加自己的邏輯. ...
Flink： 一次失敗的批處理經歷
-----------更新說明---------- 突然就想水一篇博客，剛好說明一下這段時間基本沒有更新的問題。 簡單介紹下我的職業生涯，大家有留意的話，可以在博客園上看到，我的博客是從20 ...