Flink 剖析 1.概述 　　在如今數據爆炸的時代，企業的數據量與日俱增，大數據產品層出不窮。今天給大家分享一款產品—— Apache Flink，目前，已是 Apache 頂級項目之一。那么，接下來，筆者為大家介紹Flink 的相關內容。 2.內容 2.1 What's ...

​ ​好久沒更新了，今天趁1024更新一篇，最近工作中遇到這個漏洞，今天自己來做一下這個漏洞復現。 Apache Flink未授權訪問-遠程代碼命令執行-復現 ​ 一、漏洞簡介 Apache Flink Dashboard默認沒有用戶權限認證。攻擊者可以通過未授權的Flink ...

前言 Flink 是一種流式計算框架，為什么我會接觸到 Flink 呢？因為我目前在負責的是監控平台的告警部分，負責采集到的監控數據會直接往 kafka 里塞，然后告警這邊需要從 kafka topic 里面實時讀取到監控數據，並將讀取到的監控數據做一些 聚合/轉換/計算 等操作 ...

感謝王祥虎@wangxianghu 投稿 Apache Hudi是由Uber開發並開源的數據湖框架，它於2019年1月進入Apache孵化器孵化，次年5月份順利畢業晉升為Apache頂級項目。是當前最為熱門的數據湖框架之一。 1. 為何要解耦 Hudi自誕生至今一直使用Spark ...

Apache Flink是一個面向分布式數據流處理和批量數據處理的開源計算平台，它能夠基於同一個Flink運行時（Flink Runtime），提供支持流處理和批處理兩種類型應用的功能。現有的開源計算方案，會把流處理和批處理作為兩種不同的應用類型，因為他們它們所提供的SLA是完全不相同的：流 ...

JVM： JAVA本身提供了垃圾回收機制來實現內存管理 現今的GC（如Java和.NET）使用分代收集（generation collection），依照對象存活時間的長短使用不同的垃圾 ...

Flink程序是實現分布式集合轉換的常規程序。集合最初是從源創建的。通過接收器(slink)返回結果，接收器可以將數據寫到某個文件或stdout。Flink可以在各種環境(context)中運行，本地JVM或集群。 1.數據集和數據流 Flink用特殊的類DataSet ...

Apache Flink 社區迎來了激動人心的兩位數位版本號，Flink 1.10.0 正式宣告發布！作為 Flink 社區迄今為止規模最大的一次版本升級，Flink 1.10 容納了超過 200 ...