簡介: 唯品會 Flink 的容器化實踐應用,Flink SQL 平台化建設,以及在實時數倉和實驗平台上的應用案例。 轉自dbaplus社群公眾號作者:王康,唯品會數據平台高級開發工程師 自 2017 年起,為保障內部業務在平時和大促期間的平穩運行,唯品會就開始基 ...
簡介:本文由知乎技術平台負責人孫曉光分享,主要介紹知乎 Flink 數據集成平台建設實踐。內容如下: . 業務場景 . 歷史設計 . 全面轉向 Flink 后的設計 . 未來 Flink 應用場景的規划。 本文由知乎技術平台負責人孫曉光分享,主要介紹知乎 Flink 數據集成平台建設實踐。內容如下: 業務場景 歷史設計 全面轉向 Flink 后的設計 未來 Flink 應用場景的規划 一 業務場景 ...
2021-04-23 09:59 0 231 推薦指數:
簡介: 唯品會 Flink 的容器化實踐應用,Flink SQL 平台化建設,以及在實時數倉和實驗平台上的應用案例。 轉自dbaplus社群公眾號作者:王康,唯品會數據平台高級開發工程師 自 2017 年起,為保障內部業務在平時和大促期間的平穩運行,唯品會就開始基 ...
背景 字節跳動開發套件數據集成團隊(DTS ,Data Transmission Service)在字節跳動內基於 Flink 實現了流批一體的數據集成服務。其中一個典型場景是 Kafka/ByteMQ/RocketMQ -> HDFS/Hive 。Kafka/ByteMQ ...
背景 在大數據時代,數據已經成為公司的核心競爭力。此前,我們介紹了美團酒旅起源數據治理平台的建設與實踐,主要是通過各種數據分析挖掘手段,為公司發展決策和業務開展提供數據支持。 近期,業內數據安全事件頻發,給相關企業造成了無可挽回的損失,更為數據安全防護意識薄弱的企業敲響了警鍾。如何對公 ...
了DataPipeline是如何基於Kafka Connect框架構建實時數據集成平台的應用實踐。以下內容 ...
構建實時數據集成平台的應用實踐。以下內容是基於現場錄音整理的文字,供大家參考。 什么是數據集成?最簡單的 ...
3.1 基於衛生信息化政策性要求 3.1.1 公立醫院改革的要求 在《關於公立醫院改革試點的指導意見》中,對公立醫院改革明確提出:“以醫院管理和 電子病歷為重點推進公立醫院信息化建設”;“研究制訂醫療機構內部信息管理的規范和標准; 逐步建立醫院之間、上級 ...