原文:DataPipeline CTO陳肅:從ETL到ELT,AI時代數據集成的問題與解決方案

引言: 年 月 日,DataPipeline CTO陳肅在第一期公開課上作了題為 從ETL到ELT,AI時代數據集成的問題與解決方案 的分享,本文根據陳肅分享內容整理而成。 大家好 很高興今天有機會和大家分享一些數據集成方面的看法和應用經驗。先自我介紹一下。我叫陳肅,博士畢業於中國科學院大學,數據挖掘研究方向。現在北京數見科技 DataPipeline 任 CTO。之前在中國移動研究院任職算法工程 ...

2018-07-31 16:28 0 799 推薦指數:

查看詳情

CDC+ETL實現數據集成方案

的查詢函數,我們可以捕獲這部分數據ETL數據倉庫技術(Extract-Transfor ...

Thu Jan 09 01:53:00 CST 2020 0 4787
啥是ETLELT

ETL就是Extract、Transfrom、Load即抽取、轉換、加載三個英文單詞首字母的集合。抽取:就是從源系統抽取需要的數據,這些源系統可以是同構也可以是異構的:比如源系統可能是Excel電子表格、XML文件、關系型數據庫,而目標系統通常都是 ...

Sun Oct 09 19:25:00 CST 2016 0 2897
DataPipeline丨構建實時數據集成平台時,在技術選型上的考量點

文 | DataPipeline CTO 隨着企業應用復雜性的上升和微服務架構的流行,數據正變得越來越以應用為中心。 服務之間僅在必要時以接口或者消息隊列方式進行數據交互,從而避免了構建單一數據庫集群來支撐不斷增長的業務需要。以應用為中心的數據持久化架構,在帶來可伸縮性好處 ...

Wed Jun 05 00:29:00 CST 2019 1 1400
Unitils集成DBUnit的問題-解決方案

  Unitils在集成DBunit時,如果數據庫是mysql時,就會出現一些如下:   org.unitils.core.UnitilsException: Error inserting test data from DbUnit dataset for method...... ...

Wed Jun 25 18:47:00 CST 2014 2 2676
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM