原文:DataPipeline CTO陈肃:从ETL到ELT,AI时代数据集成的问题与解决方案

引言: 年 月 日,DataPipeline CTO陈肃在第一期公开课上作了题为 从ETL到ELT,AI时代数据集成的问题与解决方案 的分享,本文根据陈肃分享内容整理而成。 大家好 很高兴今天有机会和大家分享一些数据集成方面的看法和应用经验。先自我介绍一下。我叫陈肃,博士毕业于中国科学院大学,数据挖掘研究方向。现在北京数见科技 DataPipeline 任 CTO。之前在中国移动研究院任职算法工程 ...

2018-07-31 16:28 0 799 推荐指数:

查看详情

CDC+ETL实现数据集成方案

的查询函数,我们可以捕获这部分数据ETL数据仓库技术(Extract-Transfor ...

Thu Jan 09 01:53:00 CST 2020 0 4787
啥是ETLELT

ETL就是Extract、Transfrom、Load即抽取、转换、加载三个英文单词首字母的集合。抽取:就是从源系统抽取需要的数据,这些源系统可以是同构也可以是异构的:比如源系统可能是Excel电子表格、XML文件、关系型数据库,而目标系统通常都是 ...

Sun Oct 09 19:25:00 CST 2016 0 2897
DataPipeline丨构建实时数据集成平台时,在技术选型上的考量点

文 | DataPipeline CTO 随着企业应用复杂性的上升和微服务架构的流行,数据正变得越来越以应用为中心。 服务之间仅在必要时以接口或者消息队列方式进行数据交互,从而避免了构建单一数据库集群来支撑不断增长的业务需要。以应用为中心的数据持久化架构,在带来可伸缩性好处 ...

Wed Jun 05 00:29:00 CST 2019 1 1400
Unitils集成DBUnit的问题-解决方案

  Unitils在集成DBunit时,如果数据库是mysql时,就会出现一些如下:   org.unitils.core.UnitilsException: Error inserting test data from DbUnit dataset for method...... ...

Wed Jun 25 18:47:00 CST 2014 2 2676
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM