kettle的使用（ETL，数据仓库技术）
本周项目上用到了kettle并且需要做任务调度，听老师说用kettle自带的调度不大稳定于是便baidu了下，参照这篇文章完成了通过kitchen的调度，简单说就是通过windows的计划任务来调用.bat的批处理文件来开始kettle作业。 转自：http://hi.baidu.com ...
原文：ETL技术( Extract-Transform-Load) 数据仓库技术-比如kettle
每次面试，互联网的面试官，经常问我有没有用过ETL,每次我都懵逼，说没用过，觉得是多么高大上的东东，数据仓储 今天查了一下，我晕，自己天天用的Kettle就是最典型的ETL， 可以实现不同数据库之间的数据抽取，转换，只需要你有相应的数据库driver即可 查了一下资料记录一下： ETL，是英文 Extract Transform Load 的缩写，用来描述将数据从来源端经过抽取 extract 转 ...
2018-04-13 14:40 1 3577 推荐指数：
相关推荐
技术分享丨数据仓库的建模与ETL实践技巧
摘要：如何搭建数据仓库，在这个过程中都应该遵循哪些方法和原则，项目实践中有哪些技巧。 一、数据仓库的“心脏” 首先来谈谈数据模型。模型是现实世界特征的模拟和抽象，比如地图、建筑设计沙盘，飞机模型等等。 而数据模型DataModel是现实世界数据特征的抽象。 在数据仓库项目 ...
数据仓库之ETL漫谈
ETL，Extraction-Transformation-Loading的缩写，中文名称为数据抽取、转换和加载。 大多数据仓库的数据架构可以概括为： 数据源-->ODS(操作型数据存储)-->DW-->DM(data mart) ETL贯穿其各个环节 ...
浅谈数据仓库的ETL
一、基本概念 ETL，它是Extract、Transform、Load三个单词的首写字母。ETL是建立数据仓库最重要的处理过程，也是工作量最大的环节，一般会占到整个数据仓库建立的一半工作量。 抽取：从操作型数据源获取数据； 转换：转换数据，使之转变为适用于查询和分析 ...
Kettle学习系列之数据仓库、数据整合、ETL、ELT和EII之间的区别？
不多说，直接上干货！ 在数据仓库领域里，的一个重要概念就是数据整合（data intergration）。数据整合它就是把不同数据库中的数据整合到一起，对外提供统一的数据视图。 数据整合最典型的案例就是整合存货数据和订单数据。数据整合的另一个案例就是把各个部门 ...
数据仓库ETL案例学习（一）
来自课程案例学习 某跨国食品超市的信息管理系统，每天都会记录成千上万条各地连锁超市的销售数据。基于大数据的背景，该公司的管理层决定建立FoodMart数据仓库，期望能从庞大的数据中挖掘出有商业价值的信息，来进一步帮助管理层进行决策。 设计一个销售数据仓库。要求： 1、至少4个维度，每个 ...
数据仓库ETL案例学习（二）
来自案例学习 数据仓库经过ETL成功创建之后，就可以对数据仓库进行多维分析任务。 任务主要分为： 1、设置数据源，并添加分析时所需表到数据视图。 2、创建并设置维度。 3、设置时间维。 4、设置度量属性，创建维度用法 5、数据部署及展现 * 以下使用SQL Server ...
python实现数据仓库ETL
数据仓库数据处理能力强, 在加载后再做转换, 可以充分利用这一优势. 另外, Extract和Load过 ...