什么是ETL?
ETL，是英文 Extract-Transform-Load 的缩写，用来描述将数据从来源端经过抽取（extract）、交互转换（transform）、加载（load）至目的端的过程。ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程，因而也称为数据仓库技术。其目的是将分散 ...
原文：ETL需求要求
前言 ETL落地dw层，dw层各表一般是由多个表关联取数得到的大宽表，在ETL需求中的dw设计应该考虑以下内容，目的是确保需求更清晰，开发和测试才能更高效的进行。 业务需求为基础 基于业务需求做足够多的业务分析，来自客户的整体业务需求 来自标签 人群 dashboard等具体的业务需求。 关联逻辑设计 关联设计，即表之间的join关系 join之后的过滤条件和取record的逻辑。 明确主表 依赖 ...
2021-08-19 10:39 0 143 推荐指数：
相关推荐
什么是etl
ETL，是英文Extract-Transform-Load的缩写，用来描述将数据从来源端经过抽取（extract）、转换（transform）、加载（load）至目的端的过程。 ETL的质量问题具体表现为正确性、完整性、一致性、完备性、有效性、时效性和可获取性等几个特性。 要实现ETL，首先要 ...
一个产品从需求到上线的整个规范和要求
一：需求要求 由产品经理发起评审会议，评审邮件包含：需求说明书，原型设计，流程设计。 评审过后，修改后的内容（需求说明书，原型设计，流程设计等）由产品经理统一邮件发出。 二、设计要求 设计应 ...
《刺客信条4：黑旗》配置需求测试，硬件要求高不高
说到《刺客信条》，大家一定会想起鼎鼎大名的育碧蒙特利尔工作室。除了《刺客信条》以外，《波斯王子》、《细胞分裂》、《孤岛惊魂》等系列游戏大作均出自他们之手，其中《波斯王子》已经电影化，《刺客信条》随后也 ...
ETL概念，ETL流程
ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程，目的是将企业中的分散、零乱、标准不统一的数据整合到一起，为企业的决策提供分析依据。 ETL是BI项目重要的一个环节。 通常情况下，在BI项目中ETL会花掉整个项目至少1/3的时间,ETL设计的好坏直接关接到BI项目的成败 ...
ETL是什么
一、ETL发展的背景 信息是现代企业的重要资源，是企业运用科学管理、决策分析的基础。据统计，数据量每经过2-3年时间就会成倍增长，这些数据蕴含着巨大的商业价值，而企业所关注的通常只占总数据量的2%~4%左右。因此，企业仍然没有最大化地利用已存在的数据资源，以至于浪费了更多的时间和资金，也失去制定 ...
ETL测试
今天和大家分享下我作为大数据测试工程师对ETL测试的一些认识。 一、ETL测试工程师的主要责任 对于一个ETL测试工程师而言，其关键的责任有三大类：1. 源数据分析（包含：数据库表、文本等类型数据分析）2. 业务转换逻辑实现（包含：code diff，目标表全量数据的逻辑实现验证）3. ...