1、数据仓库 　　我们常提的数仓（DataWarehouse），就是在我们已有的数据库（他是对数据的存储）的基础之上，增加了对数据的OLAP（On-Line Analytical Processing），支持复杂的数据分析操作，更侧重决策支持，提供直观易懂的查询结果，而数据库更着重的是事务处理 ...

数仓分层 ODS：Operation Data Store原始数据 DWD(数据清洗/DWI) data warehouse detail数据明细详情，去除空值，脏数据，超过极限范围的明细解析具体表 DWS(宽表-用户行为，轻度聚合) data warehouse service ...

一、ODS层 1、保持数据原貌，不做任何修改 2、数据压缩：LZO压缩，减少磁盘空间 3、创建的是分区表：可以防止后续的全表扫描 包括 用户行为：string line dt 　　　　 ods_start； ods_event（商品列表、商品详情 ...

@ 目录 数据流向 何为数仓DW 主要特点 与数据库的对比 为何要分层 数据分层 数据运营层ODS 数据仓库层 数据细节层DWD 数据中间层DWM 数据服务层 ...

1.数据仓库DW 1.1简介 Data warehouse（可简写为DW或者DWH）数据仓库，是在数据库已经大量存在的情况下，为了进一步挖掘数据资源、为了决策需要而产生的，它是一整套包括了etl、调度、建模在内的完整的理论体系。数据仓库的方案建设的目的，是为前端查询和分析作为基础，主要应用于 ...

转自：https://blog.csdn.net/pmdream/article/details/113601956 前言： 不是做数仓的，但是也需要了解数仓的知识。 其实分层好多因人而异，问了同事好多分层的区别也不是很清晰。 所以后续有机会还是跟数仓的同事碰一下吧~ 一. 各种名词解释 ...

转自：https://blog.csdn.net/pmdream/article/details/113601956 一. 各种名词解释 1.1 ODS是什么？ ODS层最好理解，基本上就是数据从源表拉过来，进行etl，比如mysql 映射到hive，那么到了hive里面就是ods层 ...

转自：https://blog.csdn.net/pmdream/article/details/113601956 一. 各种名词解释 1.1 ODS是什么？ ODS层最好理解，基本上就是数据从源表拉过来，进行etl，比如mysql 映射到hive，那么到了hive里面就是ods层 ...