HIVE数据仓库分层


从低往高层:

ODS>DWD,DWS>DM

ODS:Operation Data Store
原始数据,业务库数据,日志数据,mongodb等数据源,api抓取,gio

DWD(数据清洗/DWI) data warehouse detail
数据明细详情,去除空值,脏数据,超过极限范围的
明细解析

DWS(聚合) data warehouse Summary
轻度聚合对DWD

DM-应用层聚合,宽表 Application Data Store
做分析处理同步到RDS数据库里边


免责声明!

本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。



 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM