从低往高层:
ODS>DWD,DWS>DM
ODS:Operation Data Store
原始数据,业务库数据,日志数据,mongodb等数据源,api抓取,gio
DWD(数据清洗/DWI) data warehouse detail
数据明细详情,去除空值,脏数据,超过极限范围的
明细解析
DWS(聚合) data warehouse Summary
轻度聚合对DWD
DM-应用层聚合,宽表 Application Data Store
做分析处理同步到RDS数据库里边
从低往高层:
ODS>DWD,DWS>DM
ODS:Operation Data Store
原始数据,业务库数据,日志数据,mongodb等数据源,api抓取,gio
DWD(数据清洗/DWI) data warehouse detail
数据明细详情,去除空值,脏数据,超过极限范围的
明细解析
DWS(聚合) data warehouse Summary
轻度聚合对DWD
DM-应用层聚合,宽表 Application Data Store
做分析处理同步到RDS数据库里边
本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。