一、ODS层 1、保持数据原貌，不做任何修改 2、数据压缩：LZO压缩，减少磁盘空间 3、创建的是分区表：可以防止后续的全表扫描 包括 用户行为：string line dt 　　　　 ...

一、质疑分层不合理 云上大数据数仓解决方案：https://www.aliyun.com/solution/datavexpo/datawarehouse 1、离线数仓--基于hive 2 ...

一、用户行为数仓. 1、数仓分层架构图 2、埋点行为数据基本格式(基本字段) 3、项目经验总结 MySQL的高可用 存储元数据，搭建时要进行高可用HA 4、日期函数 ...

一、有没有遇到过问题，怎么进行解决的 1、空值问题 本质：hive底层存储空数据使用\n《==》MySQL存储空数据使用null 解决：双向导入均分别使用两个参数☆，之前讲过 2、数据一致性问 ...