花费 30 ms
Hive Map结构

平时很少用到map类型,这次用到了记录一下。 适用场景:行转列,且mid的key个数可能不一样的情况。 举个栗子: 构造数据: mid ...

Wed Dec 16 04:57:00 CST 2020 0 587
HIVE 大表JOIN大表优化方法

今天遇到了百亿级别的数据量JOIN 十亿级别的数据量 发现reduce 40分钟还没有出来,进去看单个task 某些task要30min+才能跑完成 ...

Sun May 30 23:53:00 CST 2021 0 211

 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM