花费 5 ms
SPARK之map()和mapPartition()的区别

map():每次处理一条数据 mapPartition():每次处理一个分区的数据,这个分区的数据处理完后,原RDD中分区的数据才能释放,可能导致OOM 当内存空间较大的时候建议使用m ...

Wed Sep 04 05:39:00 CST 2019 0 832

 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM