spark小文件過多如何解決

參考https://www.cnblogs.com/flymin/p/11345646.html

小文件：存儲於HDFS中小文件，即指文件的大小遠小於HDFS上塊（dfs.block.size）大小的文件。