花费 15 ms
【大数据】PySpark 使用 FileSystem 操作 HDFS

需求:spark 可以直接使用 textFile 读取 HDFS,但是不能判断 hdfs 文件是否存在,不过 pyspark 可以调用 java 程序,因此可以调用 FileSystem来实现: ...

Mon Dec 27 05:47:00 CST 2021 0 962
MySQL left join 查询很慢(1)

现有两张数据表:A、B: 问题:A left join B 速度很慢: 原因:task_id 没有索引 解决方案:给 B.task_id 添加索引 ...

Tue May 18 06:21:00 CST 2021 0 1010

 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM