String dir = "s3a://example/";
String currentDir = dir + "{1[5-9],2[01]}/*.txt";
JavaRDD<String> input = sc.textFile(currentDir);
此段代碼會讀入amazon s3上example目錄下的15, 16, 17, 18, 19, 20, 21目錄下的所有txt文件
String dir = "s3a://example/";
String currentDir = dir + "{1[5-9],2[01]}/*.txt";
JavaRDD<String> input = sc.textFile(currentDir);
此段代碼會讀入amazon s3上example目錄下的15, 16, 17, 18, 19, 20, 21目錄下的所有txt文件
本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。