Spark RDD概念学习系列之如何创建Pair RDD


 

 

  不多说,直接上干货!

 

 

创建Pair RDD

 

 

Python语言
pairs = lines.map(lambda x: (x.split(" ")[0], x))

 

 

 

 scala语言

val pairs = lines.map(x => (x.split(" ")(0), x))

 

 

 

Java语言

PairFunction keyData =
    new PairFunction() {
    public Tuple2 call(String x) {
        return new Tuple2(x.split(" ")[0], x);
    }
};
JavaPairRDD pairs = lines.mapToPair(keyData);

 


免责声明!

本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。



 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM