map与flatmap的区别


总结

map的作用很容易理解就是对rdd之中的元素进行逐一进行函数操作,映射为另外一个rdd。
flatMap的操作是将函数应用于rdd之中的每一个元素,将返回的迭代器的所有内容构成新的rdd。通常用来切分单词。

1. map会对每一条输入进行指定的操作,然后为每一条输入返回一个对象。

2. flatmap函数则是两个操作的集合--正是先映射后扁平化

操作1:同map函数一样,对每一条输入进行指定的操作,然后为每一条输入返回一个对象
操作2:最后将所有对象合并为一个对象

实操

val list2 : List[String] = List(List("A", "B"), List("C", "D"))
val list3 : List[Array[String]] = list2.map(x => {
  x.split(" ")
})
val strings: List[String] = list2.flatMap(x => {
  x.split(" ")
})


map:List里有小的List
flatmap:是先flat再map,只能压一次,形成一个新的List集合,把原元素放进新的集合里面


免责声明!

本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。



 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM