首页
Python
Java
前端
数据库
Linux
Chatgpt专题
开发者工具箱
mappartitionswithindex专题
Spark算子:RDD基本转换操作(5)–mapPartitions/mapPartitionsWithIndex
mapPartitions def mapPartitions[U](f: (Iterator[T]) => Iterator[U], preservesPartitioning: Boolean = false)(implicit arg0: ClassTag[U]): RDD[U] 该函数和map函数类似,只不过映射函数的参数由RDD中的每一个元素变成了RDD中每一个分区的迭代
阅读更多...